大数据时代下，海量数据中蕴藏的价值得以挖掘，但也带来隐私信息与关键性敏感数据保护方面的困难。数据脱敏技术是解决这一问题的重要手段之一。传统的脱敏方法人工干预大，配置成本高，对用户的专业素养要求高。 为解决这一问题，如果将数据安全脱敏技术与人工智能的自主学习和强大的数据分析能力相结合，则无需过多人工干预，会显著加强数据脱敏系统的可靠性和易用性，在保证安全性的同时，实现易学习、免配置、自动脱敏和自适应
转载
2023-11-30 12:53:25
92阅读
# Hive大数据脱敏实现指南
## 1. 什么是数据脱敏？
数据脱敏是指对敏感数据进行处理，以防止非授权用户访问或使用这些数据。通常，这些数据包括个人身份信息（PII）、财务数据等。在大数据环境中，Hive 是一个流行的数仓工具，我们可以用它来实现数据脱敏。
## 2. 脱敏流程概述
实现Hive大数据脱敏的流程可以概括为以下几个步骤：
| 步骤 | 描述
原创
2024-10-27 05:21:06
50阅读
一、什么是数据脱敏？数据脱敏(Data Masking),又称数据漂白、数据去隐私化或数据变形。 百度百科对数据脱敏的定义为：指对某些敏感信息通过脱敏规则进行数据的变形，实现敏感隐私数据的可靠保护。在涉及客户安全数据或者一些商业性敏感数据的情况下，在不违反系统规则条件下，对真实数据进行改造并提供测试使用，如身份证号、手机号、卡号、客户号等个人信息都需要进行数据脱
转载
2023-09-27 11:36:56
155阅读
大数据平台通过将所有数据整合起来，充分分析与挖掘数据的内在价值，为业务部门提供数据平台，数据产品与数据服务。
转载
2021-07-27 09:53:00
656阅读
数据安全之数据脱敏技术介绍！
转载
2021-06-23 10:49:44
1381阅读
一、Hive练习1.分区表我们有这样的一组数据：6,APPLE,北京,352,APPLE,上海,47数据脱敏，将原来的真实数据中敏感的信息进行模糊化，或者部分数据直接删除。id-》uuid-》变成了自动增长手机型号-》具体到什么品牌什么型号-》只保留了手机品牌城市-》 国-县-市-区（数字表示）-》只保留城市年龄-》身份证号码-》经过脱敏后，转换为年龄继续脱敏，删除部分数据，去除字段 。。。。。数
转载
2023-10-22 21:35:11
103阅读
# 大数据Hive的脱敏插件
## 引言
在今天的信息化时代，数据安全与隐私保护显得尤为重要。尤其是在大数据场景下，敏感数据的保护不可忽视。Hive作为一种流行的数据仓库工具，在处理大规模数据时，需要有效的脱敏技术来保护用户的隐私。在这篇文章中，我们将探讨Hive的脱敏插件，并提供代码示例，帮助大家了解如何在大数据环境中实现数据脱敏。
## 脱敏的概念
数据脱敏是指对敏感数据进行处理，使其
原创
2024-10-28 05:56:58
93阅读
大数据安全需要通过 加密保护静态/传输数据、脱敏保障隐私 和 精细化访问控制 构建纵深防御体系。以下是关键技术方案与最佳实践：1. 数据加密：全生命周期保护静态加密（At Rest）云存储加密服务端加密（SSE）：AWS S3（AES-256）、Azure Storage（Microsoft托管密钥）。客户密钥（CMK）：使用AWS KMS或Hadoop&n
数据脱敏(Data Masking),又称数据漂白、数据去隐私化或数据变形。 百度百科对数据脱敏的定义为：指对某些敏感信息通过脱敏规则进行数据的变形，实现敏感隐私数据的可靠保护。在涉及客户安全数据或者一些商业性敏感数据的情况下，在不违反系统规则条件下，对真实数据进行改造并提供测试使用，如×××号、手机号、卡号、客户号等个人信息都需要进行数据脱敏。 &
原创
2018-03-08 20:05:27
9722阅读
春意浓，百草纵，龙抬头，花正盛，春龙翘首，万象更新。2月，FineReport 新鲜出炉了一批好用的功能和模板，一起来看看吧~1、产品新功能数据脱敏功能FineReport 新增「数据脱敏」功能，能够对某些敏感信息通过脱敏规则进行数据的变形，从而实现对敏感隐私数据的保护。1）降低敏感数据泄密风险姓名、年龄、手机号、银行帐号等敏感信息的数据，通过脱敏规则变成符合数据使用场景的非敏感数据，明显降低敏感
转载
2024-05-27 18:11:56
82阅读
一、什么是数据脱敏？数据脱敏(Data Masking),又称数据漂白、数据去隐私化或数据变形。
百度百科对数据脱敏的定义为：指对某些敏感信息通过脱敏规则进行数据的变形，实现敏感隐
转载
2021-06-22 13:48:37
2647阅读
一、数据脱敏 (booster-common-sensitive)什么是数据脱敏：数据脱敏又称数据去隐私化或数据变形，是在给定的规则、策略下对敏感数据进行变换、修改的技术机制，能够在很大程度上解决敏感数据在非可信环境中使用的问题。 根据数据保护规范和脱敏策略，对业务数据中的敏感信息实施自动变形，实现对敏感信息的隐藏。数据脱敏的方法有哪些?几种常见的脱敏方法包括：替换、置乱、均值化、反推断、偏移和F
转载
2023-09-18 10:03:59
408阅读
1、数据脱敏概念数据脱敏也叫数据的去隐私化，在我们给定脱敏规则和策略的情况下，对敏感数据比如 手机号、银行卡号 等信息，进行转换、修改或者遮盖的一种技术手段。该技术主要用于防止敏感数据直接在不可靠的环境下使用。脱敏原则：数据脱敏应保持原有的数据特征、业务规则和数据关联性，保证后续开发、测试以及数据分析过程中不会受到脱敏的影响。确保脱敏前后的数据一致性和有效性。2、数据脱敏分类数据脱敏分为静态数据脱
转载
2023-09-22 15:45:19
286阅读
一. 数据脱敏是什么？数据脱敏顾名思义就是对敏感数据进行变形处理，其目的是保护隐私数据等信息的安全，例如机构和企业收集的个人身份信息、手机号码、银行卡信息等敏感数据。数据脱敏从技术上可以分为静态数据脱敏和动态数据脱敏两种。静态数据脱敏一般应用于数据外发场景，例如需要将生产数据导出发送给开发人员、测试人员、分析人员等；动态脱敏一般应用于直接连接生产数据的场景，例如运维人员在运维的工作中直接连接生产数
转载
2023-07-17 15:23:10
180阅读
上回说到，美创科技新手销售小李历经千辛终于首战告捷，完成数据脱敏第一单 （脱敏方式介绍）并在案例分享会上进行总结▼ （美创科技案例分享会） 那么小李的秘笈究竟是什么今天我们一一揭晓 静态脱敏产品三个典型应用场景分析在数据流动、共享、交换成为趋势的今天，数据脱敏已经成为实现敏感数据保护的重要手段之一。数据脱敏产品也逐步被金融、政府、企业等行业客户广泛使用。当前数据脱敏产品主要
ShardingSphere 如何抽象数据脱敏？数据脱敏从概念上讲比较容易理解，但在具体实现过程中存在很多方案。在介绍基于数据脱敏的具体开发过程之前，我们有必要先来梳理实现数据脱敏的抽象过程。这里，我将从敏感数据的存储方式、敏感数据的加解密过程以及在业务代码中嵌入加解密的过程这三个维度来抽象数据脱敏。 针对每一个维度，我也将基于 ShardingSphere 给出这个框架的具体抽象过程
转载
2024-07-17 14:57:43
76阅读
数据脱敏
原创
2022-12-19 17:31:24
193阅读
数据脱敏介绍数据脱敏(Data Masking),又称数据漂白、数据去隐私化或数据变形。百度百科对数据脱敏的定义为：指对某些敏感信息通过脱敏规则进行数据的变形，实现敏感隐私数据 的可靠保护。这样，就可以在开发、测试和其它非生产环境以及外包环境中安全地使用脱敏后的真实数据集。可以看到数据脱敏具有几个关键点：敏感数据、脱敏规则、使用环境。敏感数据，又称隐私数据，常见的敏感数据有: 姓名、身份证
原创
2022-09-01 06:00:09
904阅读
伴随着数据的流动，往往意味着数据从高安全环境迁移到低安全环境，甚至是非安全环境，而数据脱敏则是保证流通数据安全最有效的方法。从数据流动的场景来看，目前主要有两大类：一是为开发、测试、培训等提供脱敏后的生产数据，二是为数据交易、数据交换、数据分析等第三方数据应用场景提供适用的数据。目前，数据脱敏需求仍主要集中在第一种场景，即开发、测试等环境下的数据安全。下面，我们主要针对这种场景进行分析，一款好的数
转载
2023-12-15 09:09:25
53阅读
1 简介对于什么是数据脱敏，以下解释来自百度百科数据脱敏是指对某些敏感信息通过脱敏规则进行数据的变形，实现敏感隐私数据的可靠保护。在涉及客户安全数据或者一些商业性敏感数据的情况下，在不违反系统规则条件下，对真实数据进行改造并提供测试使用，如身份证号、手机号、卡号、客户号等个人信息都需要进行数据脱敏。在大数据环境下隐私保护的需求越来越频繁的被提及，对于一些敏感的信息，市面上很多应用都有一些脱敏的处理
转载
2023-09-18 03:33:15
208阅读
