大数据脱敏是什么意思
大数据脱敏是什么意思
大数据数据脱敏,又称数据漂白、数据去隐私化或数据变形,是指对某些敏感信息通过脱敏规则进行数据的变形,实现敏感隐私数据的可靠保护,这样在开发、测试和其它非生产环境以及外包环境中安全地使用脱敏后的真实数据集。
隐私数据脱敏技术
通常在大数据平台中,数据以结构化的格式存储,每个表有诸多行组成,每行数据有诸多列组成。根据列的数据属性,数据列通常可以分为以下几种类型:
可确切定位某个人的列,称为可识别列,如身份证号,地址以及姓名等。
单列并不能定位个人,但是多列信息可用来潜在的识别某个人,这些列被称为半识别列,如邮编号,生日及性别等。美国的一份研究论文称,仅使用邮编号,生日和性别信息即可识别87%的美国人[3]。
包含用户敏感信息的列,如交易数额,疾病以及收入等。
其他不包含用户敏感信息的列。
所谓避免隐私数据泄露,是指避免使用数据的人员(数据分析师,BI工程师等)将某行数据识别为某个人的信息。数据脱敏技术通过对数据进行脱敏,如移除识别列,转换半识别列等方式,使得数据使用人员在保证可对#2(转换后)半识别列,#3敏感信息列以及#4其他列进行数据分析的基础上,在一定程度上保证其无法根据数据反识别用户,达到保证数据安全与最大化挖掘数据价值的平衡。
隐私数据泄露类型
隐私数据泄露可以分为多种类型,根据不同的类型,通常可以采用不同的隐私数据泄露风险模型来衡量防止隐私数据泄露的风险,以及对应不同的数据脱敏算法对数据进行脱敏。一般来说,隐私数据泄露类型包括:
个人标识泄露。当数据使用人员通过任何方式确认数据表中某条数据属于某个人时,称为个人标识泄露。个人标识泄露最为严重,因为一旦发生个人标识泄露,数据使用人员就可以得到具体个人的敏感信息。
属性泄露,当数据使用人员根据其访问的数据表了解到某个人新的属性信息时,称为属性泄露。个人标识泄露肯定会导致属性泄露,但属性泄露也有可能单独发生。
成员关系泄露。当数据使用人员可以确认某个人的数据存在于数据表中时,称为成员关系泄露。成员关系泄露相对风险较小,个人标识泄露与属性泄露肯定意味着成员关系泄露,但成员关系泄露也有可能单独发生。
隐私数据泄露风险模型
将数据开放给数据分析人员,同时就引入了隐私数据泄露的风险。在限制隐私数据泄露风险在一定范围内的同时,最大化数据分析挖掘的潜力,是数据脱敏技术的最终目标。目前在隐私数据脱敏领域,有几个不同的模型可以用来从不同角度衡量数据可能存在的隐私数据泄露风险。
推荐教程:《PHP教程》
以上是大数据脱敏是什么意思的详细内容。更多信息请关注PHP中文网其他相关文章!

热AI工具

Undresser.AI Undress
人工智能驱动的应用程序,用于创建逼真的裸体照片

AI Clothes Remover
用于从照片中去除衣服的在线人工智能工具。

Undress AI Tool
免费脱衣服图片

Clothoff.io
AI脱衣机

Video Face Swap
使用我们完全免费的人工智能换脸工具轻松在任何视频中换脸!

热门文章

热工具

记事本++7.3.1
好用且免费的代码编辑器

SublimeText3汉化版
中文版,非常好用

禅工作室 13.0.1
功能强大的PHP集成开发环境

Dreamweaver CS6
视觉化网页开发工具

SublimeText3 Mac版
神级代码编辑软件(SublimeText3)

大数据结构处理技巧:分块:分解数据集并分块处理,减少内存消耗。生成器:逐个产生数据项,无需加载整个数据集,适用于无限数据集。流:逐行读取文件或查询结果,适用于大文件或远程数据。外部存储:对于超大数据集,将数据存储在数据库或NoSQL中。

AEC/O(Architecture,Engineering&Construction/Operation)是指是建筑行业中提供建筑设计、工程设计、施工及运营的综合服务。2024年,AEC/O行业在技术进步中面临着不断变化的挑战。今年预计将整合先进技术,预示着设计、建造和运营的范式转变。为了应对这些变化,行业正在重新定义工作流程,调整优先级,增强合作,以适应快速变化世界的需求。AEC/O行业以下五大趋势将成为2024年的关键主题,推荐其走向更加一体化、响应迅速和可持续的未来:一体化供应链、智能工

在互联网时代,大数据成为了一种新的资源,伴随着大数据分析技术的不断提升,大数据程序设计需求也愈发迫切。而C++作为一种广泛应用的编程语言,其在大数据编程方面的独特优势也日益凸显。下面将分享我在C++大数据编程方面的实践经验。一、选择合适的数据结构选择合适的数据结构是编写高效大数据程序的重要环节。C++中有多种数据结构可以供我们使用,如数组、链表、树、哈希表等

一、58画像平台建设背景首先和大家分享下58画像平台的建设背景。1.传统的画像平台传统的思路已经不够,建设用户画像平台依赖数据仓库建模能力,整合多业务线数据,构建准确的用户画像;还需要数据挖掘,理解用户行为、兴趣和需求,提供算法侧的能力;最后,还需要具备数据平台能力,高效存储、查询和共享用户画像数据,提供画像服务。业务自建画像平台和中台类型画像平台主要区别在于,业务自建画像平台服务单条业务线,按需定制;中台平台服务多条业务线,建模复杂,提供更为通用的能力。2.58中台画像建设的背景58的用户画像

Go语言作为一种开源编程语言,在近年来逐渐受到了广泛的关注和使用。它以其简洁、高效的特性,以及强大的并发处理能力而备受程序员青睐。在大数据处理领域中,Go语言也具有很强的潜力,可以用来处理海量数据、优化性能,并且可以很好地与各种大数据处理工具和框架进行集成。在本文中,我们将介绍一些Go语言大数据处理的基本概念和技巧,并通过具体的代码示例来展示如何利用Go语言

在当今大数据时代,数据处理和分析已经成为各行业发展的重要支撑。而Go语言作为一种开发效率高、性能优越的编程语言,也逐渐被大数据领域所关注。然而,相比于其他语言如Java、Python等,Go语言在大数据框架方面的支持相对不足,这给一些开发者带来了困扰。本文将探讨Go语言大数据框架缺失的主要原因,并提出相应的解决方案,同时结合具体的代码示例进行说明。一、Go语

易知微2023年秋季产品发布会已经圆满结束了!让我们一起回顾一下发布会的精彩亮点吧!一、智能普惠开放,让数字孪生成为生产力袋鼠云联合创始人、易知微CEO宁海元开场致辞提出:在今年公司的战略会上,我们把产品研发的主要方向定位成「智能普惠开放」三大核心能力,围绕「智能普惠开放」这三大核心关键词,我们进一步提出“让数字孪生成为生产力”的发展目标。二、EasyTwin:探索更易用的数字孪生新引擎1、从0.1到1.0,持续探索数字孪生融合渲染引擎有更优解以成熟的3D编辑模式、便捷的交互蓝图、海量的模型资产

Golang与大数据:完美搭配还是相悖?随着大数据技术的快速发展,越来越多的企业开始通过数据分析来优化业务和决策。对于大数据处理来说,高效的编程语言是至关重要的。而在众多编程语言中,Golang(Go语言)因其并发、高效、简洁等特点,成为了大数据处理的热门选择之一。那么,Golang与大数据究竟是完美搭配还是相悖呢?本文将从Golang在大数据处理中的应用、