12.12 敏感数据脱敏有折扣吗 - 腾讯云开发者社区

文章/答案/技术大牛

发布

数据治理之数据安全

二、数据安全管理方法 1.数据分类 2.数据分级 3.加密脱敏 ---- 一、什么是数据安全？...二、数据安全管理方法主要分为数据分类、数据分级、数据脱敏三个关键步骤来管理。...可用性：企业能够及时获取和访问所需数据吗，所访问的数据是否可靠？敏感性：如果数据被泄露，对业务的潜在影响是什么？完整性：数据在存储或传输过程中有丢失或被篡改的情况吗，对业务的影响有多大？... 对于像身份证、手机号、用户家庭住址、籍贯等个人隐私敏感数据以及财务等企业敏感数据，必须要做好相应的脱敏处理，才能最大限度的保证数据不被泄露。...当前主要的数据脱敏手段有：掩码部分/全遮盖：用指定字符（比如，*****）替换敏感数据的全部或者部分静态加密算法加密：通过MD5、hash或者自研算法加密，可以进行加盐，直接存储一份加密后的数据用于查询

2.6K2 0

安华金和技术副总裁杨海峰：金融行业数据实时共享场景下的动态脱敏技术

2014年，Informatica凭借其DDM产品位居Gartner数据脱敏的领导者象限。对于国内数据库安全厂商而言，有了其他安全产品的深厚研发积累，朝着数据动态脱敏技术进发也变成一种发展惯性。...ABC成功脱敏吗？...场景2：配置了字段ABC需要进行脱敏处理，但用户的应用系统存在一个功能是“每天自动产生一个包含这个字段的表，并且表中的这个字段的数据也需要脱敏”，应对每天增量产生的表执行select *操作，可以做到及时成功脱敏吗...技术应对：动态脱敏产品自动的根据用户发起的SQL命令进行分析，并且实时的检查select *这一命令操作的表有哪些字段，并根据实时检查的结果自动的对数据进行脱敏。...“拆开”来使用，能够成功脱敏吗？

1.7K6 0

您找到你想要的搜索结果了吗？

是的

没有找到

当 AI 开始直接操作数据库，传统数据库管理工具还有必要吗？

你有多久没亲手写过SQL了？这两年，AI正在快速进入数据库场景。Chat2DB、Text-to-SQL工具越来越多，以前要找表、看字段、写SQL的工作，现在一句自然语言就能完成。...如果换成更轻量的本地模型，成本低了，复杂SQL、长上下文和Agent任务上的能力又可能打折扣。所以问题其实不是AI能不能访问数据库，而是企业能不能放心让它访问生产数据。...如果涉及UPDATE、DELETE、DDL或敏感数据，要求通常只会更严格。所以现实中，不应该让AI直接操作数据库。...敏感数据统一脱敏团队数据库里常常包含手机号、邮箱、身份证号等敏感字段。CloudDM支持对查询结果中的敏感数据进行隐藏或转换，并将数据脱敏纳入统一的安全规则。...辅助完成数据库任务提供受控的数据库访问和执行环境数据访问可直接读取Schema、查询数据，体验更自然统一管理数据库连接和访问入口权限取决于底层账号、Agent或外围权限体系可按实例、库、Schema、表进行控制敏感数据需要考虑哪些数据可以提供给模型可通过统一规则进行脱敏生产操作可以生成和发起操作可通过

481 0

2025 权限管控与脱敏 BI 工具 Top5：观远数据以合规实力登顶

敏感数据明文展示违反《个人信息保护法》？...（2）智能化数据脱敏：兼顾安全与业务易用性观远数据 BI 支持 5 类脱敏规则，实现敏感数据 “可见不可用” 的同时，不影响数据分析价值：多场景自动触发：系统可根据数据类型（身份证号、银行卡号等）和用户角色自动应用脱敏规则...五、FAQ：权限管控与脱敏 BI 工具选型高频问题解答（一）成本相关：权限管控与脱敏功能会显著增加 BI 工具预算吗？不一定。...（二）部署相关：私有化部署会影响权限与脱敏功能的灵活性吗？优质的 BI 工具可通过技术架构优化保障功能灵活性。...通过本次排名解析可见，观远数据 BI 凭借三维权限管控体系、智能化脱敏方案、全链路安全保障及丰富的行业落地案例，稳居 2025 年权限管控与脱敏 BI 工具榜首，尤其适合对数据安全和合规性有高要求的中国企业

1.7K1 0

如何进行数据脱敏

数据脱敏是一种采用专门的脱敏算法对敏感数据进行变形、屏蔽、替换、随机化、加密，并将敏感数据转化为虚构数据的技术。...针对数据库的脱敏技术使用两种方法来识别敏感数据，第一种是通过人工指定，比如通过正则表达式来指定敏感数据的格式；第二种为自动识别，该方式是基于敏感数据的特征来进行自动识别的，此方式一般不需要用户编写正则表达式的格式来指定敏感数据...常规的静态脱敏用来识别一些涉及个人隐私的敏感数据，比如信用卡号、ID、手机号、电子邮箱、IP地址、住址等。识别出敏感数据之后，就需要使用脱敏算法来进行脱敏。...常用的内置脱敏算法有同义替换、部分数据遮蔽、混合屏蔽和可逆脱敏等。动态脱敏通常适用于大数据应用环境。...外部有三类数据请求来源，分别是内部应用系统、外部应用系统（如报表）和数据管理应用（迁移、备份等）。动态数据代理请求系统对数据的请求来源进行识别，针对内部应用执行bypaas查询，不进行脱敏运算。

1.4K2 0

AI时代，为什么企业的数据治理要重新做

项目上线一拖再拖，最后只能手工处理数据，效果大打折扣。困境4：管数之难AI训练需要大量敏感数据，但数据脱敏、权限管控跟不上。某银行的AI信贷审批系统，因为数据安全问题，被监管部门约谈，差点罚款几百万。...某金融企业的做法就很实在，建立分级分类体系，敏感数据自动打标；AI训练环境使用脱敏后的数据；全流程操作日志，可追溯审计。根据行业案例，数据安全合规优先的企业可以降低60%的运营风险和成本。4....同样的道理，你给AI模型喂劣质数据，它能做出精准预测吗？具体怎么做？...其实可以从四个维度评估：维度1：数据标准关键业务对象（客户、商品、订单等）是否有统一标准？不同系统的数据格式是否一致？评估结果量化：标准覆盖率、一致性比例维度2：数据孤岛有多少个数据源？...有多少数据可以直接用于AI训练？数据质量问题导致的业务损失有多大？维度4：安全合规敏感数据是否有明确分级？是否有数据脱敏机制？数据使用是否有权限管控和审计？

6931 0

数据治理之数据脱敏技术研究

据安全情报供应商Risk Based Security (RBS) 的2019年Q3季度的报告，2019年1月1日至2019年9月30日，全球披露的数据泄露事件有5183起，泄露的数据量达到了79.95...但需要注意的是有些非敏感数据能够被用来重新生成敏感数据或者能够回溯到敏感数据，这些非敏感数据同样需要进行脱敏处理。 5) 自动化原则针对一个数据源只需要配置一次，就可以重复进行脱敏处理。...如果不是通过自动化的方式进行，那么数据脱敏就是一个低效且耗费成本的工作。 3.数据脱敏核心算法常用的脱敏有混淆、替换、置空、加密：混淆算法：打乱现有数据的位置，使数据不再表示其原有的含义。...在使用 ShardingSphere-JDBC进行动态脱敏配置时，有几项关键的脱敏规则配置。 1）数据源配置，可以使用了Druid来做数据源配置，配置多个数据源。...问2：如A经B到C，C经D到E，而给我们的关系脱敏后表现为A..B...D..E。类似的这类脱敏如何实现。答：单独的客户信息，还是有需要进行脱敏处理的。

5.5K2 1

大厂也在用的 6种数据脱敏方案，严防泄露数据的 “内鬼”

[停止交易，有内鬼] 而作为开发者的我们，能做的就是尽量避免经我们手的用户数据泄露，那今天就来讲讲互联网中内部防止隐私数据泄露的手段-数据脱敏。什么是数据脱敏先来看看什么是数据脱敏？...数据脱敏也叫数据的去隐私化，在我们给定脱敏规则和策略的情况下，对敏感数据比如手机号、银行卡号等信息，进行转换或者修改的一种技术手段，防止敏感数据直接在不可靠的环境下使用。...有时我们可能需要将生产环境的数据 copy 到测试、开发库中，以此来排查问题或进行数据分析，但出于安全考虑又不能将敏感数据存储于非生产环境，此时就要把敏感数据从生产环境脱敏完毕之后再在非生产环境使用。...动态数据脱敏动态数据脱敏（DDM）：一般用在生产环境，访问敏感数据时实时进行脱敏，因为有时在不同情况下对于同一敏感数据的读取，需要做不同级别的脱敏处理，例如：不同角色、不同权限所执行的脱敏方案会不同。...[脱敏系统] 数据脱敏的方式有很多种，接下来以下图数据为准一个一个的演示每种方案。

2.1K3 0

大厂也在用的 6种数据脱敏方案，别做泄密内鬼

停止交易，有内鬼而作为开发者的我们，能做的就是尽量避免经我们手的用户数据泄露，那今天就来讲讲互联网中内部防止隐私数据泄露的手段-数据脱敏。什么是数据脱敏先来看看什么是数据脱敏？...数据脱敏也叫数据的去隐私化，在我们给定脱敏规则和策略的情况下，对敏感数据比如手机号、银行卡号等信息，进行转换或者修改的一种技术手段，防止敏感数据直接在不可靠的环境下使用。...有时我们可能需要将生产环境的数据 copy 到测试、开发库中，以此来排查问题或进行数据分析，但出于安全考虑又不能将敏感数据存储于非生产环境，此时就要把敏感数据从生产环境脱敏完毕之后再在非生产环境使用。...动态数据脱敏动态数据脱敏（DDM）：一般用在生产环境，访问敏感数据时实时进行脱敏，因为有时在不同情况下对于同一敏感数据的读取，需要做不同级别的脱敏处理，例如：不同角色、不同权限所执行的脱敏方案会不同。...脱敏系统数据脱敏的方式有很多种，接下来以下图数据为准一个一个的演示每种方案。

2.3K1 0

静态脱敏典型应用场景分析——开发测试、数据共享、科学研究

❏ 开发测试场景需高度模拟生产环境，对脱敏后数据与业务的一致性有严格要求。 ❏ 生产环境与开发测试环境互相隔离，彼此无法互相访问。...❖ 保证主外键一致、业务关联一致、有依赖字段的敏感信息脱敏一致、多次脱敏结果保持一致等，整体保证脱敏前后一致性，保持数据间的逻辑关系；支持将源数据库对象自动同步到目标库，包括表结构、主键、索引、约束、视图...❖ 保证主外键一致、业务关联一致、有依赖字段的敏感信息脱敏一致、多次脱敏结果保持一致等，整体保证脱敏前后一致性，保持数据间的逻辑关系。...美创数据脱敏系统内置敏感数据发现引擎，对源数据中的敏感数据按照脱敏规则，进行变形、漂泊、遮盖，保证脱敏后的数据保持数据的一致性和业务的关联性，应用于开发测试环境、数据交换、数据分析、数据共享等场景。...美创数据脱敏产品，帮您实现敏感数据可靠保护！

2.5K4 0

信息泄露渠道及风险感知；数据脱敏规则探讨 | FB甲方群话题讨论

A1：肯定被拖了，不拖难道自己造真数据吗？ A2：并且流出的数据库字段或元数据规则基本一致，都是同一体系供应商或者可能对接中间库外流。...A9：这篇文章可能讲的比较清楚：《数据脱敏：不同法域下匿名化、去标识化、假名化的含义一致吗？》 A10：脱敏、去标识化可以用加密来做，对于超期数据有点可以用高加密算法做去标识存储。...A12：我看个人信息保护法里面有关于敏感数据匿名化就不是敏感数据了，如果是监管要求，监管拿过去也不能反向解密，这个数据没什么意义呀。 A13：你想想你的匿名化算法是不是监管批准的？...Q：我们互联网系统未来都走全流量加密，存量系统重要的，也在改造全流量加密，这样的话API检测还具备意义吗？ A4：有啊，加密流量撞情报、解密流量做监听。...因此，脱敏的第一步是要识别其中重要数据中的敏感数据，哪些能够脱敏；其次是要前端脱敏还是后端脱敏，是去标识化还是匿名化。要弄清各种含义的区别，对数据采取精细、准确的脱敏策略。

1.2K3 0

大厂也在用的 6 种数据脱敏方案，别做泄密内鬼

停止交易，有内鬼而作为开发者的我们，能做的就是尽量避免经我们手的用户数据泄露，那今天就来讲讲互联网中内部防止隐私数据泄露的手段-数据脱敏。什么是数据脱敏先来看看什么是数据脱敏？...数据脱敏也叫数据的去隐私化，在我们给定脱敏规则和策略的情况下，对敏感数据比如手机号、银行卡号等信息，进行转换或者修改的一种技术手段，防止敏感数据直接在不可靠的环境下使用。...有时我们可能需要将生产环境的数据 copy 到测试、开发库中，以此来排查问题或进行数据分析，但出于安全考虑又不能将敏感数据存储于非生产环境，此时就要把敏感数据从生产环境脱敏完毕之后再在非生产环境使用。...动态数据脱敏（DDM）：一般用在生产环境，访问敏感数据时实时进行脱敏，因为有时在不同情况下对于同一敏感数据的读取，需要做不同级别的脱敏处理，例如：不同角色、不同权限所执行的脱敏方案会不同。...脱敏系统数据脱敏的方式有很多种，接下来以下图数据为准一个一个的演示每种方案。

1.7K1 0

仅靠数据库密码能防住数据泄露吗？

近日有朋友问，靠数据库密码能防住数据库数据泄露吗？我的答案是，仅靠增加用户名和密码并不能完全防止数据泄露，它只是最基础的防护措施之一，并且造成敏感数据泄露的风险极高。...2、数据库集中管控对于有一定规模的企业来说，数据库不仅数量众多，而且类型多样；造成数据库工具花样繁多，安全管控难度很大。可以通过数据库访问资源统一入口，纳管运维、开发、业务等各个数据使用场景。...4、动态和静态脱敏通过安全管控策略，对涉敏数据动态和静态脱敏。 5、高危命令动态拦截对于增删改等高危命令动态拦截，对越权行为进行管控。 6、防攻击技术通过防火墙限制IP访问，防SQL注入。...XGuard产品集成了智能敏感数据库接入、数据抽取、数据脱敏、权限管理、行为管控、流程编排、性能监控、安全审计等功能于一体，能够为使用数据库的多个使用部门如开发、运维、灾备提供优质全面的一站式数据库中台解决方案

2051 0

大数据隐私保护技术之脱敏技术探究

在涉及客户安全数据或者一些商业性敏感数据的情况下，在不违反系统规则条件下，对真实数据进行改造并提供测试使用，如身份证号、手机号、卡号、客户号等个人信息都需要进行数据脱敏。...首先遇到的问题就是如何识别敏感数据，敏感数据的定义是什么？有哪些依赖？应用程序是十分复杂并且完整的。知道敏感信息在哪并且知道哪些数据参考了这些敏感数据是非常困难的。...选定了敏感数据和要施加的算法，剩下的就是如何实现了，在什么过程中进行脱敏呢？难题的解决方案 1.如何识别敏感数据现在有两种方式来识别敏感数据。...L-多样性 L多样性是在k-匿名的基础上提出的，外加了一个条件就是同一等价类中的记录至少有L个“较好表现”的值，使得隐私泄露风险不超过 1/L，”较好表现“的意思有多种设计，比如这几个值不同，或者信息熵至少为...想要详细了解的同学可以看一下知乎上的这个问题关于动态脱敏系统的实现，现在一般有两种，一种是重写数据库程序代码，在权限判决后对请求语句进行重写，从而查询数据；另一种是用户的

3.8K10 0

大数据平台数据脱敏介绍

静态数据脱敏(SDM)与动态数据脱敏(DDM)主要的区别是：是否在使用敏感数据当时进行脱敏。...静态数据脱敏(SDM)一般用在非生产环境，在敏感数据从生产环境脱敏完毕之后再在非生产环境使用，一般用于解决测试、开发库需要生产库的数据量与数据间的关联，以排查问题或进行数据分析等，但又不能将敏感数据存储于非生产环境的问题...动态数据脱敏(DDM)一般用在生产环境，在访问敏感数据当时进行脱敏，一般用来解决在生产环境需要根据不同情况对同一敏感数据读取时需要进行不同级别脱敏的问题。...隐私数据脱敏技术通常在大数据平台中，数据以结构化的格式存储，每个表有诸多行组成，每行数据有诸多列组成。...K-Anonymity 隐私数据脱敏的第一步是对所有可标识列进行移除或是脱敏，使得攻击者无法直接标识用户。但是攻击者还是有可能通过多个半标识列的属性值识别个人。

3K4 0

【金猿案例展】某农商行：数据脱敏系统经典实践

客户现场有两种脱敏需求： 1、客户现场需要将脱敏数据导出成.del文件放到一个ftp服务器上；且每天生成的文件都会以当天的日期作为目录的名字，数据脱敏系统每天会有个定时任务自动到ftp服务器上去读取对应日期...8）敏感数据字典管理以敏感数据为中心，对数据库字段进行分类管理；对同库多表、多库多表的同类敏感数据实施统一的脱敏算法和策略，保证同一组织内跨系统、跨库之间的脱敏一致性；并支持敏感数据字典导入、导出等功能...，如果未下发或解压完成将重新读取下发文件； ●自动创建敏感数据发现任务，并进行敏感数据的自动发现，执行发现任务后根据敏感数据梳理模板对敏感数据进行自动梳理，生成梳理后的敏感字段列表； ●判断是否有敏感数据...，如果没有将生成敏感数据发现任务执行报告，并显示执行结果和消息提示；如果生成敏感数据，将根据脱敏方案模板自动生成脱敏任务，并执行脱敏任务； ●判断脱敏任务执行是否成功，如果出现异常将发送异常报告信息，并显示执行结果和消息提示...；因此脱敏产品应该具有很好的识别敏感数据的能力，能够不依赖元数据中对表和字段的定义，而是根据数据特征自动的识别敏感数据并进行有效脱敏。

1.8K1 0

生产库敏感数据治理，从 “手动遮码” 到平台化自动脱敏

更完整的敏感数据治理还要回答三个问题：其一，哪些字段应该纳入脱敏；其二，不同角色看到的结果是否应该一样；其三，查询、导出、审计这些后续动作如何继续受控。...没有扫描、识别和类型化管理，团队就会陷入“知道有风险，但不知道哪里还有”的被动局面。...NineData 预置了 S0 ~ S5 6 个敏感数据等级，以及对应的识别规则，可全自动识别企业数据库中的敏感数据并脱敏，可根据敏感数据登记设置S1 ~ S5 的对应审批人。...只有把规则当成持续运营对象，而不是一次性配置项，敏感数据脱敏才会越跑越稳。...总结所以，敏感数据脱敏更需要解决的，并不是“把几个字符遮一下”，而是把数据库中的个人信息和敏感信息从默认明文可见，改造成按角色、按场景、按规则受控可见。

2760 0

数据安全分类分级如何落地

脱离了业务上下文，分类的准确率会大打折扣。“聚合效应”带来的降级难：单条数据可能只是二级（内部），但一万条同类数据聚合在一起就可能上升为四级（极敏感）。...动态掌控：支持自定义的实时敏感数据分布地图，这意味着您可以随时掌握敏感数据资产的动态变化，及时发现新增或变动的敏感数据，确保数据资产的可见性和透明度。...“被动发现”能力，才是数据动态的根本，能在数据流转或被访问时实时识别敏感数据，就像数据流中的智能哨兵；及时感知变化：这种双模式设计确保了系统能够及时发现新增、变化的敏感数据类型，并进行自动标记与更新敏感数据目录...以敏感数据目录为核心：将敏感数据目录作为核心引擎，实现与后续数据安全保护技术措施的无缝衔接，包括敏感数据脱敏、访问权限治理、数据库安全审计、api 数据安全保护等。...一站式保护能力：快速落地包括细粒度、精细化的数据权限管控、数据动态脱敏、数据安全审计、数据风险分析等在内的多项关键安全能力，构建一个从识别到防护的闭环数据安全体系。

4061 0

盘点一个Python自动化办公的问题

，b有300条。...【逆光】：对的，本来可以用merge 但是后期可能会添加total的单量满足折扣的条件才能匹配，所以我用了for循环。...【瑜亮老师】：远程吧，或者你发一个脱敏的两个表的数据。最好是你发一个脱敏数据。【不上班能干啥！】：如果先merge，就匹配完再筛选。...你发一个脱敏数据吧。无非是两行代码先后顺序的问题，这个不用纠结。【逆光】：我不知道怎么弄筛选？【不上班能干啥！】...：new_df = df1.merge(df2) new_df = new_df[new_df['判断列'] = 条件]，不就这样吗，等于，大于，小于，包含，没别的了。

4211 0

RSA 创新沙盒盘点| Satori —合规、快速、高效的隐私保护解决方案

Satori能够自动识别敏感数据（例如：PII，个人医疗信息（PHI），支付卡行业信息（PCI）），并通过脱敏技术对敏感数据进行脱敏，使得敏感数据可以进行安全合规的数据分析。...2通用数据脱敏引擎针对隐私数据的保护，Satori采用了通用数据脱敏（universalmasking engine）引擎实现合规的管理，机构或者组织可以安全的对脱敏后的敏感数据进行分析和使用。...通过脱敏配置文件实现敏感数据屏蔽；如（PII、PHI等）。通过脱敏文件配置，不同的数据类型选择不同的的脱敏方式。...对应转换方式Satori的脱敏方法有通用脱敏、电子邮件脱敏、信用卡脱敏，出生日期脱敏，公用IP脱敏等数据细粒度脱敏方式，示例如下图：通用脱敏 ? 电子邮件脱敏 ?...点评：Satori公司的产品提供了丰富的脱敏方法，并支持灵活的配置是其亮点之一。然而，Satori公司声称脱敏后的敏感数据可以合规使用和分析。

1.6K6 0

点击加载更多

数据治理之数据安全

安华金和技术副总裁杨海峰：金融行业数据实时共享场景下的动态脱敏技术

当 AI 开始直接操作数据库，传统数据库管理工具还有必要吗？

2025 权限管控与脱敏 BI 工具 Top5：观远数据以合规实力登顶

如何进行数据脱敏

AI时代，为什么企业的数据治理要重新做

数据治理之数据脱敏技术研究

大厂也在用的 6种数据脱敏方案，严防泄露数据的 “内鬼”

大厂也在用的 6种数据脱敏方案，别做泄密内鬼

静态脱敏典型应用场景分析——开发测试、数据共享、科学研究

信息泄露渠道及风险感知；数据脱敏规则探讨 | FB甲方群话题讨论

大厂也在用的 6 种数据脱敏方案，别做泄密内鬼

仅靠数据库密码能防住数据泄露吗？

大数据隐私保护技术之脱敏技术探究

大数据平台数据脱敏介绍

【金猿案例展】某农商行：数据脱敏系统经典实践

生产库敏感数据治理，从 “手动遮码” 到平台化自动脱敏

数据安全分类分级如何落地

盘点一个Python自动化办公的问题

RSA 创新沙盒盘点| Satori —合规、快速、高效的隐私保护解决方案

相关资讯

热门标签

活动推荐

运营活动

社区

活动

圈层

关于

腾讯云开发者

热门产品

热门推荐

更多推荐