大数据dba是什么 - 腾讯云开发者社区

文章/答案/技术大牛

发布

DBA核心的价值是什么（一）

今天下午在思考几个问题，工作的本质是什么？DBA的核心价值是什么？有哪些工作是DBA不可取代的？在整理的过程中，也有了一些心得体会。...首先DBA这个职位全称是Database Administrator，其实这里有一个问题，我们总说数据库管理，这里的管理可以manage,那么administion和manage的区别大吗，如果查看字典会发现...对于DBA来说，如果要说核心价值，不妨换一个问题，即哪些工作是DBA专业的事情，从我的理解来说，有以下几件： 1）数据库技术选型 2）数据备份恢复 3）数据库架构设计 4）数据库高可用 5）数据库升级...而反过来说，如果一个公司就几个数据库，使用了公有云服务，基本能够满足日常业务发展需求，那么DBA存在的意义就不是很大，而如果你有成百上千套环境，需要大量的维护管理工作，那么这些就需要专业的管理。...从我目前的认知理解来看，我认为这个是DBA工作的核心价值。这里的生命周期管理范围是比较大的，我可以把它分为实例生命周期，对象生命周期，数据声明周期和SQL生命周期四个维度。

1.6K2 0

DBA数据库监控五大指标

DBA不仅仅是知道如何安装服务器和设置数据库。最重要的职责之一是通过监控实例来识别潜在问题。但应该监控什么，为什么？以下是DevOps，云和数据隐私进入图片的新时代要监控的五大事项。...因此，除了跟踪失败的登录以及sysadmin组中有多少帐户之外，DBA还需要监视SQL注入攻击，服务器和数据库设置的更改以及对权限，用户和角色的修改。...3备份几乎每个数据库都应定期备份，包括频繁的事务日志备份。除非您有一个工作来默认备份实例上的每个数据库，否则很容易错过添加新数据库。顺便说一句，确保您有一个流程来测试备份文件。...4文件增长随着时间的推移，数据库文件可能会耗尽可用空间，就像这些文件所在的卷一样。因此，事务必须在数据库文件增长时等待，如果文件中没有更多空间或卷上的空间用完，应用程序将停止运行。...5自动任务优秀的DBA可以自动执行所有操作，并使用SQL Server代理或其他一些作业调度程序来运行脚本。他们了解工作的内容以及工作失败或长期工作的后果。

1.1K4 0

您找到你想要的搜索结果了吗？

是的

没有找到

云数据库 “吃了” DBA

提到云数据库第一个想当然的问题不是云数据库本身，而是云数据库来了，DBA 都没饭吃了。...1 上了云，DBA与数据库底层，以及高可用渐行渐远，属于被架空了状态，如果干上几年的云数据库DBA，估计连实体机上的高可用是什么东西都不知道了，竞争力直线下降。...至于第三个问题，云数据库DBA没发展，那的怎么看，如果云数据库你没有发展，你实体机的DBA 生涯未必多姿多彩，不是云数据库的问题，是你不行的问题，行的放哪都行，不行的镀金也是一滩烂泥。...怎么能行 1 靠近业务，把握业务与数据库之间的关系，DBA 不是运维，DBA 可以变成架构师，当然你首先不能光会一个数据库吧，如果还是抱着ORACLE 的老资格，那你的确就只能是一个“DBA”。...3 云上的数据库运维的特点是什么，要搞清楚，在摒弃了粗放式的发展模式，必须让自己静下心，往细化的方面发展，细节也可以决定很多事情，甚至可以决定一切，找到自己的发力点，并顺藤摸瓜。

1K2 0

当数据库运维从“救火”走向“免疫”，DBA的下一站是什么？

因为数据库运维这件事，正在发生一个根本性的变化。一、运维这件事，正在被重新定义前些年聊国产数据库运维，核心诉求是“能跑通就行”——能装、能连、能查数据，DBA的目标是把系统维持住。...行业里一个普遍的说法是：数据库运维正在从“被动救火”走向“主动免疫”。什么意思？以前DBA是消防员——系统出问题了才冲进去灭火。...国产数据库的部署量在快速膨胀，金融、政务、能源这些核心系统都在往里迁。DBA管的数据节点越来越多，靠人工一个个盯根本不现实。第二个是复杂性。...二、DBA真正的痛点是什么？说回一线DBA的真实处境。我用一个场景来描述：假设你半夜收到告警，说数据库响应变慢了。...问题的根源是什么？工具和人的割裂。你要查慢查询，得登录服务器执行命令；要看锁等待，得翻SHOWENGINEINNODBSTATUS的输出；要做根因分析，得把多个工具的信息拼在一起。

2931 0

DBA | 炼气期，关系数据库及六大范式(NF)理论概述!

，介绍了关系数据库概念，应用和管理系统，最后学习关系型数据库的六大范式理论，为后续学习Oracle关系型数据库打一下一个坚实的基础。...数据模型数据库系统是按数据结构的类型来组织数据的，因此数据库系统通常按照数据结构的类型来命名数据模型，如层次、网状和关系等结构的模型，分别命名为层次模型、网状模型和关系模型。...weiyigeek.top-数据模型图温馨提示: 由于采用的数据结构类型不同，通常把数据库分为层次数据库、网状数据库、关系数据库(此篇主要讲解对象)和面向对象数据库等。...主要功能数据定义数据操纵数据库的运行管理数据库的存储管理数据库接口主要特点数据结构化：数据以表格形式存储，易于理解和管理。关系性：不同表之间可以通过外键建立关系，实现数据的关联。...是不是这样就清晰明了，在此概念基础之上，可以开始描述三大范式、BC范式和反范式化的概念了。第一范式（1NF）定义：列要符合原子性，即表中的每个属性都不可再分。

9991 0

运维DBA的4大纪律9项注意【转】

http://dbaplus.cn/blog-134-1077-1.html 运维DBA的四大纪律一、一切行动听指挥甭管你是团队，还是团伙，要求都是一样的，一切行动听指挥！听谁的指挥？...如果你是管理者，千万必要以为你的DBA一定会帮你做了。不惊讶，真实案例的脱敏数据： ? 如果是企业缺少相应备份设备或软件导致的，DBA有义务督促领导购置恢复演练所需的软硬件设备。...因为一旦出现意外，DBA的直接领导往往也担不了这个责任，毕竟数据都保护不了，用户还怎么相信你这个企业，不论你是央企还是国企。...运维DBA的九项注意三大纪律是规矩-Rules，八项注意是指导原则-Guidance。做运维的人，不能总说这个我们没想到，哎呀，没想到这也不行。...5、定期做好数据库检查数据库没有发生故障，不代表是DBA做得好，而是故障自己还没有发生，不是不报，实时候未到。所以，确定好检查规则，定期做好数据库检查，并进行整改。

8423 0

数据迁移以后，为什么每个DBA都需要数据对比？

作为 DBA，你一定经历过这样的场景：数据迁移进度条走到完成，但依然不敢直接割接 —— 因为数据是否一致，没有客观、可信的依据。依靠人工抽查、抽样计数，只能覆盖极小部分数据，无法真正保证全量一致。...一旦割接后出现数据差异，将直接影响业务可用性与数据准确性。数据迁移的关键一步，就是数据一致性校验。而传统校验方式薄弱、低效、不可靠，这也是为什么每一位 DBA 都需要数据对比。...全量数据对比数据对比并非简单做行数统计，而是：按主键 / 唯一键逐行逐字段比对数据内容支持源端持续写入场景下的一致性校验自动识别：丢失、多余、内容不一致的数据支持大表、超大规模数据的稳定对比任何因迁移、...总结数据迁移，决定项目是否能够真正安全落地，DBA 需要的不是 “凭经验赌一把”，而是可依赖、可证明、可闭环的标准化能力。...NineData 数据对比，通过：全对象结构对比全量逐行数据对比自动差异修复可视化、可审计、可追溯帮助 DBA 从低效、高风险的人工校验中解放出来，用标准化的方式，守住数据一致性的一道防线。

2360 0

IDC机房大带宽是什么？

带宽指的是单位时间内能够在线路上传送的数据量，带宽越大，支持在线传送的数据量就越大。大带宽一般指的是100Mbps的带宽都可以称之为大带宽，而使用这种带宽的服务器就是大家口中的大带宽服务器。...1、IDC机房和大带宽机房优势区分： IDC机房以机柜售卖为主，带宽量比较小；大带宽机房一般是单线机房，带宽量需求比较大故名为“大带宽”，以带宽需求为主，适合带宽需求量比较大的客户。...2、大带宽适合使用客户：多以直播平台、音视频平台、游戏平台、及时社交平台、互联网企业等。因为此类平台对网络的及时性和稳定性要求较高，大带宽自身特点：传输速度快、抗干扰能力强、独享带宽。

9.1K2 0

数据融合是什么？进行数据融合的4大关键环节！

但数据融合是为了给 AI 打基础，只有高质量的数据才能给模型更精确的数据输出。这篇文章就带你系统了解：数据融合是什么？常见的数据融合类型有哪些？实施中会遇到什么样的挑战？...一、数据融合是什么数据融合（Data Fusion）是一种将来自不同来源、不同格式或不同结构的数据集成到一个统一的数据模型或数据集中的过程。...这些数据可以来自多个不同的数据源，例如：（1）数据库：企业内部的关系型数据库、非关系型数据库，存储着结构化或半结构化的数据。...（2）数据集成技术：如数据联邦、数据虚拟化等技术，通过在逻辑上整合数据，而不是物理上移动数据，提高了数据的实时性和灵活性。...1.结构化数据融合（1）结构化数据：存储在关系型数据库中的数据，具有明确的表结构、字段和数据类型。（2）结构化数据融合：通常是将多个数据库中的表格数据进行整合，通过主键和外键进行关联。

1.4K1 0

DBA不用再半夜手工执行枯燥的大表DDL Online变更

**导读** > 作者：杨漆 > 16年关系型数据库管理，从oracle 9i 、10g、11g、12c到Mysql5.5、5.6、5.7、8.0 到TiDB获得3个OCP、2个OCM；运维路上不平坦...Online业务，大表DDL都只能在业务低谷期执行，通常为凌晨4点左右，这是人最想睡觉的时候，而DBA却要在这个时点起来工作。怎样减轻DBA的痛苦,将只能在半夜执行的批量DDL变更让机器自动执行？...set feedback off ## 批量DDL (都是过亿的大表，执行时间较长) alter table PPP.CHANNEL_RESUME modify channel_order varchar2...varchar2(80) parallel 10; alter index PPP.idx_channel_order_a8 rebuild online parallel 10; ### 修改字段（上千万的大表启用并行参数...PPP.CHANNEL_RESUME_SUCCESS_ORDER modify channel_order_num varchar2(80) parallel 10; ### 在线重建索引（上千万的大表启用并行参数

8480 0

【快看】DBA 大佬不会轻易告诉你的 9 大 SQL 优化技巧

大多数性能问题都源自数据库层面，如果你不知道其中的诀窍，就会错过巨大的性能提升。...✅ 相反： SELECT id, name, email FROM users; 你可以：减少 I/O 操作加快网络传输速度避免不必要的大 BLOB（二进制大对象）获取 ️ 2....对于快速写入和数据完整性：规范化到 3NF（第三范式）。在实际应用中，使用读取优化视图或物化表来平衡两者。 ️ 5. 使用批量操作，而不是数千条查询一次插入 10,000 行？你在伤害数据库。...始终使用连接池建立新的数据库连接是昂贵的。...使用查询提示进行高级优化查询提示可以让你告诉数据库规划器该怎么做——当它猜测错误时非常有用。

9581 0

灵魂2问12答：DBA的核心价值和最重要的能力是什么？

灵魂2问：问题1.你认为DBA的核心价值是什么？问题2.你认为DBA的最重要的能力是什么？回答1：核心价值：我理解应该是围绕业务需求能够安全保障企业数据服务的输出。...（db运维问题归根结底是使用方造成），这样DBA能够把精力放在DB架构方案解决或者DB底层实现研究，让DBA不再只是熟练使用某几种软件的工程师。...，都是用户钱，你就是研发了一万个平台，把MySQL源代码给改了，他也不放在眼里，数据库99.99%，比啥都强，他就认为你是可靠的，通常直接年春直接加薪回答6： 1.DBA的核心价值？...a).保障企业内数据的安全、可用 b).优化数据使用效能 c).挖掘数据价值，促进业务发展 2.DBA最重要能力？...回答10： DBA的核心价值就是让以后没有DBA 回答11：问题1:你给公司挣多少钱？问题2:你拿多少钱？

1.2K4 0

DBA 开始涉及数据治理，修炼皇者之境

数据治理，今天怎么开始说数据治理了，这个是我接到的最近要开展的工作，不过我也挺高兴，终于可以接触到数据治理的工作了，这算是DBA登峰造极的工作项目了，所以本期来说说数据治理到底是什么，很多人将数据治理停留在一个名字...数据治理中，主要有三个大的核心模块 1 有什么这是第一个问题，数据治理中需要获知我们有什么核心的数据，可以帮助企业的管理者和数据的使用者，将数据进行数据资产可视化。...IF-Club 你提意见拿礼物 AustinDatabases 破 10000 开发欺负我 Redis 的大 keys的问题，我一个DBA怎么解决？...--开发与库表设计 OceanBase 6大学习法--OBCA视频学习总结第四章 --数据库安装 OceanBase 6大学习法--OBCA视频学习总结第三章--数据库引擎 OceanBase 架构学习...，上来问分片真三俗 -- 4 分什么分 MongoDB 大俗大雅，高端知识讲“庸俗” --3 奇葩数据更新方法 MongoDB 学习建模与设计思路--统计数据更新案例 MongoDB 大俗大雅，高端的知识讲

2791 0

关系型数据库设计三大范式到底是什么？

范式定义百度百科:设计关系数据库时，遵从不同的规范要求，设计出合理的关系型数据库，这些不同的规范要求被称为不同的范式，各种范式呈递次规范，越高的范式数据库冗余越小。...人类语言: 范式可以理解为设计一张数据表的表结构，符合的标准级别、规范和要求。而通常我们用的最多的就是第一范式（1NF）、第二范式（2NF）、第三范式（3NF），也就是本文要讲的“三大范式”。...一次修改，需要修改多个表，很难保证数据一致性。范式的缺点范式的缺点是获取数据时，需要通过Join拼接出最后的数据。...,你在关系型数据库管理系统（RDBMS），例如SQL Server，Oracle，MySQL中创建数据表的时候，如果数据表的设计不符合这个最基本的要求，那么操作一定是不能成功的。...具体做法是：在概念数据模型设计时遵守第三范式，降低范式标准的工作放到物理数据模型设计时考虑。

8722 0

关系型数据库设计三大范式到底是什么？

[pexels-meijii-2014864.jpg] 范式定义百度百科:设计关系数据库时，遵从不同的规范要求，设计出合理的关系型数据库，这些不同的规范要求被称为不同的范式，各种范式呈递次规范，越高的范式数据库冗余越小...人类语言: 范式可以理解为设计一张数据表的表结构，符合的标准级别、规范和要求。而通常我们用的最多的就是第一范式（1NF）、第二范式（2NF）、第三范式（3NF），也就是本文要讲的“三大范式”。...一次修改，需要修改多个表，很难保证数据一致性。范式的缺点范式的缺点是获取数据时，需要通过Join拼接出最后的数据。...,你在关系型数据库管理系统（RDBMS），例如SQL Server，Oracle，MySQL中创建数据表的时候，如果数据表的设计不符合这个最基本的要求，那么操作一定是不能成功的。...具体做法是：在概念数据模型设计时遵守第三范式，降低范式标准的工作放到物理数据模型设计时考虑。

1.8K3 0

国产数据库连续六年销量第一，一线 DBA 看到的支撑能力是什么

十五年数据库相关经验，做过DBA、架构师、技术顾问。不求"颠覆"，只求"靠谱"。最近赛迪顾问发了2025-2026中国数据库市场报告。...金仓的报告我看到了——综合排名TOP5，事务型数据库本土厂商TOP2，连续六年关键领域销售套数第一，医疗行业连续三年第一，发电行业第一。干DBA这么多年，市场排名我看得多。...今天不讲排名，讲支撑这些排名的几个核心问题：连续六年关键领域销量第一，靠的是什么产品能力？医疗行业能连续三年第一，到底解决了什么真实痛点？发电行业这种极端场景，数据库扛得住靠的是哪些硬核能力？...这个道理和DBA的日常建议一致：判断一个数据库能不能用，不要看它跑通了多少demo，要看它在生产环境里跑了多少年、出了多少个项目。规模化是检验产品的唯一标准。...套数多可能是项目数量多但单个项目规模小，市场份额大可能是项目少但单个项目金额大。搞清楚统计口径再判断。3.看实际交付案例。排名是结果，交付案例是支撑。

2041 0

数据库如果多上云，DBA 还有什么发展

说这个话题的原因是在微信群有同学提到了，数据库上云后DBA会 less 化，说这个话是有一定的理由的。首先上云后，会遇到以下几个问题。...1 数据库的操作模式的改变，部分DBA之前负责和工作模式被剥夺了，如高可用的搭建，数据库补丁工作，数据库底层问题的解决，以及源代码问题的探查，甚至在某些云，慢查询的语句的发现方式也被改变，和上面的某位群友提到的...Too young to simple 我来列一列我的工作 1 对于目前要升级的PG的数据库进行问题分析，到底我们为什么要升级，升级的影响是什么，我们需要升级到那个版本，或者云提供升级到那个版本。...在整体的改造中，我提出POALRDB FOR MYSQL 的一些优点，而在我们深入研究后，针对POALRDB 在这个企业的使用算是打开了大门，最终大几十套的POLARDB FOR MYSQL被用到核心不能在核心的地方...所以DBA 成为有了一个新的工作，一个方案的学习和探索者，如果用一个不切合的比喻，DBA 是云数据库的带货者， DBA 一句话可以灭了一个云数据库在企业的使用，也可以让一个数据库的优点散播，扩展，甚至对云厂商的数据库部分进行反馈

7082 0

DBA 从“修电脑的” 到上演一套 “数据治理” 大戏 --- 维护DBA生存空间，体现个体价值

我这个这个部分起名字叫，盘清家底二上分类，分层在你有了这些数据后，你就能清晰的知道，那些数据库的维护重点是什么，并且给这些数据库打上标签，这是为你后续，继续上价值做准备。...2 核心库备份的频率，方式是什么，备份和数据库恢复的等级分为几个档次 3 各个项目中的通用字段的标准化，比如订单编号，A项目是INT B项目是 BIGINT，应该不应该统一。...IF-Club 你提意见拿礼物 AustinDatabases 破 10000 开发欺负我 Redis 的大 keys的问题，我一个DBA怎么解决？...--开发与库表设计 OceanBase 6大学习法--OBCA视频学习总结第四章 --数据库安装 OceanBase 6大学习法--OBCA视频学习总结第三章--数据库引擎 OceanBase 架构学习...，上来问分片真三俗 -- 4 分什么分 MongoDB 大俗大雅，高端知识讲“庸俗” --3 奇葩数据更新方法 MongoDB 学习建模与设计思路--统计数据更新案例 MongoDB 大俗大雅，高端的知识讲

2901 0

DB 大“砖家” 说 DBA 不应该关心数据库备份？我应该关心美伊战争！

大周六的，正带着孩子去学校呢？友人的一个文章吸引我，这不是我写的数据库备份的技术贴？咋了，也错了，技术错了，没有呀？...专家留言我就郁闷了，怎么DBA关心备份，是可惜了，还是牛马DBA可惜了，还是数据库备份不应该是DBA关心的？怎么我都想不明白，太郁闷了。...2 对于现代企业，数据就是核心资产，一个数据库DBA，不关心公司的数据库资产，他应该关心什么？牛马不就应该关心牛马应该关心的事情吗？ 3 数据库物理或逻辑损坏，不就应该要去通过备份恢复吗？...6 一旦发生重大数据丢失事故，不仅是DBA受罚，CTO甚至CEO都要面临董事会的问责。我一个DBA牛马，难道要让CTO,CEO 去关注数据库备份的事情和技术？...西游记应该补上一章，真假DB专家误闯数据库世界。其实数据库行业，专家这样事情可以说的太多，不过咱们一个牛马DBA小架构，又有什么资格评论人家，人家是 “大专家”。

2221 0

数据库升级-成为MySQL DBA 博客系列（之二）

在这篇博文中，我们将介绍DBA的一个最基本的任务—次要版本数据库升级和主要数据库升级。 MySQL升级有两个MySQL官方版本已经不再关注和修复，是因为是在oracle收购MySQL之前的发行版本。...个人认为一个DBA除了要考虑性能，更多的是考虑稳定，安全。次要版本升级小升级相对容易执行—大多数情况下，您只需要使用发行版的软件包管理器来安装新版本即可。...最简单的方法是使用xtrabackup从一个从站获取数据并复制坐标。这些数据将允许您将新节点从旧节点上删除。...只要您稍后可以恢复数据，则无关紧要。转储完成后，该停止MySQL，清除当前数据目录，在节点上安装MySQL 5.6，使用mysql_install_db脚本初始化数据目录并启动新的MySQL版本。...数据使用逻辑备份工具，清除数据目录，将MySQL升级到5.6 Galera，引导集群，加载数据，从节点关闭5.5 Galera集群。

2K3 0

点击加载更多

DBA核心的价值是什么（一）

DBA数据库监控五大指标

云数据库 “吃了” DBA

当数据库运维从“救火”走向“免疫”，DBA的下一站是什么？

DBA | 炼气期，关系数据库及六大范式(NF)理论概述!

运维DBA的4大纪律9项注意【转】

数据迁移以后，为什么每个DBA都需要数据对比？

IDC机房大带宽是什么？

数据融合是什么？进行数据融合的4大关键环节！

DBA不用再半夜手工执行枯燥的大表DDL Online变更

【快看】DBA 大佬不会轻易告诉你的 9 大 SQL 优化技巧

灵魂2问12答：DBA的核心价值和最重要的能力是什么？

DBA 开始涉及数据治理，修炼皇者之境

关系型数据库设计三大范式到底是什么？

关系型数据库设计三大范式到底是什么？

国产数据库连续六年销量第一，一线 DBA 看到的支撑能力是什么

数据库如果多上云，DBA 还有什么发展

DBA 从“修电脑的” 到上演一套 “数据治理” 大戏 --- 维护DBA生存空间，体现个体价值

DB 大“砖家” 说 DBA 不应该关心数据库备份？我应该关心美伊战争！

数据库升级-成为MySQL DBA 博客系列（之二）

相关资讯

热门标签

活动推荐

运营活动

社区

活动

圈层

关于

腾讯云开发者

热门产品

热门推荐

更多推荐