- 综合排序
- 最热优先
- 最新优先
- 来自专栏数据猿
投稿 | 云端数据简报： 大数据向云端过渡
混合数据源的重心正在朝云端偏移。十五个月前，Tableau Online 客户的云端环境混合数据源连接与本地环境混合数据源连接一样多。 《云端数据简报》样本中的趋势揭示了三个发展动向，它们会影响分析和可视化未来将使用什么样的数据。 1. 数据重心将向云端偏移。 数据重力表示数据在服务和应用程序方面的影响。 如果您的数据存储在云端，您很可能希望自己的数据工具(从处理到分析)也能在云端运行。现在，数据重心集中在云端，集中程度在未来只会进一步增强。 如果只有部分数据可以迁移至云端，或者您想循序渐进地迁移数据，混合数据选项让您可以灵活应对云端托管和本地环境之间的矛盾。 针对正在向云端转移的企业，混合已经成为了标准。 3. 数据存储正在传统的数据库和数据仓库概念之外快速扩展。 现在，数据来自四面八方，来自万事万物。
5K50发布于 2018-04-19 - 来自专栏用户8715145的专栏
云端数据库是有哪些类型？云端数据库特点有哪些？
大型企业有用到云计算，自然就少不了要使用云端数据库，毕竟要储存的数据量还是很大的。特别是对于公司的机密文件以及数据，要做到百分百的安全。而且云端数据库不同的产品所要用到的数据库也不一样。 那么云端数据库是有哪些类型？云端数据库特点有哪些？ 云端数据库是有哪些类型 云端数据库一般是有两种类型，一种是关系型数据库，一种是非关系型数据库。 甚至还有数据库一体机以及企业分布式数据库等。 云端数据库特点有哪些 1、云端数据库创建实例的速度是很快的，只需要用户选择好所需要的类型后，几分钟就可以创建好数据库实例。 2、可自动切换数据库实例，当主库发生故障时，系统会自动修复或更换当前的主库。 3、云端数据库一般会自动备份功能，当出现灾害或是其它的异常而导致数据出现问题时，云端数据库会自动保存7天内的所有数据。 4、可随时保证云端数据库与源数据库的数据同步，同时还不会影响源数据库的使用与运行。 而且云端数据库还具有监控与通知的功能，当监控项达到我们所设置的监控策略阀值时，系统会自动发送邮件或是短信告知管理员。
5.6K20发布于 2021-10-20 本地程序访问云端数据库和云端服务调试方案
经常遇到一些场景，程序在本地是正常的，但是在云端生产上面不正常。这些往往是由于云端的第三方服务存在差异或者是云端的数据库数据存在差异，比如脏数据，数据的历史原因等等，在本地是无法调试的。 这时候要还原生产的现场，最直接的方法是连接生产端的数据库或者第三方服务进行调试。但是这里有一些问题，有些数据库或者第三方服务，是没有密码的，比如redis。 （二）添加ssh连接，并且设置端口映射策略如下图所示，是添加ssh连接的界面：上图是将云端内网172.16.0.3和172.16.0.4的mysql和redis数据库的端口，映射到本地来了。 比如数据库的3306映射到了本地13306,redis的6379映射到了16379端口上。 （三）、启动映射策略添加完ssh连接后，启动这个ssh映射策略即可，如下图：这样，你的本地程序，连接本地127.0.0.1下的13306和16379端口，就可以连接上云端的数据库了。
12810编辑于 2026-02-09- 来自专栏云计算D1net
在云端保存数据安全吗?
在数据传输到云端时可能会遇到问题，一旦达到云端，数据处于静止状态，以及迁移到云端之前的分段区域的数据都可能面临风险。数据是一种资产，将面临损坏、删除甚至存储介质退化的风险。 静默数据损坏 传输数据和存储数据的每一时刻，都会出现静默数据损坏的风险。如果突然变成零，那么文件不再有用。传播中可能会发生静默损坏，并将数据写入存储介质。 当然存储在云计算中的数据应该被存储或发送到云端，使得公司可以从任何损坏或意外删除中恢复，并且不会意外地删除云数据，并且还必须主动监视数据损坏或攻击。 如果一个平台作为传统云供应商的网关，它可以添加一些完整性数据功能，例如创建不能通过该接口覆盖的WORM或黄金副本的数据。客户应选择一个平台，可以在数据迁移到云端之前指定保留锁，访问权限和WORM副本。 通过从云端重新启动数据或为此目的在云中创建基础设施来验证数据可能是昂贵的，因此这样的系统应该构建在利用成本有效的计算组件(如来自AWS的LAMDA或来自Azure的Micro功能)中。
2.7K110发布于 2018-03-28 - 来自专栏PPV课数据科学社区
大数据的未来在云端
即席查询生成报表，对业务进行预测，充分利用大数据流中隐藏的价值。 你的数据都有哪些类型组成？关系型数据、非结构化数据还是音频视频？ 你如何存储不同类型的数据，然后让企业内部的人员可以访问这些数据？答案其实在云端，云存储技术基本上可以应对大数据的存储需求，你可以存储任何类型的数据然后轻松地进行扩展。 比如读密集型的数据一般需要关系型数据库；日志文件只使用HDFS存储就可以；需要大量写操作的数据则需要NoSQL数据库；而存在大量读写操作的系统就需要强大的大数据架构来作为支撑。 新一代的BI工具能够应对实时、图形化、大对象以及非结构化数据的处理，同时能够将这些数据存储在云端。每种数据可以托管在不同的云服务上，但都可以通过一个API进行访问。 千里之行始于足下，在构建大数据分析模型或者投入机器学习，招聘数据科学家之前，企业需要先解决好如何存储大数据，而答案就在云端。
1.1K60发布于 2018-04-18 - 来自专栏SOLIDWORKS整体解决方案
3DEXPERIENCE Works Governance 2023新功能 3DE云端数据管理解决方案
3DEXPERIENCE平台更新版本已经与大家见面，微辰三维与大家分享Governance新功能，让我们先一起来看看视频—— 视频内容 点击观看云端数据管理新功能 多年来，我们一直在寻找SOLIDWORKS 数据管理的最优解决方案。 让我们看看研发团队是如何利用3DEXPERIENCE平台上的Collaborative Designer for SOLIDWORKS克服这些常见障碍的。 通过3DEXPERIENCE平台，仅需简单的几项配置，即可把SOLIDWORKS的(历史)数据便捷快速并安全地存储到云端，自定义属性也会被提取。 管理和协作您的SOLIDWORKS数据从未像现在这样方便！ 随着需求的增长，3DEXPERIENCE Works将继续帮助您克服连接变更管理、项目管理和发布管理的障碍！
40710编辑于 2022-11-09 - 来自专栏腾讯云大数据
PB 级数据的云端迁移战事
腾讯云大数据产品架构师李少波说。 少波说的这个正是一个月前他和另外3位同事，一起经历的一场云端迁移战事。 搜狐畅游是一家中国国内领先的在线游戏开发商和运营商，其开发和运营多种类型的在线流行游戏，如中国最受欢迎的客户端游戏《天龙八部》, 至今已14年，注册用户近3亿。 搜狐畅游先进的技术平台包括先进的2.5D 及3D 图形引擎、统一的游戏开发平台、有效的反作弊 和反黑客技术、自主研发的跨网络技术和先进的数据保护技术等。 实时业务的稳定性也得到了较大提升，对于作业的异常情况，都可以秒级恢复正常运行，且告警通知会在3s内直达用户。 目前，借助于云端大数据基础设施，快速实现基于数据驱动的业务创新和运营创新已成为新一代互联网企业的业界共识和主流趋势。
2K30发布于 2021-09-18 - 来自专栏PowerBI战友联盟
复用云端 PowerBI 数据集服务众人
今天的主题是：复用 PowerBI 数据集。 在我们把报告发布到云端以后可以有： ? 也就意味着我们可以复用不同的数据集。 数据集，是存储 PowerBI 数据容器名称，是 PowerBI 可视化背后的实际数据。这份数据可以依照不同角色的需求去做不同的报告。 我们回到云端界面，如下： ? 点击【在Excel中分析】就会下载到一个连接文件。这是一个.odc结尾的文件，它就像一条线，可以从 Excel 打通到 PowerBI 云端数据集的连接。如下： ? （一般是 PowerBI Pro） 在 PowerBI 中使用数据集 在 PowerBI 中点击： ? 选择 PowerBI 数据集，得到： ? 选择一个有权限的数据集，就可以使用了，如下： ? 这里的权限控制是通过 PowerBI 云端完成的，也就意味着不同的人的权限是在云端的工作区设置的。 总结 用 PowerBI 创建数据模型，并分发给不同的同事使用是一种很好的方式。
2K20发布于 2020-04-08 - 来自专栏企鹅号快讯
企业采用云端进行灾难恢复的3条建议
积极采用云计算实施灾难恢复 Bill Wilder表示，企业有很多方法可以将云计算用于灾难恢复，所以将集中讨论一个用例：在云端运行的现代关键任务应用程序。 在将工作负载迁移到云端时，企业的工作负载和基础架构将会更加现代化，更加云原生化，灾难恢复(DR)就会更加容易。考虑一下企业的应用程序代码和底层数据库。 但是灾难恢复(DR)对于数据库而言呢?企业在虚拟机中运行自己的数据库是一种非常常见的云应用模式，这使得云端的灾难恢复几乎和本地部署一样令人生畏。 为避免数据丢失，可以将企业数据(包括基本财务数据或客户数据)备份到持久存储服务，如Amazon Simple Storage Service，或类似的存储产品。 3. 将灾难恢复功能外包给安全运营中心(SOC) 云端的灾难恢复有很多方法，其中包括数据备份，基础设施/网络恢复和安全性。
90190发布于 2018-01-09 - 来自专栏程序那些事儿
Spline：云端 3D 设计的革新者
在数字化浪潮的推动下，3D 设计已成为创意表达的重要手段。Spline，作为一款云端 3D 设计工具，以其独特的优势和特点，为设计师们提供了一个全新的工作平台。 2D 界面下的 3D 创作：简化学习过程 Spline 采用了直观的 2D 界面来简化 3D 设计过程，降低了学习门槛。即使是 3D 设计的新手，也能快速上手，轻松创作出专业的 3D 作品。 这种交互式 3D 内容的创新，为用户体验设计带来了更多可能性。 云端存储：简化文件管理 所有在 Spline 上创建的内容都会自动保存在云端，用户无需担心数据丢失或同步问题。 这种云端存储解决方案，简化了文件管理，让设计工作更加流畅。 让我们一起探索 Spline，体验云端 3D 设计的魅力，让创意在云端自由流转。
54910编辑于 2024-08-14 - 来自专栏BestSDK
企业采用云端进行灾难恢复的3条建议
积极采用云计算实施灾难恢复 Bill Wilder表示，企业有很多方法可以将云计算用于灾难恢复，所以将集中讨论一个用例：在云端运行的现代关键任务应用程序。 在将工作负载迁移到云端时，企业的工作负载和基础架构将会更加现代化，更加云原生化，灾难恢复(DR)就会更加容易。考虑一下企业的应用程序代码和底层数据库。 但是灾难恢复(DR)对于数据库而言呢?企业在虚拟机中运行自己的数据库是一种非常常见的云应用模式，这使得云端的灾难恢复几乎和本地部署一样令人生畏。 为避免数据丢失，可以将企业数据(包括基本财务数据或客户数据)备份到持久存储服务，如Amazon Simple Storage Service，或类似的存储产品。 3. 将灾难恢复功能外包给安全运营中心(SOC) 云端的灾难恢复有很多方法，其中包括数据备份，基础设施/网络恢复和安全性。
916100发布于 2018-03-02 - 来自专栏云计算D1net
如何将数据分析带到云端
但事实是，许多现有的数据管理和分析平台根本无法对正在创建的海量数据提供所需的洞察速度。 这是为什么呢？ 可以说，这是一种传统系统的组合，也就是prem模型数据中心和应用的结合，这些应用无法轻松扩展，以提供处理所创建的海量数据所需的存储和计算，以及一种过于关注历史数据或大数据的分析方法。 关键是要将所有数据，尤其是金融数据，视为时间序列，即在固定的时间点上具有特定的值尽管这适用于许多其他行业。这里的实时环境非常重要，因为数据的商业价值从创建之日起就开始消失。 有三个关键的考虑因素： 数据源访问：能够输入分析平台的市场、贸易、订单和参考数据越多，可以提取的洞悉质量就越好。然而，金融机构一直难以管理数据的庞大数量、格式和位置。 持续分析依赖于即时连接数据源，无论其位置如何，并构建运行分析的数据源。 优化编码：量化分析师、数据分析师和数据科学家从数据中提取价值的速度有多快，而不是花时间管理和处理数据。
68020编辑于 2022-12-08 - 来自专栏腾讯云数据库(TencentDB)
Redis数据库云端最佳技术实践
对运维比较简单，但对于我们开发者是极其不友好的，在云上，IP资源很珍贵，我们现在有一个电商的大客户，现在用128片集群版，用的是一组两从，所有节点要128×3，就400多个IP，一个C网都不够，这种用法用起来对客户端太不友好 Redis集群版本身数据操作层面是很简单很稳定的，在做集群版的时候我们在两个地方做了很大的努力，第一个是数据迁移，我们看一下哪些场景会有数据迁移的需求？ 接下来回到这个话题，数据迁移，集群版谈到稳定性，最大的挑战就是数据迁移，哪些场景下会有数据迁移呢？ 我们花了很大的代价做这块，还有一块集群版，这个东西难免产生数据倾斜，假如你的Key设计的不合理，就会出现你数据基本上都是打在某分片上，这个时候数据倾斜了就要要涉及数据迁移。 1、访问监控；2、Key分析；3、指标监控；4、慢查询；5、告警配置；6、流量隔离。
1.7K90发布于 2018-11-06 - 来自专栏云计算D1net
如何让数据迁移到云端更加容易
然后，IT团队必须在非工作时间内安排并执行到云端的迁移，以保护业务连续性。这可能需要一定时间，因为数据通常通过缓慢的互联网迁移到云端。 一旦添加了云存储，元数据引擎按照管理政策可以自动负载平衡冷数据到新的云资源。例如，元数据引擎可以自动标识数据活动，并将其定义的时间窗口中未激活的数据归档，如30天、6个月或3年。 数据可以在内部存储和一个或多个云端之间移动，而不会中断应用程序的访问，即使数据在运行中。 重要的是，元数据引擎可以帮助IT比传统的归档解决方案更智能地将数据归档到云端。 可以通过广域网优化技术减少传输时间，这些技术在数据发送到云端之前将数据重新复制并压缩，同时通过对移动中的数据和静态数据进行加密来确保安全性。 三个关键挑战使得将与实时应用相关联的冷数据转移到云端变得困难。首先，如果应用程序再次需要数据，IT团队必须争取将这些数据恢复到本地存储。
1.1K60发布于 2018-03-27 - 来自专栏云计算D1net
云端数据加密的七大标准
由于可以通过前所未有的众多方式接入企业领域，这使得信息安全专业人员求助于众多数据保护方法。几十年来，加密一向是信息安全工具库当中的主要武器，但是面对我们如今亲眼目睹的数字化转变，加密需要重新评估。 一些目光长远的企业期望利用现代化技术，有机会重新定义其数据保护策略，同时在这个过程中将安全由一项必要的保护措施转变成一个业务推动因素。为了做到这一点，必须考虑下列七大加密标准。 问一下自己：贵企业里面有多少比例的数据是真正的敏感数据?贵公司的信息绝大多数很有可能出现在时代广场的广告牌上，不过造成的影响极小;某人生日派对的策划文档根本不需要予以加密。 ? 与云端加密有关的挑战归因于三大现象：云端数据急剧增加，现代用户的预期要求比较高，以及保留原生云功能具有的重要性。从2014年到2015年，我们目睹存储在公有云应用程序中的文件数量增长了10倍。 最后，正如我们已经讨论的那样，一刀切的加密会在云端带来复杂性，具体表现为影响搜索和报告功能。 第六个标准：自适应架构。 ?
1.2K40发布于 2018-03-21 - 来自专栏有关SQL
SQL 的云端大数据开发极速入门
这是因为原生的云存储（主要指S3这样的对象存储）既能够容纳大容量的明细数据，又能在性能和成本间取得一个很好的平衡——如果它同时再支持复杂的即席分析查询，那么云原生存储就将成为数据湖的最佳载体，对于实现数据分析人员的自由探索和应用系统的查询集成都有着非常重要的意义 首先作为参照，我们在AWS环境中利用S3和Athena成功地对一个csv文件进行了SQL查询。 PolyBase组件赋予了在数据库层面定义指向Hadoop/HDFS数据的外部表的能力，是帮助打通MPP数据库与Hadoop大数据生态系统的重要桥梁。 这就得说到在微软全面云化的战略之下，SQL Server其实也以多种不同形式迁移到了Azure云端，形成了若干款不同的云端数据服务产品（详情参见笔者介绍SQL Server 2017的文章）。 而PolyBase自然也一起被带到了云端，并在支持访问HDFS的基础上还添加了访问云存储的能力，这样我们就可以通过PolyBase和大家熟悉的T-SQL语言来轻松实现面向云存储的交互式查询了。 ?
1.6K20发布于 2019-12-25 - 来自专栏云社区活动
云端数据备份与恢复的最佳实践
云端数据备份与恢复的最佳实践在现代数字化生活中，数据的重要性不言而喻。无论是个人用户的照片和文档，还是企业的核心业务数据，意外丢失都会带来巨大的损失。 作为一名技术从业者，我一直倡导使用云端技术来备份和恢复数据，因为它不仅可靠，而且在灾难发生时可以快速恢复数据。今天，我想分享一些关于云端数据备份与恢复的最佳实践，希望对你有所帮助。为什么选择云端备份？ 在开始之前，我们需要明确一个问题：为什么要选择云端备份？安全性高：云服务提供商通常有完善的数据加密和多层安全保护，确保数据安全。可扩展性强：无论数据量是几百兆还是几个 PB，云存储都能轻松扩展。 随时随地访问：只要有网络，你可以在全球任何地方访问你的数据。容灾能力强：即使本地设备损坏或丢失，云端备份也能保证数据完好无损。云端备份与恢复的最佳实践1. 结语数据是数字化时代的核心资产，保障数据安全不仅是一项技术工作，更是对生活和业务负责的体现。通过遵循以上云端数据备份与恢复的最佳实践，我们可以大幅降低数据丢失的风险，提升系统的可靠性。
2.2K00编辑于 2025-01-18 - 来自专栏物联网智慧生活
工业数据采集上传云端工业网关应用
2、通过RS485或RJ45接口与PLC相连，通过2G/3G/4G与云服务器通信，在工业制造业的控制环节中实现各种设备的操控。 3、通过连接RFID或其他硬件，实现工业制造业中各种产品、步骤的辨识。 9、支持边缘计算，在物联网边缘节点实现数据优化、实时响应、敏捷连接、模型分析等业务，有效分担云端计算资源支持多台设备同时接入。 10、金属外壳，保护等级IP30。 图片3.png 工业数据采集上传云端优势 1、降低存储成本：从设备传感器上采集的数据点往往是时序连续的过程量，随着采集频率的提高和周期延长，数据量是非常大的，如果考虑对海量的数据的存储、备份和还原全生命周期的管理 3、提高容灾性：传统的数据中心的容灾备份往往采用两地三中心的方式，为保证7*24的系统高可用性对系统的要求高，而公有云的IaaS和PaaS的容灾备份机制能实现低成本的低数据丢失率和更短恢复间隔。 在越来越多的制造业把大数据放在云端进行处理的时候，在网络、存储和计算能力有效的情况下，采用对数据进行压缩和对数据特征进行选取的方法进行数据轻量化处理，可以满足数据业务的分析需求和提升处理效率。
1.7K20发布于 2021-07-08 - 来自专栏云计算D1net
将数据迁移到云端的最佳实践
一个设备通常足以传输高达30TB的数据。对于较大的数据量，团队可以使用多个设备或重复该过程多次以逻辑块或段移动数据。 (2)将设备运送到云端环境。 运送目的地可能是目标云或云数据中心本身附近的协同设施。无论目标是公共云还是混合云/多云设置，还有两个考虑因素将平滑迁移和容易迁移区分开来。 (3)将数据复制到云中的存储目标。 生立数据 一旦数据移动到云端，此过程需要一些移动数据并重新同步的方法。其镜像代表了迁移生产数据的答案。 (2)如果第二个镜像是“损坏”的，需要将设备运送到云端环境。 (3)然后在本地复制和远程副本之间重新连接镜像，并重新建立数据同步。 (4)数据的在线副本现在在云中，服务器可以故障转移到云端。 例如，美国的一个机构有2PB的内部部署数据，它希望部署在私有云中。
1.8K90发布于 2018-03-28 - 来自专栏云计算D1net
企业云端数据可能面临这些安全威胁
有很多与设备和服务之间的数据共享相关的风险，这也正是为什么在云端使用数据加密如此重要。 在日常生活中，我们使用了大量的数据。有些数据是敏感的，有些不是，但为了保证数据是安全的，我们必须将它加密。 本有很多与设备和服务之间的数据共享相关的风险，这也正是为什么在云端使用数据加密如此重要。 在线和离线数据存储的危险 在不同设备上存储，以及在某些服务中使用未加密的数据会面临各种各样的风险。 保护在线和离线数据存储 当存储到各种设备和在服务中使用时，数据必须要适当的加密，而当存储在云端时，就更需要这样做，因为这些数据可以在任何地方访问。 云文件同步：很重要的是，企业要保证所使用的服务支持零知识证明并且上传到云端的数据是经过加密的。 结论 存储在云端中的数据总是有会被恶意攻击者偷取的可能，这也正是为什么在将数据存储在云端之前要加密是如此重要了。
1.9K110发布于 2018-03-23
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号