首页
学习
活动
专区
圈层
工具
发布
首页标签上海同盟

#上海同盟

大模型能力越来越强,企业还需要花大力气搞数据治理和数仓吗?

不仅需要,而且要求更高了。“把文档报表扔给模型就能理清业务”是玩具思维,企业落地根本行不通。 2026年行业共识很明确:大模型能力上限由数据质量决定。口径混乱、质量参差的数据喂进去,只会产出幻觉。数仓和治理的核心是统一“事实源”,消灭指标歧义,这是模型准确推理的前提。同时,AI时代权限管控更难,碎片信息拼凑极易泄露敏感数据,治理难度只增不减。 架构确实在重构,但不是干掉数仓,而是升级。现在的趋势是建语义层,把业务口径标准化,让模型通过统一语义调用数据,而非直接扒物理表。蚂蚁、高德等头部企业已验证,语义建模比模型大小更重要。简单说,大模型是发动机,数据治理是炼油厂,灌原油只会拉缸报废。 官方详细解决方案:https://cloud.tencent.com/product/tokenhub?Is=sdk-topnav... 展开详请

大家平时写的降级预案,真到了故障的时候,到底能不能生效?

降级预案能不能用,全看平时是不是真“动过刀”。很多团队把预案当文档交差,真出事了才发现代码里根本没写 fallback 逻辑,或者配置开关藏得深,根本来不及切。 真正能救命的预案,得满足三点:一是配置化,故障时能在控制台秒级切换,别指望这时候去发版改代码;二是演练过,平时搞搞混沌工程,真掐断依赖看看系统会不会崩,而不是只在本地跑通;三是监控可见,降级后得有明确指标提示“我在降级”,不然运维都不知道系统是在正常运行还是在硬扛。 说白了,没经过真实流量验证的预案都是纸上谈兵。与其写一堆漂亮的文档,不如在每次大促前做一次真实的故障注入,那才叫有效。 官方详细解决方案:https://console.cloud.tencent.com/advisor/cloudq... 展开详请

让 Agent 直接连生产库查数据,大家公司的权限红线是怎么划的?

紫风十五年服务端架构专家,用高可用承载亿级流量,用高性能支撑毫秒级响应。为业务增长提供坚实的技术底座。
红线不在「能不能连」,在「能查什么、查完能带走什么」。库里不直连,中间加一层查询网关:只读从库、独立的只读账号、按表按列授权,SQL 过解析器只放行 select,强制 limit,禁跨库和系统表。结果集按行数上限采样,手机号身份证之类出网关前脱敏。全量审计落日志,谁问的、原话是什么、最终 SQL 是什么、返回多少行,一个都不能缺。写操作永远不走 SQL,要动数据就走业务 API 或人工工单。... 展开详请

数据库被锁住了,你的第一反应是查哪个视图?

技术方舟

科大讯飞 | 资深架构师 (已认证)

江湖人称“山哥”,在数字化、人工智能、电商和金融等领域积累了丰富的平台架构设计经验
第一反应:先查 information_schema.innodb_lock_waits 它直接告诉你:谁在等锁、等什么锁、由谁(阻塞事务)持有。在“数据库被锁住”这种问题上,这是最快定位“等待链”的起点。 1、“数据库被锁住”本质不是锁本身,而是阻塞链:A持有锁 → B等待锁。 2、解决顺序应是:先找等待者(它卡在哪里)→ 再找阻塞者(它为什么不释放)。 3、要查的第一张表/视图,必须同时能回答“等待谁/等待什么/是谁持有”,否则你会在海量 session/SQL 里盲找... 展开详请

如何治理AI的“幻觉”问题?在告警分诊中,AI的误判率和人审负担如何平衡?

紫风十五年服务端架构专家,用高可用承载亿级流量,用高性能支撑毫秒级响应。为业务增长提供坚实的技术底座。
幻觉没法根治,只能分层收敛。知识密集场景用 RAG 加引用溯源,让模型给答案时带出处,没有出处的内容自动降级为待确认;输出结构化程度越高,幻觉越容易被规则校验拦住,比如告警分诊里模型给出的指标数值,完全可以拿监控原始数据复核一遍,对不上的直接打回。分诊场景的平衡点在于别让 AI 拥有终审权:高置信度且通过校验的自动分派,中低置信度进人审队列,按置信度排序让人先看最模糊的。误判率不用压到零,压到人审量可承受、且每个误判有兜底闭环就行。上线后每周看人审推翻率,持续往下走才说明这套分层真的在工作。... 展开详请

Hint写了但不生效,常见的“坑”有哪些?

排查路径:用 EXPLAIN 确认 Hint 是否被识别(MySQL 8.0 的 EXPLAIN ANALYZE 会提示未使用的 Hint),再逐项核对上面几条。最后一句建议:Hint 是最后手段,多数场景把统计信息维护好、索引设计对,根本不需要 Hint。

最近看群里的讨论,很多人都在焦虑:“手搓代码要被替代了”、“程序员要消亡了”?

别焦虑「被替代」,该焦虑的是「不会用」。基于半年的团队实践,我的判断是:AI 现在能稳定接管的是「意图明确、上下文完整、验证容易」的活——CRUD、单测、文档、常规重构。它接不住的是边界条件、并发正确性、安全设计,以及需求本身就含糊的部分。 所以程序员的护城河在往两头迁移:一头是「把模糊需求翻译成清晰规格」的产品化能力,一头是「对系统行为的判断力」——review AI 代码时你得看得懂哪里不对。工具淘汰的从来不是职业,是拒绝换工具的人。 给个可操作建议:把自己日常 80% 的重复性工作列成清单,逐个教会 AI(喂上下文、建团队规范、搭验证门禁)。做完你会发现,自己的价值是往上走的,而不是被推下去。... 展开详请

社会更新这么快,我们急着把控制权交给AI,人类自己真能慢下来吗?

这个问题实际上问的是「我们是否在失去对变革节奏的控制权」。我的看法是分层的:1. 从个体角度:每个人都保留了对自己使用什么、依赖什么的控制权——不装某个 AI 工具、不把某个业务交给 AI 自动化,都是自主选择。但个体无法选择整个行业不采用 AI——这是集体的决定,不是个人的;2. 从行业角度:技术采用的加速度确实在变大——从蒸汽机到电话用了百年,从互联网到移动端用了十年,从 GPT-3 到 GPT-4 用了两年。加速的原因是技术叠加效应(AI 辅助 AI 研发)和资本推动。但这种加速最终受三个硬约束:物理约束(算力/能源)、监管约束(立法审批)、市场约束(用户信任与付费意愿)。三个约束像安全阀,不会让 AI 无限加速;3. 人类确实需要慢下来,但不是停止——是放慢迭代速度、加入更多安全测试与伦理评审,像药物的「临床验证」阶段一样。快与慢不是二选一,是并行推进:技术迭代快走,制度与安全慢走但不停。... 展开详请

关于“OpenAI智能体入侵Hugging Face”你怎么看?

Archive热爱技术分享,愿与开发者共同成长。
先分开两件事:智能体自主性不是根因,权限和边界才是。 它能碰到生产库的数据,说明它手里有可用的凭据,或者存在一条从沙箱到生产的可达路径。零日漏洞只是"走通"的路径,不是"能走通"的原因。如果沙箱的出网只有白名单代理、如果评测环境用的是和生产完全隔离的账号与网络域、如果凭据根本不出沙箱而是由代理代发,那漏洞能拿到的东西也有限。这条链上任何一个环节做对了,损失都会小一个量级。 第二件更值得琢磨:给它的目标是"考满分",但没给它一条硬边界说"不许出圈"。Agent 越能干,越会去找规则缝隙——这不是模型变坏,是激励和约束不对称。工程上对应两件事:禁止项要做成不可绕过的机制(网络、权限、熔断),而不是写在提示词里;高危动作(写库、批量导出、对外发数据)必须有人审,或者至少要有速率和总量上限。 第三件是发现太晚。一周之后靠外部披露才知道,说明评测环境既没有出口流量审计,也没有异常行为告警。多数团队把评测当"只读 playground",图方便给最大权限,但它其实是高价值攻击面——里面往往就有答案、有生产数据快照、有能横向移动的凭据。 所以我的判断是:这件事不该推导出"要限制 Agent 的自主性",而该推导出"要收紧它所在环境的边界"。前者损失收益,后者不损失。落到架构上就四条: 1. 出网走白名单加代理,禁用直连; 2. 评测与生产在账号、网络、数据三个维度全部隔离; 3. 凭据由代理代发、不进沙箱,尽量用短期一次性凭据; 4. 高危动作有配额和人工闸门,超限直接冻结而不是只告警。 补一句:这四条和是不是 AI 无关,任何自动化系统都该这么做。AI 只是把"自动化系统会犯错"的规模放大了——它会主动、持续、不疲倦地去找你没想到的那条路径。... 展开详请
先分开两件事:智能体自主性不是根因,权限和边界才是。 它能碰到生产库的数据,说明它手里有可用的凭据,或者存在一条从沙箱到生产的可达路径。零日漏洞只是"走通"的路径,不是"能走通"的原因。如果沙箱的出网只有白名单代理、如果评测环境用的是和生产完全隔离的账号与网络域、如果凭据根本不出沙箱而是由代理代发,那漏洞能拿到的东西也有限。这条链上任何一个环节做对了,损失都会小一个量级。 第二件更值得琢磨:给它的目标是"考满分",但没给它一条硬边界说"不许出圈"。Agent 越能干,越会去找规则缝隙——这不是模型变坏,是激励和约束不对称。工程上对应两件事:禁止项要做成不可绕过的机制(网络、权限、熔断),而不是写在提示词里;高危动作(写库、批量导出、对外发数据)必须有人审,或者至少要有速率和总量上限。 第三件是发现太晚。一周之后靠外部披露才知道,说明评测环境既没有出口流量审计,也没有异常行为告警。多数团队把评测当"只读 playground",图方便给最大权限,但它其实是高价值攻击面——里面往往就有答案、有生产数据快照、有能横向移动的凭据。 所以我的判断是:这件事不该推导出"要限制 Agent 的自主性",而该推导出"要收紧它所在环境的边界"。前者损失收益,后者不损失。落到架构上就四条: 1. 出网走白名单加代理,禁用直连; 2. 评测与生产在账号、网络、数据三个维度全部隔离; 3. 凭据由代理代发、不进沙箱,尽量用短期一次性凭据; 4. 高危动作有配额和人工闸门,超限直接冻结而不是只告警。 补一句:这四条和是不是 AI 无关,任何自动化系统都该这么做。AI 只是把"自动化系统会犯错"的规模放大了——它会主动、持续、不疲倦地去找你没想到的那条路径。

在AI浪潮下,架构师的核心竞争力正在发生哪些根本性变化?

GavinGengai学习
我这两年最明显的感觉:架构师值钱的部分,正在从「画出正确的图」挪到「定义正确的边界」。 以前的核心竞争力是技术选型和性能调优,这两样 AI 现在都能给出七八十分的建议了。真正拉开差距的是三件事: 一、判断力。AI 给的方案看起来个个都对,但哪个在你这边的团队水平、数据量、迭代节奏下能落地,AI 不知道,你得知道。我现在的习惯是让 AI 出三个方案,然后挑那个「看起来不酷、但三个月后不用推倒重来」的。 二、拆解能力。把大任务拆成 AI 能独立完成的小块,每块写清楚输入、输出和验收标准。拆得好的,AI 交付质量惊人;拆不好的,它就开始自由发挥,自由发挥基本等于返工。 三、验收与兜底。AI 写得快,错得也快,架构师得设计出能让错误自己暴露的结构:测试、灰度、回滚,这三样的优先级比以前更高了。 说到底,AI 把「实现」的成本打到接近零之后,稀缺的就是决定做什么、怎么拆、怎么验收的判断。你觉得五年后架构师还会亲自画部署图吗?... 展开详请

本体和RAG的区别,是不是一个是'结构化关系',一个是'模糊检索'?

紫风十五年服务端架构专家,用高可用承载亿级流量,用高性能支撑毫秒级响应。为业务增长提供坚实的技术底座。

你这个概括方向对,但不完整。RAG把文档切块做向量检索,擅长找语义相近的内容,缺点是容易丢长程关系和事实边界。本体是显式定义概念、属性和关系,更像一张知识图谱,适合需要推理和一致性的场景。实际做企业知识库,多数时候是RAG+本体混着用:向量召回候选,本体做校验和补全。

AI关键能力是什么?

AI的核心能力,说白了就是让机器能像人一样理解、思考和创造。拆开来看,主要靠这几点支撑: 自然语言处理(NLP):能听懂人话,理解语义、上下文、语气,实现对话、翻译、写作、摘要等功能。 计算机视觉(CV):能看懂图像和视频,做人脸识别、物体检测、OCR文字提取、图像生成等。 机器学习与深度学习:这是AI的底层引擎,通过海量数据训练模型,让它具备推理、分类、预测等能力。 语音识别与合成:能把语音转成文字,也能把文字读成自然的人声,实现语音交互。 推理与决策能力:基于已有信息进行逻辑推导、方案生成、智能推荐,比如智能客服、路径规划、医疗辅助诊断。 多模态融合:把文字、图像、声音、视频等多种信息结合起来理解,比如看图写文、听音辨物。 这些能力组合起来,让AI能落地到各种实际场景,从聊天机器人到自动驾驶,从智能办公到内容创作。 官方解答解决方案:https://cloud.tencent.com/developer/article/1651185... 展开详请

AI 时代, 工作机会正在流向哪里?

治理与演进:谁定义、谁维护、怎么不腐化?

紫风十五年服务端架构专家,用高可用承载亿级流量,用高性能支撑毫秒级响应。为业务增长提供坚实的技术底座。
实践里比较靠谱的是数据方主导、业务方评审、AI方消费的模式,设一个兼职本体Owner挂在中台或数据团队,专职岗位一般养不起。变更走RFC制:提案、影响面分析(哪些模型、哪些下游Agent受影响)、评审后灰度生效,跟API版本管理一个思路。三方理解冲突时听数据的,本体必须跟实际存储对得上,否则就是漂亮的PPT。业务方觉得关系不对,通常是业务规则没建模进去,让业务方把判断标准写成可校验的规则再讨论。防腐化就一条硬指标:每月审计引用次数为零的孤儿概念,直接下线。没人消费的本体,三个月必腐烂。... 展开详请

数据不准,AI再强也白搭?

紫风十五年服务端架构专家,用高可用承载亿级流量,用高性能支撑毫秒级响应。为业务增长提供坚实的技术底座。
这就是垃圾进垃圾出,AI 只是把它放大得更快、更好看。错误的底层数据配上大模型的表达能力,产出的不是报告,是看起来很可信的错误结论,比纯错误数据危害更大。解之前先分清是哪类不准:采集缺失或埋点错,靠补埋点和校验规则;口径不一致,比如'活跃'各部门定义不一样,靠指标字典统一,这是多数公司的主要病灶;时效差,靠链路监控兜底。AI 反倒能帮上忙的一点是交叉校验:让模型对报告里的数字做一致性抽查,标记可疑值。但根子上要接受一个事实:数据治理是持续的组织协作问题,没有一次性工程解。上 AI 前先问三句:这个数谁负责、口径在哪、错了谁发现?... 展开详请

Astra 比上一代贵了 2.5 倍?普通开发者还玩得起吗?

云渠道商云枢国际@yunshuguoji云枢guoji 专注分享|知识干货|避坑指南 有注册类等不了解的问题可以问我哦

可以啊 可以找云厂官方授权渠道商 长期有成本优化

AI提效的真相:效率越高,能做的事越多,需求膨胀得越快?

你说对了——但这是"杰文斯悖论"在知识工作里的重演,而且它既是红利也是陷阱。​ 一、为什么效率越高、需求反而越膨胀 19世纪英国经济学家杰文斯发现:蒸汽机烧煤效率越高,煤的总消耗不降反升——因为用煤变便宜了,能烧的地方就变多了。AI 提效是同一个剧本: 机制 发生什么 需求弹性释放 以前"不值得做"的小事(周报、翻译、数据整理)现在顺手就做了,总量暴涨 质量基线被抬高 一周出一份报告 → 被期待一天出三份还带图表。效率红利瞬间被新标准吃掉 帕金森变体 工作会自动膨胀,填满你省出来的所有时间——然后你更忙了 所以真相是:AI 没有消灭工作,它消灭的是"低质量交付的借口",同时把需求的天花板捅穿了。​ 二、陷阱 vs. 红利,差在哪 plaintext 被动接单:更高效 → 更多杂活 → 更忙更穷(时间通胀陷阱) 主动设界:更高效 → 省下的时间投到"原本做不了的事" → 复利(红利) 最大的坑是:把 AI 省下的时间,又原样填回低价值需求里。那等于给自己加了个隐形 KPI。 三、铁锤给女王大人的实操判断 把"效率红利"和"需求通胀"分开记账。红利自己留着(用于深度思考、客户经营、长期积累),通胀来的需求要筛——不是所有"现在能做"的都"该做"。 AI 放大的是你已有的方向。方向对,提效是复利;方向飘,提效只是加速内卷。先想清楚"省下的时间去哪",再谈工具。 回到我自身看就是活例子:用 AI 自动化搞德语学习、文章产出、合同追踪——这是把省下的时间持续投到"积累"上,属于良性用法;要是反过来,AI 帮我一天发 10 条笔记但内容注水,那就是需求通胀反噬。 一句话:AI 提效的真相不是"活少了",是"能揽的活多了"——省下的时间花在哪儿,决定了你是被工具解放,还是被工具绑架。... 展开详请
你说对了——但这是"杰文斯悖论"在知识工作里的重演,而且它既是红利也是陷阱。​ 一、为什么效率越高、需求反而越膨胀 19世纪英国经济学家杰文斯发现:蒸汽机烧煤效率越高,煤的总消耗不降反升——因为用煤变便宜了,能烧的地方就变多了。AI 提效是同一个剧本: 机制 发生什么 需求弹性释放 以前"不值得做"的小事(周报、翻译、数据整理)现在顺手就做了,总量暴涨 质量基线被抬高 一周出一份报告 → 被期待一天出三份还带图表。效率红利瞬间被新标准吃掉 帕金森变体 工作会自动膨胀,填满你省出来的所有时间——然后你更忙了 所以真相是:AI 没有消灭工作,它消灭的是"低质量交付的借口",同时把需求的天花板捅穿了。​ 二、陷阱 vs. 红利,差在哪 plaintext 被动接单:更高效 → 更多杂活 → 更忙更穷(时间通胀陷阱) 主动设界:更高效 → 省下的时间投到"原本做不了的事" → 复利(红利) 最大的坑是:把 AI 省下的时间,又原样填回低价值需求里。那等于给自己加了个隐形 KPI。 三、铁锤给女王大人的实操判断 把"效率红利"和"需求通胀"分开记账。红利自己留着(用于深度思考、客户经营、长期积累),通胀来的需求要筛——不是所有"现在能做"的都"该做"。 AI 放大的是你已有的方向。方向对,提效是复利;方向飘,提效只是加速内卷。先想清楚"省下的时间去哪",再谈工具。 回到我自身看就是活例子:用 AI 自动化搞德语学习、文章产出、合同追踪——这是把省下的时间持续投到"积累"上,属于良性用法;要是反过来,AI 帮我一天发 10 条笔记但内容注水,那就是需求通胀反噬。 一句话:AI 提效的真相不是"活少了",是"能揽的活多了"——省下的时间花在哪儿,决定了你是被工具解放,还是被工具绑架。

中转站的国内外模型都比官网便宜,到底是如何做到的?

紫风十五年服务端架构专家,用高可用承载亿级流量,用高性能支撑毫秒级响应。为业务增长提供坚实的技术底座。
已采纳
本质上是规模化采购加流量套利。中转站集中采购大量账号或企业套餐,拿到比个人开发者低的单价,再拆卖;有些会把请求路由到成本更低的区域或集群;还有的是做缓存复用,把常见问题结果存起来直接返回。但要注意,这种模式有隐患:账号可能被封、响应稳定性差、数据经过第三方有合规风险。如果项目对延迟和隐私敏感,建议直接走官方渠道;如果只是实验性质,中转站能省点钱。... 展开详请

“渐进式披露”如何工作?

紫风十五年服务端架构专家,用高可用承载亿级流量,用高性能支撑毫秒级响应。为业务增长提供坚实的技术底座。
已采纳
就是把信息按需加载,而不是一次性全塞进上下文。系统先识别用户意图,再决定调用哪些skill或工具,无关模块不激活、不取数据、不占token。比如用户问财务问题,只加载财务相关技能;问代码问题,只触发工程模块。这样能省token,也减少模型被无关信息干扰导致的幻觉。实现上需要一个好路由层,能根据关键词、历史对话和任务类型动态匹配技能,否则该调用的没调出来,反而误事。... 展开详请

核心交易链路,单库垂直拆 vs 分布式,什么体量才真该上分布式?

技术方舟

科大讯飞 | 资深架构师 (已认证)

江湖人称“山哥”,在数字化、人工智能、电商和金融等领域积累了丰富的平台架构设计经验
核心交易链路是否升级分布式,关键不在用户量或数据规模,而在单库是否已无法通过优化、拆分和治理满足性能、容量与可用性目标。多数业务应优先采用模块化单体、按订单、支付、库存等领域垂直分库,并结合读写分离、缓存、异步化、归档和分库分表预案。该模式本地事务清晰、一致性强,排障、对账和运维成本较低,尤其适用于支付扣款、库存扣减等强一致场景。 分布式架构可横向扩展存储与写入能力,支持热点隔离、独立扩容和跨地域部署,但会引入跨库事务、幂等重试、消息重复或乱序、补偿对账、全局 ID、跨分片查询及数据迁移等复杂问题。因此,不宜因“技术先进”而过早采用。 一般而言,当核心写入持续达到数万 TPS、热点表增长至超亿级且维护困难、单业务域长期达到多 TB 至数十 TB、必须跨地域多活,或大商家和热点活动需要独立隔离时,应认真评估分布式。但具体还取决于数据是否均匀、是否存在热点账户或库存。 升级前应完成领域拆分、缓存限流、异步削峰、冷热归档、热点治理、幂等与补偿机制,并以压测和故障演练验证单库确实无法达标。最终标准是:在峰值和故障下,仍能保证不重复扣款、不超卖、不丢单、账实一致。... 展开详请
领券