他认同公司正部署以训练机器学习模型的严重依赖 GPU 的系统与 Kinetica 等公司开发的 GPU 加速的数据库具有完全一样的架构。 Kinetica 也有一个容器环境,每种工作负载可分别向上向下扩展到集群上,以动态虚拟方式并肩运行。 典型的 Kinetica 集群部署为 40 到 60 个节点,盒子里有很多 GPU,可以形成相当好的集群来运行机器学习算法。 虽然公司可以在云端部署 Kinetica,但是,我们更倾向于在这一前提下进行部署:金融服务、军方、制造管理方面的数据敏感性是给定的。 为了让人工智能和 BI 集成更加容易,Vij 说 Kinetica「深度对齐」TensorFlow 框架,在 Kinetica 数据库框架中,张量被作为首先考虑的因素并以数据格式存储下来。
Kinetica Kinetica原本叫GPUdb,GPUdb这个名字可能就是在暗示,这是一个GPU驱动的数据库解决方案。 它的最新版本改名叫Kinetica,不仅拥有常用的GPU加速方法,还可以利用NVIDIAGPU栈来进行加速,如NVIDIA NVLink技术,可以加快数据在GPU(或者GPU与CPU)之间的传输速度。 Kinetica也试图成为为现代企业所用的数据库产品,所以它不仅有尖端技术的应用,同时也集成了标准的商业数据库功能,例如 SQL-92 查询、支持聚类、故障恢复和一键安装。
08 Kinetica Kinetica提供了一个平台,将流媒体和历史数据与位置智能和机器学习支持的分析结合起来。 Kinetica平台包括一个分布式的gpu加速的数据库,该数据库利用cpu和gpu的强大组合来分析具有毫秒响应时间的大量复杂数据集。 Kinetica的核心是一个面向分析工作负载(OLAP)设计的矢量化、柱状、内存优先的数据库。专门为利用GPU的并行计算能力而设计。 Kinetica自动在cpu和gpu之间分配任何工作负载,以获得最佳结果。使用行业标准SQL在几微秒内处理和分析数十亿行数据。
去年8月,Kinetica开始提供访问SQL GPT,这是该公司的向量处理引擎与大型语言模型的组合。 SQL GPT演示运行自Kinetica Cloud Workbench。 相反,它是训练生成适用于Kinetica的SQL。其上下文通过与自然语言请求相关的行业、业务或其他功能的相关长指令来补充此训练。 Chrome旧版窗口;Kinetica Workbench 当这种工具准备好广泛采用时,采用它的组织会发生什么变化? 他目前担任Kinetica的内容顾问。
数据库Azure38Lucene全文检索数据库Apache是39Annoy开源矢量库Spotify是40Hnswlib开源矢量库Hnswlib是41Neo4j支持矢量的NoSQL数据库Neo4j是42Kinetica 支持矢量的SQL数据库Kinetica43VertexGoogle44NucliaDBNucliaDB是45DeepLakeDeepLake46TairTair47AnalyticDB阿里云48OpenSearch
是 39 Annoy 开源矢量库 Spotify 是 40 Hnswlib 开源矢量库 Hnswlib 是 41 Neo4j 支持矢量的NoSQL数据库 Neo4j 是 42 Kinetica 支持矢量的SQL数据库 Kinetica 43 Vertex Google 44 NucliaDB NucliaDB 是 45 DeepLake DeepLake
https://cesiumjs.org/demos/ 3.Kinetica:独特的卖点是GIS与AI / ML的结合。 https://www.kinetica.com/products/streaming-analytics/ 4.Zoomdata:以流媒体可视化功能而闻名,但不是特别适用于GIS。
Kinetica 基于 GPU的企业实时数据分析服务提供商Kinetica宣布获得了一笔5000万美元的A轮融资,联合领投方为Canvas Ventures和Meritech Capital Partners Kinetica利用图像处理芯片提供计算支持,允许企业使用机器学习、商业智能分析和可视化技术更快速地分析海量数据,支持Google Cloud、Amazon Web Services,以及 Microsoft
IBM称,该产品旨在大幅提升Chainer、TensorFlow及Caffe等各大人工智能框架的性能,并加速Kinetica等数据库,从而可以加速深度学习,可将深度学习框架的训练时效提高近四倍。
Datameer市场战略和情报高级总监Andrew Brust Experian DataLabs执行副总裁Eric Haller InterSystems公司数据平台全球产品营销经理朱莉Lockner Kinetica
HPCC Systems Rob High,IBM首席技术官Watson iManage首席技术官Jan Van Hoecke Jetlore公司首席执行官兼联合创始人Eldar Sadikov Kinetica
Dremio、DataStax和Kinetica的数据库也正在添加生成式AI功能。 Aslett表示,MongoDB增加Atlas的向量搜索并不是独一无二的,但它将增强公司的竞争力。"
这类数据库的例子包括 Kinetica 、 Pinot 、 Druid 、 Rockset 、 Materialize 、 ClickHouse 、 SingleStore 和 Aerospike 等。
已经建立了几个商业GPU DBMS,其中一些是通过GPU定制设计实现的,例如Kinetica [6]、OmniSci [9](以前称为MapD [84])、SQream [10],或者通过扩展现有数据库系统实现的 一个典型的场景是实时车辆位置管理,如Uber中使用的AresDB和USPS中使用的Kinetica的案例所示。 Kinetica. https://www.kinetica.com/ [7] [n.d.]. USPS Deploys Kinetica to Optimize its Business Operations. https://www.kinetica.com/wp-content/uploads/2016/12/Kinetica_CaseStudy_ USPS_1.0_WEB.pdf [13] Daniel
OmniSci作为GPU加速的数据库分析平台的替代产品包括Brytlyt , SQream DB , BlazingSQL和Kinetica 。
5、支持矢量的SQL数据库 这些库与上面的类似,但是它们基本都是关系型数据库并且支持sql查询,例如SingleStoreDB, PostgreSQL, Clickhouse和Kinetica的pgvector
JeopardyBot: kesne/jeopardy-bot JSSolutions: JSSolutions/javascript KickorStick: kickorstick/javascript Kinetica Solutions: kinetica/javascript Lonely Planet: lonelyplanet/javascript M2GEN: M2GEN/javascript
当前异构计算技术的主要推动力是英伟达等技术巨头,也涌现出一批如 ZILLIZ、Kinetica、OmniSci 等新兴技术团队,主流的计算框架如 Spark 等也逐步提高对异构计算的原生支持。
3.4 支持向量的SQL 数据库 这些大都是关系型数据库并且支持sql查询,例如SingleStoreDB, PostgreSQL, Clickhouse和Kinetica的pgvector/Supabase
Kinetica 多年来一直靠政府合同维持运营,而 Sqream 似乎也是在勉强支撑。这些公司仍属于小众领域,至今无人能撼动 CPU 驱动型 DBMS 的主导地位。