大数跨境

向量数据库王冠易主!李开复的零一万物支棱起来了

向量数据库王冠易主!李开复的零一万物支棱起来了 维科网产业招商
2024-03-12
0

以下文章来源于维科网人工智能,作者Bing


3 月 11 日,龙抬头之日,零一万物宣布成功研发其基于全导航图技术打造的新型向量数据库“笛卡尔(Descartes)”,并包揽权威榜单 ANN-Benchmarks 的 6 项数据集评测第一名。

这标志着向量数据库排行榜的头号交椅再次易主。

笛卡尔包揽 6 项第一

向量数据库,又被称为 AI 时代的信息检索技术,是检索增强生成(Retrieval-Augmented Generation, RAG)内核技术之一。

ANN-Benchmarks 是当下业界最权威的向量数据库性能测试工具,它可以展示不同算法在不同真实数据集下的表现。

在 ANN-Benchmarks 离线测试中,零一万物笛卡尔(Descartes)向量数据库登顶 6 份数据集评测第一名,比之前榜单上同业第一名有显著性能提升,部分数据集上的性能提升甚至超过 2 倍以上。

零一万物向量数据库表现

由图可见,零一万物向量数据库在 6 份评测数据集中都位于最高,曲线位置越偏右上角意味着算法性能越好,笛卡尔包揽 6 项第一。

此前,榜单里六个数据集的榜首分属于两家厂商,而笛卡尔的包揽结束了这种“分庭抗礼”的局面,成为了大一统的“新王”。

关于零一万物

零一万物,是 2023 年初由李开复创办的 AI 公司。零一万物已经获得数轮融资,估值已超 10 亿美元,跻身 AI 2.0 独角兽行列。

大家对李开复也并不陌生。计算机科学家出身,他的职业生涯起步于硅谷,先后任职于微软、谷歌等,后来创立了创新工场,以投资 AI 为人熟知。

李开复

零一万物聚集的技术团队实力彪悍。团队成员涉及大模型技术、人工智能算法、自然语言处理、系统架构、算力架构、数据安全、产品研发等领域。联创团队成员包含前阿里巴巴副总裁、前滴滴/百度首席算法负责人、前谷歌中国高管、前微软/SAP/Cisco/副总裁,算法和产品团队背景均来自国内外大厂。

2023 年 11 月,零一万物曾发布首款开源中英双语大模型“Yi”

背后的技术揭秘

回归本次主题。RAG 向量检索主要解决两大问题:一,分别是通过建立某种索引结构,减少检索考察的候选集。二、降低单个向量计算的复杂度。

对于第一个问题,零一万物团队给出量大策略:

  • 全导航图技术。零一万物研发的全局多层缩略图导航技术,图上坐标系导航,既能保证精度,又能裁剪大量无关向量。

  • 自适应邻居选择策略,填补业界空白。零一万物自研的自适应邻居选择新策略,使每个节点可以根据自身及邻居的分布特征动态地选取最佳邻居边,更快收敛接近目标向量,从而让 RAG 向量检索性能提高 15%-30%。

对于“降低单个向量计算的复杂度”的问题,零一万物采用了两级量化方案增强 RAG

  • 通过用两级量化降低计算复杂度,同时列式存储充分利用 SIMD 的并发能力,进一步发挥硬件能力,相比传统 PQ 查表,性能得到大幅提升到 2-3 倍。

  • 还有索引结构优化、连通性保障等全栈向量技术方案提高笛卡尔向量数据库的性能。

解决大模型当下缺陷

对大模型应用开发者来说,向量数据库是非常重要的基础设施,在一定程度上影响着大模型的性能表现。

比如,向量数据库能精准解决大模型当前阶段下的重要问题:

  • 实时信息:大模型无法反应最新的信息。向量数据库采用轻量化更新机制,可以快速补充最新信息。

  • 隐私保护:用户的安全隐私数据有泄密风险。向量数据通过在推理阶段扮演信息传递的中间载体,破解了隐私保护的难关。

  • 幻觉矫正:大模型常推理失真或产生幻觉。向量数据库提供的丰富知识参照,有效矫正和减轻此类问题。

  • 推理高效:大模型推理成本高,向量数据库能够作为一种缓存机制,避免每一次查询请求都需要重新执行复杂的推理计算,节省计算资源。

伴随 AI 热风,向量数据库创业公司也异军突起。比如,2023 年,OpenAI 的向量数据库合作方 Pinecone 完成了 B 轮 1.38 亿美元融资,国内初创企业 Fabarta ArcNeural 也完成了上亿元 Pre-A 轮融资。

笛卡尔将在近期亮相AI产品中

关于数据的重要性,有个十分形象的比喻:信息时代的数据,就是工业时代的石油。未来,向量数据库,将成为决定大模型天花板的关键要素。

零一万物笛卡尔向量数据库目前聚焦于高性能向量数据库,在实际应用场景中具备超高精度、超高性能核心优势。

  • 超高精度:基于多层缩略图和坐标系实现层间导航和图上方位导航,以及图连通性保障,实现精度大于 99%,相同性能下,精度大幅领先业内水平。

  • 超高性能:高效的边选择和裁剪技术,千万数据库 ms 响应。

具体来说,高性能向量数据库可以帮助企业客户构建私域知识库、智能客服系统;在自动驾驶领域,使用高性能向量数据库可来加速自动驾驶模型训练等。

零一万物表示,笛卡尔向量数据库将用在近期即将正式亮相的 AI 产品中,未来也将结合工具提供给开发者。

- END -


往期热点推荐





2023年行业观察之回顾与展望

2023年全球数字经济产业大会成功举办!期待明年再相见

2023全数会开幕!百余家名企集中亮相,行业大咖共谈数字发展

招商必备:2023园区高质量发展百强以及生物医药、先进制造业园区百强汇总

一文看懂数字经济产业发展情况

全面解码!储能系统的“双重进化”

如何抢抓新型储能产业“风口”?广东省又出重磅措施!

2023年5月激光企业市值排名(附榜单)

打破垄断!十大国产半导体设备龙头!

@招商人:2023年6月展会信息汇总来了

2022年中国瞪羚企业排行榜(文末附完整名单下载)

【深度】新能源汽车“三电”供应链物流模式分析

如何更大力度吸引和利用外资!

2023年半导体十大趋势预测

2023年中国光伏硅片企业竞争力TOP10

淄博火爆出圈背后的“发展密码”

深度!2023年中国光伏电池片企业TOP10竞争力分析

@招商人:2023年5月展会信息汇总来了

全球独角兽!这29家中国半导体企业上榜!

优化营商环境,要从哪些方面发力?

来这些经济强市招商,应“紧盯”哪些产业?

招商必备:2023中国百强产业集群名单

推进招商引资高质量发展,大湾区九市“火力全开”

“敲门招商”全球觅商机,看深圳各区“出海”招商成效几何?

速看!2023年政府工作报告里的产业发展热点

最新!2022年中国独角兽企业名单来了(附完整名单)

招商如何突围制胜?看中西部第一县招商引资方法论

关注县域经济发展,看百强县的招商引资之道

招商,要向先进地区学什么?

2023如何抓招商拼经济?各省市最新产业招商政策大比拼

如何提高招商引资成效?看这些城市怎么做

未来三十年的朝阳产业

2023企业选址指南

4357家!第四批专精特新“小巨人”企业名单汇总(文末附完整名单下载)

长按识别二维码
添加产业招商客服



【声明】内容源于网络
0
0
维科网产业招商
维科网产业招商平台,多维度、多层次、多渠道为政府和园区招商引资提供一站式管家服务,服务包括产业咨询与规划、招商宣传、招商活动、企业考察与对接、委托招商、园区运营等,助力政府和园区精准招商、高效招商。
内容 649
粉丝 0
维科网产业招商 维科网产业招商平台,多维度、多层次、多渠道为政府和园区招商引资提供一站式管家服务,服务包括产业咨询与规划、招商宣传、招商活动、企业考察与对接、委托招商、园区运营等,助力政府和园区精准招商、高效招商。
总阅读857
粉丝0
内容649