电影头号玩家
已经火得不要不要
可究竟什么时候
我们才能体验电影中
那般VR游戏的快感?
汪仔整了件大事儿
似乎可以让尔等看到希望
近日
搜狗搜索联合清华大学计算机系
国家超级计算无锡中心
数学工程与先进计算国家重点实验室
卡塔尔计算研究所
国家并行计算机工程技术研究中心
等国家级科研单位
共同研发推出了
世界上首个基于超级计算机的
超大规模图计算系统
神图

神图系统大幅提升了
图计算系统所能够支持的
最大数据量和计算复杂度
这标志着超大规模图数据的
计算能力实现了巨大的飞跃
也为搜索领域的用户体验
开创了新的篇章
神图系统的运行环境是
神威·太湖之光国产超级计算机
2016年6月至今
神威·太湖之光已连续4次获得
世界高性能计算机排行榜第一名
是目前世界上最快的计算机
基于神威·太湖之光超级计算机的先进架构
神图攻克了大规模图计算系统
面临的多项核心技术难题
针对超级计算机的运行特点
进行了深度优化
充分挖掘了神威·太湖之光的
超宽并行架构的计算能力
将真实任务的应用性能
提升了两个数量级

神威·太湖之光超级计算机
搜狗搜索始终着力于
对前沿技术成果的推动、创新
致力于为用户带来便捷、丰富的
个性化搜索体验
满足用户的多元化搜索需求
搜狗搜索智能的用户分析系统为
神图系统的研发提供了不可或缺的
全方位多角度的用户实用场景
从2017年开始
搜狗搜索联合清华大学计算机系等单位
共同研发了面向超大规模
图计算的神图系统
研发团队通过深入分析神威·太湖之光的
系统大容量的内存、领先的通信能力
以及大容量且能快速访问的外存系统的优势
并同时充分结合超大规模图算法的实际需要
创新性地提出分化的消息传播技术
基于分组的消息分发技术
无锁数据分发技术
基于内存检查点的高可用系统等多项新技术
成功研发出可支持BFS/WCC/PageRank等
核心图计算算法的神图系统
计算规模可以扩展到神威·太湖之光
全部4万个节点
在实际应用中
神图能够充分利用上千万核的
运算能力和各节点之间通信网络
在12万亿条边的真实中文网页图上完成
PageRank算法的
一轮计算迭代仅需21秒
与文献中报道的
业界最先进水平系统相比
(如微软的GraM系统处理1.2万亿条边的
合成图每轮PageRank迭代需要140秒)
所处理图数据规模
增加了一个数量级
计算耗时反而缩短了一个数量级
综合性能提升超过百倍
实现了图计算节点规模
图数据规模以及
运行速度上的巨大突破

神图系统的研发成功
在扩展了国产超级计算机
在大数据分析领域的
应用能力的同时
提供了更加迅捷的实验
优化超大规模图算法的运算环境
神图系统更加强大的计算能力
给人工智能等相关领域
提供了更广阔的探索空间



