2018年10月24日~27日,Microsoft Tech Summit 2018微软技术暨生态大会在上海世博中心召开,中国首批微软MRPP认证合作伙伴之一DataMesh受邀参展。DataMesh 在会上展示了其黑科技AI+MR产品及demo,CEO李劼/CTO邬浩进行了技术分享。不同于以往,这次微软Tech Summit上,DataMesh 带来了一款用HoloLens 玩的无限大空间定位游戏——《逃离死亡星》,我们一起来看一下。
▲吸睛图——嘉宾在MR Night上体验MR游戏《逃离死亡星》
▲Microsoft Tech Summit 2018
首先,在揭晓游戏体验项目之前,让我们一起来回顾一下这次大会DataMesh 展示的主要项目。
黑科技产品
在混合现实展区,DataMesh 团队展示了其基于Azure 和HoloLens 自主研发的AI+MR产品DataMesh Remote Expert 商询智能远程专家和DataMesh Live! 商询智能混合现实展示系统。
DataMesh Remote Expert
商询智能远程专家
DataMesh Remote Expert 是一款DataMesh 北京商询科技有限公司面向企业用户自主研发的企业级智能远程专家系统。它向用户提供专家管理、视频通话、多端支持、环境自适应、知识库访问等功能。在售后服务、维修指导、技能培训等场景有着广泛应用。不同于传统的远程专家系统,DataMesh Remote Expert 不仅可以实现远程视频通话,还可以连接企业知识库、专家资源库并在问题现场实现基于混合现实的交互协作。
DataMesh Remote Expert 功能特点包括:
1. 专家管理
DataMesh Remote Expert 提供专家维护,让用户在后台快速查询专家的联系方式,并能进行一键远程呼叫。
▲专家通过HoloLens 与一线员工分享经验
2. 信息传输
DataMesh Remote Expert 支持双向语音沟通和单向视频传输的协作环境,专家端实时查看工人端工作场景,通过截图标注回传到工人端。
▲专家通过知识图谱快速找到解决问题的关键信息
3. 环境自适应
DataMesh Remote Expert 针对网络信号质量自动适配通话视频清晰度,断线自动重连,保障通话流畅。
▲专家通过HoloLens 实时观察现场
4. 知识图谱集成
DataMesh Remote Expert 集成了DataMesh DataMix 知识图谱功能,依托于智能云服务,拥有海量知识查询,推送知识到工人端等能力。
▲知识图谱通过HoloLens把知识推送到一线员工眼前
5. 远程指导标定
通过DataMesh Remote Expert 远程服务,可实现快速标定,跨地域指导。
▲配到HoloLens的工人在远端专家的指导下作业
6. 混合现实操作辅助
DataMesh Remote Expert 基于Microsoft HoloLens 虚拟现实设备,可实现虚拟与现实同时呈现,专家并可通过后台操作平台对工程师视频进行远程辅助操作。
▲操作工人使用HoloLens 对设备进行检查
DataMesh Live!
商询智能混合现实展示系统
DataMesh Live!是一款北京商询科技有限公司面向企业用户自主研发的企业级智能混合现实展示系统。它向用户提供混现实画面直播和录制、多人多机位实时协同、大范围实时定位、开发工具和API接口、内容存储和分发等功能。在混合现实影视拍摄、混合现实互动游戏、产品营销等场景有着广泛应用。
▲DataMesh Live!商询智能混合现实展示系统
把混合现实场景投放到屏幕
DataMesh Live!商询智能混合现实展示系统可以实现混合现实画面直播和录制,捕捉全息影像与现实画面实时混合,并投放到屏幕裸眼观看。它的多人多机位实时协同能力,实现了多台设备间应用协同管理。
▲体验人员通过HoloLens观察混合现实场景
不仅如此,它还可以进行大范围实时定位,进行内容存储和分发,并提供开发工具和API接口,集成了中英文语音命令,允许社交网络分享,让用户可以将使用过程中拍摄的照片和录制的视频分享到各大社交媒体上,与朋友分享混合现实带来的酷炫体验。
▲参观者体验DataMesh Live!商询智能混合现实展示系统
▲在PC上操作DataMesh Live!的演示内容
DataMesh Live!商询智能混合现实展示系统在很多行业都有典型的应用场景:
1.混合现实影视拍摄
DataMesh Live!可以进行第三视角拍摄,实现混合现实场景直播与拍摄。
▲日本富士电视台用DataMesh Live! 录制MR节目
2.混合现实互动游戏
DataMesh Live!在游戏行业有着极其惊艳的应用,用户可通过DataMesh Live!实现真实场景与虚拟场景的实时互动,这是VR游戏所没有的。
▲互动式混合现实游戏
3.产品营销
通过第三视角,DataMesh Live!让与会人员直观、全面地了解演示产品全貌,在体验高科技的同时,解决了实体产品布展的问题,并极大的提升其品牌的科技感。
▲混合现实式产品营销展示
4.建筑规划展示
DataMesh Live!可以帮助城市规划机构、博物馆、创业园、工业园等展示其设施布局、功能规划、功能设置等,让访问人员在讲解员的带领下快速、直观、全面地了解其整体布局,提升其展示效果。
▲园区规划展示
精彩课程
10月25日 15:00~15:45,在尊享课程/分会场课程上,DataMesh CEO李劼/CTO邬浩用诙谐幽默的方式给大家带来了《Microsoft HoloLens 无限大空间定位实践》。
▲DataMesh CEO李劼在做分享
▲DataMesh CEO李劼与听众进行互动
▲DataMesh CEO李劼/CTO邬浩与听众进行互动
MR Night
2018年10月26日晚上,参加MR Night的嘉宾纷纷来到了DataMesh 的MR游戏项目展区,在技术人员的指导下完成了全球首款大空间多人体验互动MR游戏《逃离死亡星》体验,体验人员直呼过瘾。该游戏所采用的大空间定位技术在MR领域内有着突破性的影响。在技术分享环节,DataMesh CTO邬浩就该项目的背景、采用的大空间定位技术与客户一起向听众进行了分享。
游戏背景
该游戏背景设置在未来,人类的宇宙边疆不断扩张,引起外星种族——收割者的不满。收割者舰队突袭人类的宇宙前哨站,玩家将戴上头盔,拿起枪械,作为最后幸存的星际战队成员,击退不断涌入空间站的外星入侵者,坚守至折跃器充能完毕,方能开启空间传送技术,安全返回地球。游戏玩家可以手持激光玩具枪械,与真实的玩伴一起互动,通过MR终端HoloLens 可以捕捉到酷炫的互动场景。
体验配置
最多支持10名玩家同时体验,官方将体验配套设施分为10组,每组包含一把枪,一个双口的充电宝,加一个战术背心加一个头盔(用于分散HoloLens 重量),每组设备配备了3台HoloLens,每次使用其中一台,保证游戏续航和稳定性。
▲技术人员正在调整游戏配置
第三方展示
在整个游戏的过程可以通过DataMesh Live! 展示,并通过第三方平台进行分享。
游戏中的黑科技
无限大空间定位
DataMesh 在此技术上进行了深入研究,业内首创做了一套定位服务器,专门发射定位信息。它通过通用化的接口,把外部定位数据和MR的定位方案进行融合实现了无缝切换。用外部定位去矫正HoloLens 的位置,近距离定位采用HoloLens 的SLAM,保证定位的稳定性,并可以纠正HoloLens 的定位错误和累积位置偏移。
▲嘉宾在体验游戏
作为微软的实力派MRPP,DataMesh 在MR Night上还特地跟江苏连云港的客户尚酷乐动城一起分享了在游戏领域的实践案例《逃离死亡星》。
▲嘉宾在体验游戏
该项目是目前全世界首款大空间多人体验MR游戏,该项目大规模使用HoloLens 用于落地,首期突破了36台HoloLens,在MR领域算是个不小的成就。
DataMesh 是微软在中国的首家MRPP之一,迄今在MR领域已经积累了近百个客户案例,在工业制造、教育培训、汽车、城市规划等领域有着丰富的实践经验。使用HoloLens 进行大空间定位,DataMesh 进行了持续深入的探索,并迅速将其落地应用,毫无疑问DataMesh 走在了MR行业的前沿。
▲DataMesh CTO和微软及客户一起分享MR互动游戏项目经验
不仅如此,DataMesh 还与微软签署了Co-Sell计划,双方将在微软云计算服务Azure、微软MR终端HoloLens 等层面进行全面合作。DataMesh 面向各行业开发了PaaS平台智能企业认知平台DataMesh DataMix & Cloud Services,通过对企业数据进行深度分析,利用机器学习、NLP等人工智能核心技术对非结构化数据进行结构化处理,融入多方数据源,帮助企业构建知识图谱,辅以混合现实、视频通信、语音识别等技术,满足了用户对高质量数据、领域专家资源、混合现实场景等需求。
DataMesh 认为,知识不能总是停留在后台,而应该将其推送给真正解决问题的人员去使用。通过HoloLens,DataMesh 不仅能把解决问题的业务知识及时的推送到一线员工的眼前,还可以实现一线员工与远端专家在混合现实场景里面深度交互写作。在业务知识、专家经验和混合交互的帮助下,一线人员可以快速分析问题、洞察问题,找到问题所在,进而给出解决方案。DataMesh 将携手微软帮助企业用户提升认知能力,进而推动企业快速业务创新,提升效益。
DataMesh
数据驱动企业认知
更多精彩
戳二维码关注我们

