新智元报道

妈妈还有10分钟到家,女孩却找不到另一只高跟鞋了。「我另一只高跟鞋呢?」墙上的屏幕随即回放客厅画面,AI提示鞋可能被踢到了沙发底下。女孩无需交代细节,WallEX便将语音指令与视觉画面关联,给出了精准线索。
这看似简单的找鞋场景,实则考验AI同时听懂人话、看懂画面并进行多模态对齐的能力。10月22日,在科大讯飞1024全球开发者节主论坛上,董事长刘庆峰发布了基于全国产算力升级的星火X2.6,并首次推出端云一体协同架构,支持AI根据任务需求灵活选择本地处理、云端计算或两端协作。
此外,讯飞发布星辰TaaS平台,配合APA智能体流程自动化和讯飞CLI,支持Agent操作业务系统、完成复杂任务,推动开发者从单纯调用模型向交付行业解决方案转型。
同日下午的开发者生态发布会聚焦应用落地。讯飞定义了新一代人机交互的三个方向:拟人、普适、易用。
拟人:通过多通道端到端模型、端云协同和多设备联动,让对话更自然;
普适:适应噪音环境、多语种及多场景,从家庭走向公共服务;
易用:提供软硬一体模组、整机参考设计及命令行版本,降低开发门槛。
多模态交互:跨设备无缝连续对话
多模态交互的核心在于将语音与视觉画面结合理解。相比OpenAI的实时语音和Google的视频理解,讯飞的突破点在于多设备间的上下文互通。
用户在厨房说「放假了,想放松一下」,冰箱应答后电视推荐片单;走到客厅接着说「看第二部,帮我回顾剧情」,电视能直接理解指代关系。这背后是WallEX多设备联动机制,基于讯飞SpaceMind智慧空间方案,通过开放IoT协议兼容海尔、美的、西门子等主流品牌设备,实现整个空间的智能协同。
多人交互:嘈杂环境下的精准识别
在展厅、酒店等嘈杂环境中,机器人需从背景音中分离出提问声并识别发言人。讯飞采用全景摄像头配合环形麦克风阵列,实现360°范围内5人多模态降噪。在-10dB噪声测试中,语音识别准确率达90.1%。
平台支持40多种语言,其中30多种可免切换交互。通过「端云融合」方案,端侧处理即时交互,平均响应时间仅0.85秒,确保对话流畅性。此外,讯飞语音合成模型ULingo-TTS-1.0-Preview在SuperCLUE-TTS测评中以71.39分位居榜首,展现出强大的情感表达能力。
软硬一体:降低AI硬件开发门槛
为解决AI植入硬件时的适配难题,讯飞提供交互板、软硬一体模组和一体机供开发者验证效果。团队可参考讯飞自有产品的整机设计,或利用Agent调用AIUI Code插件辅助完成接入适配,封装了成熟的交互开发经验。
企业Agent:懂规矩、会干活的智能体
进入企业场景,AI不仅要执行任务,还需遵守公司分工与权限规则。讯飞首发三款面向企业的产品:Agent OS、APA和星辰TaaS,分别解决分工、操作和方案交付问题。
Agent OS:明确协作分工
Agent OS用于定义人、多个Agent和业务系统的职责。例如采购申请,系统自动整理规格并登记,审批环节通知负责人,结果反馈给员工。Agent按权限读取历史记录,处理特定任务,并根据人工纠正意见优化后续流程。
APA:自动化软件操作
APA(智能体流程自动化)将员工的操作过程转化为Agent技能。员工在星辰Cowork工作台录制并描述操作,Agent即可跨系统办事。例如查询库存、核对价格、生成报价并提交审批,技能还可共享给同事复用。
星辰TaaS:组合行业解决方案
星辰TaaS(Token as a Solution)让开发者复用模型、工具和行业知识。其架构分为三层:
模型供给:由星辰MaaS提供底层能力;
能力编排:通过智能体引擎、知识工程等组织模型与工具,提高Token利用率;
场景应用:涵盖同传翻译、数字员工、智能营销等,服务于金融、医疗、能源等行业。
在实际应用中,讯飞招采助手在国家能源集团项目中智能评审准确率达97%;合肥公共资源交易中心评标时长缩短90%以上。在海外广告投放中,「超级效果优化师」帮助某电商KA客户提升人均操盘规模40%,ROAS提升50%。
开放平台:Agent自助调用工具
为便于Agent连接外部数据,讯飞推出XFYUN CLI,将平台功能封装为可通过指令调用的工具。开发者授权后,Agent可直接调用语音识别、合成等700多项AI功能,适配200多种智能体。
终端部署:从开发到交付的一站式服务
针对现场设备部署复杂的痛点,讯飞升级GuideX平台,结合AStudio工作台形成完整闭环。
AStudio:全场景AI生产力工作台,负责梳理需求、搭建Agent;
GuideX:公共服务数字员工平台,负责配置组装、交付运营,支持对话式开发。
以机场服务管家为例,开发者在AStudio搭建Agent,交由GuideX配置数字人和终端设备。该方案已在肯尼亚Safaricom总部智慧展厅落地,提供多语种业务介绍。
10月24日,讯飞AI开发者大赛年度决赛将在合肥举行,今年参赛团队规模创新高。数据显示,65%的应用赛团队获国家资质认证,43%的算法赛选手非科班出身,反映出AI开发门槛降低及产业落地加速的趋势。
从寻找高跟鞋到机场服务,AI正从屏幕里的回答者转变为现实世界的参与者。讯飞通过降低开发门槛,推动更多人参与创造,让技术真正转化为生产力。
编辑:摩西 所罗门


