
10 月 24 日-25 日,由声网和 RTE 开发者社区联合主办的 RTE2023 第九届实时互联网大会在北京举办,与众多 RTE 领域技术专家、产品精英、创业者、开发者一起,共同开启了以“智能·高清”为主题的全新探讨。
本次大会中,RTE 开发者社区牵头设置了 7 场面向开发者的技术专场&活动。在上篇文章中,我们分享了 10月24日举办的音频技术、视频技术及 RTE Workshop 三场活动的精彩回顾内容(点击即可查看)。
在 10 月 25 日,应用开发技术趋势与实践、RTE 分布式实时应用后台架构演进、大模型重塑开发者世界、AI+RTE 四场活动相继举行。下面让我们一起回顾一下今天的精彩内容~
应用开发技术趋势与实践专场是开发者最为关注的专场之一。该专场特别邀请悟墨科技创始人、RTE开发者社区 Master 伍双老师作为出品人及特邀主持。
本场活动从前端开发,桌面应用的跨平台开发、硬件场景的使用等角度出发,探讨了新技术带来的变化。伍双介绍到该专场将主要和参会者分享各种前沿的应用层、技术栈,以及这些技术如何帮助大家快速、可靠的落地相关业务需求
Electron 成员,Electron Forge 维护者王佳旺
Electron 是当下用量最大的跨平台框架,Vite 则是目前最火的构建工具,那么这两款火爆的技术要如何结合在一起呢?
Electron 成员,Electron Forge 维护者王佳旺对此展开了题为《基于 Vite 优化 Electron 构建及开发体验》的演讲。他现场解析了如何将二者连接在一起,进而为桌面端开发者提供更丝滑的开发体验。
当前,RTC 技术已经成为提升泛娱乐 app 玩法和体验的重要技术,也是应用开发过程中的重要组成部分。
声网资深客户端研发工程师陈雨果进行了题为《搭建 RTC 新技术和应用开发之间的桥梁》的演讲。他解析了在开发 APP 时如何更好的运用 RTC 技术,从业务角度提升复杂功能和 RTC 能力的易用性、可复用性、可拓展性。
作为一款广泛使用的游戏引擎,Unity 的渲染性能提升是游戏开发的关键。
Unity 中国技术总监顾申华进行了《探索 Unity 实时云渲染:分布式渲染技术助力提升渲染性能》的演讲,深入探讨 Unity 分布式渲染的实现途径及其在云渲染领域的应用。Unity 为开发者提供了实时云渲染解决方案,其能够帮助开发者在云端实时生成高质量的画面,并将其传输到用户的设备上,从而实现更加流畅、高画质的实时体验。
Rokid AR 空间计算平台采用了自研的操作系统 YodaOS-Master。Rokid AR 软件研发负责人杨剑在演讲《Rokid AR 空间计算平台的关键技术以及应用落地》中谈到,系统有两个空间计算的核心算法: 基于单摄像头实现的 SLAM 和 3D 裸手手势。二者一个用来精准感知物理空间,一个用来和虚拟内容交互。
开发者可以基于 Rokid 提供的能力和 SDK,可快速的做出互动应用,结合混合现实录制技术,从第三方视角来分享 AR 互动内容。
RTE 分布式实时应用后台架构专场是今年特别策划新增的专场之一,该专场特别邀请 RTE开发者社区 Master、LiveVideoStack 联合创始人包研老师作为出品人及特邀主持。
包研老师分享到,本专场主要针对实时互动的网络架构、传输、边缘云计算等话题,深入探讨了直播、娱乐、教育、IoT、元宇宙等领域值得关注的技术要点。
伴随企业对网络传输性能的要求提升,ADN 技术架构的价值也逐渐开始凸显。华为云媒体网络服务架构师丁凯在《华为云应用传送网络 ADN 技术架构探索》演讲中表示,华为云在 ADN 技术架构方面进行了诸多的优化和提升,从而帮助提升了应用传送的性能和稳定性,并为用户提供了全方位的保护。
在实时应用场景中,除了RTC,RTM也至关重要;声网分布式存储架构师刘畅在现场解密了《实时应用场景中声网实时消息服务的架构演进及最佳实践》。结合电商竞拍,在线教育,元宇宙及平行驾驶场景的实际痛点,不断优化架构,在RTM2.0中通过复用RTC通道,提供不同层级的消息QOS,增加状态同步等演进路径,为业务提供最佳实践。
海马云作为面向实时互动内容的云服务平台,其 RTC 技术的升级历程也有着很强的可参考性。
海马云 RTC 团队负责人张武锋讲解了《RTC 在云游戏场景面临的机遇与挑战——海马云RTC的技术升级之路》。针对云游戏场景的高码率,低延时的特殊性,海马云自研HMRTC,采用独特的拥塞控制、QoS以及视频编/解码策略等,以提高各种差异化终端,在复杂网络环境下的自适应能力,使得不同用户的云玩体验最优。
Serverless 架构具有弹性扩展、按需付费、高度可维护等诸多优点,可以帮助开发者更专注于代码的开发和优化。亚马逊云科技布道师郑予彬基于此进行了《serverless 赋能面向未来的高并发应用架构》的演讲。
她认为 Serverless 架构将是未来高并发场景下的重要技术之一,其可以提高系统性能和可用性,降低企业成本和维护复杂性。
同时,专场还特别设置了一场主题为「出海背后的技术挑战」的圆桌讨论,并特别邀请了 LiveVideoStack 联合创始人包研、边无际 Edgenesis 创始人&CEO 陈永立、携程高级云原生研发总监蔡峰以及声网技术 VP、后端技术负责人吴毅挺 共同进行探讨。
伴随国内企业逐渐走向全球化,技术出海也成为很多越多企业所面临的挑战,无论是跨文化交流、合规性、成本还是远程协助等都值得企业持续关注。
在今年,大模型相关技术飞速发展,并逐渐成长为推动行业变革的核心力量。大模型重塑了软件开发的传统模式,而软件开发正在变得更加智能化、自动化。《代码之上:大模型重塑开发者世界》便重点探讨了如何利用大模型技术助力开发者,推动响软件开发的自动化发展。
大模型正在无差别地席卷全行业,软件应用开发的格局也将被大模型重塑一次。
腾讯智能创作与内容平台部技术专家揭光发在《大模型重塑软件开发,从 Copilot 到 AutoPilot》演讲中表示,大模型正在以Copilot生成代码(AIG Code)的形态给开发者大幅度的提效; AIG Action赋能了agent智能体,当多agent复刻人类协同的SOP完成复杂项目的开发和交付时,软件开发的aotupilot运应而生,然而AGI降临时一切都重新洗牌,开发者要全面拥抱AI,成为新型生产关系中的掌控者。
在生成式 AI 的时代下,程序员的角色将转变并实现技能升级。AI早早聊联创人七七在演讲《开启生成式 AI 时代:程序员的角色转变与技能升级》中探讨了程序员新的发展路径。
生成式 AI 将会影响程序员的关键角色和需要的技能。伴随生成式 AI 在各行业中的应用,程序员所能参与的领域越发广阔,同时也应该通过技术创新,精准把握市场定位和提升用户体验等方式,应对未来的挑战。
随着 LLM 技术的发展,代码生成作为 LLM 在垂直领域的应用也受到越来越多的关注。智谱 AI CodeGeeX 产品负责人薛宇飞进行了《CodeGeeX:从代码生成模型到 AI 编程助手》的演讲。
他以 CodeGeeX 为例,介绍代码生成模型的训练、评测,以及基于模型研发的 CodeGeeX 插件所能实现的智能化特性以及最新进展。
在进入了大模型时代后,不仅仅是开发者们的机会增加了,企业的机会也有了新的变化。宜创 AI 创始人&CEO 宜博进行了题为《大模型时代 AI First 的创业机会》的演讲,他通过介绍 GPT 时代的底层逻辑,讲述 LLM 时代 6 层开发范式核心和 AI First 5 个第一性特性,并介绍了宜创 AI 基于 LLMFarm 中间层框架开发的近 20 个行业案例。
深度赋智创始人&CEO 吴承霖在主题分享《开发协作新范式:智能体的挑战与发展趋势》中提到,MetaGPT 或许是中国历史上涨速最快的开源工程。作为一个先进的多智能体开源框架,专注于解决多智能体落地应用的实际问题,能通过模拟软件公司多角色,能输出产品设计、架构图、代码repo。
此外,吴承霖表示软件开发的 Agent 形态正在引发行业变革,尤其在编程范式和协作流程上。可以预见 LLM-based 智能体在大规模工具使用和专业内容输出方面的未来发展。
实时互动(RTE)是链接数字世界和物理世界的重要基础,RTE 与 AI 的结合也是业界探索重点。本专场特别邀请了中国信息通信研究院云计算与大数据研究所内容科技部副主任、RTE开发者社区Master 刘硕作为出品人与特邀主持人。
刘主任在主持中提到,近期大模型等人工智能技术取得突破性进展,对于 RTE 智能化升级以及应用拓展,带来了新的机遇和广阔的发展空间。非常高兴可以相聚在这里,一起探讨AI+ RTE这个有趣且重要的主题。
大模型强大的语义理解和生成能力,为 RTC 带来了更高效、更智能的可能。上海交通大学教授&图像所副所长宋利进行了题为《重塑 RTC 未来:大模型浪潮下的技术变革与展望》的演讲。他从AI赋能RTC全链路的视角,回顾总结了相关的重要技术进展,展望了未来媒体大模型与RTC深度结合的方向和路径。
AIGC 技术可以模拟真实的人与人之间的交互,为企业的客户支持、售后服务等提供高效、智能的解决方案。
声网 AIGC 算法工程师李忻玮进行了主题为《AIGC 技术支持人设对话场景》的演讲。他具体介绍了如何通过为商业大模型设计prompt和微调开源模型来实现与AI的人设对话,并分享了一些相关场景使用大语言模型的潜在风险。
科大讯飞打造的星火大模型一经推出便备受关注,而在实时通信领域,星火大模型的应用也取得了一定的成果。科大讯飞 AI 工程院副院长刘坤通过远程接入的方式与参会者实时互动,分享了《星火大模型技术解析与应用案例》,全面展现了星火大模型在诸多领域与实时通讯结合后所取得的应用和发展。
互动数字人是 AIGC 技术发展的优秀成果之一,其人具备高度的仿真人像、自然语言处理和情感识别能力,可以根据直播场景和观众反馈进行智能互动,提升直播效果和观众体验。
商汤数字文娱首席架构师就《互动数字人:AIGC 技术与直播行业的融合创新》的话题展开演讲,并表示随着 AIGC 技术的持续优化和创新,互动数字人将有望为直播行业带来更加智能和高效的服务。
随着神经网络技术的发展,AI 变声逐渐成为一种新的声音变调方法。大饼 AI 创始人凌天格向现场参会者分享了《从信号处理的声音变调到神经网络学习的 AI 变声》,他表示与传统的信号处理方法相比,AI 变声具有更高的灵活性和可控性,可以生成更多种类的声音效果。
专场同时设置了主题为《智能化 RTE 发展要素及趋势》的圆桌讨论,活动邀请到了中国信息通信研究院云计算与大数据研究所内容科技部副主任刘硕、声网首席科学家 & CTO 钟声、中国信息通信研究院云计算与大数据研究所内容科技部高级业务主管呼娜英、小红书直播业务移动端技术负责人周博立共同参与。
四位嘉宾就国内外 RTE 发展的差异入手,深入探讨值得学习的技术经验,以及关于 AI、开源、应用等多个方向的话题。
RTE 2023 第九届实时互联网大会是 RTE 开发者社区重启之后首次策划组织的数千人级别活动。
作为联合主办方,社区牵头设置的 7 场技术专场 & 活动,吸引了大批开发者的参与,感谢大家对社区的支持。
期待智慧的火花持续碰撞后,我们一起探讨实时互动技术的未来、推动实时互动行业的不断升级。面向未来,RTE 开发者社区还将继续推出各类活动,与广大开发者一道,开拓创新,共同成长!
