写点什么

不一样的 RTE Open Day,对话最专业的 RTE+AGI Builders!丨 AGI Playground 现场回顾

作者:声网
  • 2024-07-18
    重庆
  • 本文字数:3698 字

    阅读完需:约 12 分钟


6 月 22 日至 23 日,RTE 开发者社区联合 Founder Park 在北京举办了以「AGI Playground」为主题的 RTE Open Day 活动,现场参与了 800+ 专业 AGI 观众、开发者、创业者,并以此展开了一场游园社交活动、一场 Code Labs 和一场 Dev Party。



AGI、大模型等 AI 相关的内容席卷了过去一年的热门话题榜,OpenAI 发布的 GPT-4o Demo 则让我们进一步看到了 RTE 行业和 AI 相结合的更多可能性及场景。


实时互动(RTE,Real-time engagement)作为一类远程互动、多维沟通、实感沉浸的交互场景活动,天然就具备全球化发展的属性。


RTE Open Day@AGI Playground,我们和大家一起见证了实时互动和人工智能的碰撞,共同思考了「属于 AI 和 RTE 的独特路径是什么?AGI 时代, RTE 领域的 Super App 会是什么样?」等话题。


本场 RTE Open Day,RTE 开发者社区邀请了 17 家具有代表性的企业和产品,作为活动体验区的游园打卡点,与参会者交流探讨。

01 先来 Demo 区体验充充电

参与本次游园展示的包括 ASTRA Framework、商汤 • 小浣熊家族、Unity China X 萌宠拆拆乐、Rokid AR 空间应用展示、声网实时语音转文字、HoloKit、蚁触 • 触觉交互人工智能解决方案、噗噗故事机、XSwitch Cloud、Kivicube WebXR 在线制作平台、言灵计划、机械臂 x 零一万物大模型、VP 杀、AIGC 数字人、赛博演猿 cybactor 和 N7 Interactive。 展示的产品和项目涉及 AI Agent、AI 编程助手、WebXR 制作平台、具身智能、AR 体感游戏、数字人等。



现场到场参与 800+ 专业观众,并有超过 200+ 观众成功打卡参与现场所有 Demo 展区和项目,并领取了社区为大家准备的精心好礼一份!


感谢参与本次游园活动的近 20 家生态合作伙伴对社区的支持!

02 RTE Code labs/Workshop



6 月 22 日下午,AGi Playground 分会场 C,RTE 开发者社区联合「零一万物」发起了工作坊,邀请大家挑战复刻一个 GPT-4o 的 demo,不只是文字聊天 bot,还带实时语音和视觉互动!



本次活动我们邀请到社区最强运营组成员——白宦成作为本次 Code Labs 的特约主持人,除此之外,我们还邀请到共创伙伴,来自 ChatTTS 的李大勇到 Workshop 现场进行了主题分享!



大勇带大家从 ChatTTS 出发,分享了火遍全球的 ChatTTS 背后的故事。从 ChatTTS 项目最开始为什么诞生的构想,到 TTS 发生的变化和变革,带大家完整的体验和复盘了一个 好的 TTS 应该是什么样的,以及 ChatTTS 项目最新的产品架构和思考。



大勇的分享结束后,就正式进入了本次 RTE Code Labs 的挑战环节讲解!本次挑战,我们邀请 ASTRA 团队,基于 ASTRA Framework,结合零一万物大模型,现场挑战 2 小时内搭建一个类似于 Gpt-4o 的 demo!


ASTRA 是一个低延迟、高可配、多模态的 Agent Builder。基于 ASTRA,你可以轻松创建实时多模态的 AI 应用:https://github.com/rte-design/ASTRA.ai


现场挑战分为基础挑战和进阶挑战两部分,基础挑战包括:


挑战 1:使用我们准备的 playground,链接我们部署好的 agent 服务器,体验你自己的 voice assistant agent!


挑战 2:基于我们已经编译好的镜像本地启动 example agent,使用 playground 链接本地的 agent。


挑战 3:基于我们的 example agent 搭建开发编译环境,通过调用零一万物 Yi 大模型 API,使用 playground 链接本地的 agent。


进阶挑战:


挑战 4:通过调整零一万物大模型 API 的 prompt 和参数,得到理想的输出结果,打造你自己的 voice assistant,并在 playground 中体验。


挑战 5:基于我们的 extension 创建你自己的 extension 并接入其他第三方供应商,打造新的 assistant 组合。



在本次活动中,ASTRA 为所有参赛选手提供了一个专属的线上环境,使得所有选手都可以在环境中享受无用量限制的 ASTRA 服务。 同时,ASTRA 和零一万物都派出了技术支持人员到达现场,在 6 月 22 日下午的挑战中为大家答疑解惑。


本次活动现场共到场 50+ 观众参与, 大家使用 ASTRA 进一步创作了「黄蓉」、「医生」等角色,并进行了流畅的对话。最终,20 位现场参与的伙伴完成了基础挑战部分!近 10 位现场参与的伙伴完成了进阶挑战任一!



社区及零一万物在现场为大家准备了跑通不同阶段的礼品


活动结束后,不少现场开发者给予我们反馈:


「能够做到灵敏地捕捉环境信息,具备了感知输入的条件。」「能够做到实时打断」「简单易开发」「页面友好度高」「导师辅导很认真」......


看到大家的作品和反馈,陈运营非常感动,把想法落地,总是最难也最有意思的部分!看到这么多现场有意思的项目和反馈,社区更有信心和大家一起做更多有意思的尝试~

03 Dev Party,更多的 Lighting Talk 和 Unconference!

6 月 22 日晚上,社区特别设置了一场「与众不同」的 Dev Party 活动。陈运营在现场为大家准备了丰~~富~~的餐食,和不同种类的饮品!



场地的卡皮吧啦受到了全场最多喜爱!


Lighting Talk 是 RTE Open Day 的保留节目,我们本次则把 Lightning Talk 环节平移到了 Dev Party 中。每次的 Lighting Talk 环节,都是灵感与气氛碰撞的顶点。看到这么多充满活力的 builders 在现场一起交流脑爆,总让人感到非常兴奋。


本次 Lightning Talk 环节,我们首先邀请了社区主理人:Richard、杜金房两位老师分享了关于 RTE 开发者社区和现在手头正在进行的工作,以及未来关于社区的进一步规划,Richard 还特别分享了 RTE 和 AI 能够结合的更多场景和未来!


还有近 10 位开发者现场 5 分钟分享了自己最近在做的事儿,和看到了什么有趣的新事物。本次现场多位 XR 行业从业者进行了分享:


脑放电波主理人,XR 行业产品经理的 Nixon 以智能眼镜为例,和大家阐述了端侧 RTE 的痛点,以及如何有效压缩,简化 RTE 中对网络带宽的占用;宇辰现场分享了他们是如何将 Holokit 这个高性价比 AR 头显解决方案进行落地,以及空间计算现阶段和未来的 killer app 会是什么;芊荟则基于 Vision Pro 与实时互动分享了 N7 是如何将可穿戴设备与实时多模态进行结合和落地的;Eric 从 WebXR 的角度,提到了 XR 直播行业是如何赋能商业,以及背后的产品架构设计和逻辑。


除了以上更贴近普通消费者的 XR 行业,ASTRA 的作者 Plutoless 也到现场分享了 ASTRA 的架构和接下来的产品发版逻辑和计划,据陈运营获悉,python 版本现已释出!同时 ASTRA 近期参与了杭州落地的 Adventure-X 线下黑客马拉松,并参与了赛道的命题!(海豹鼓掌)


最后,quickcreator 的 CEO 周海鹏,则从产品和营销的角度,结合 AI 将有什么样的未来新范式做了最后一个发言。



感谢以上几位分享者,以及积极与分享者互动的每一位伙伴。


紧锣密鼓的 Lightning Talk 环节结束后,我们就正式进入了 Unconference 环节~这里想必会有一些小伙伴有疑惑,Unconference 是个啥?


Unconference 是一种参与者驱动的会议形式,其特色是议程由参与者在会议期间共同决定,而不是由主办方预先安排。这种形式的会议通常具有以下特点:


1.参与者驱动:与传统会议不同,Unconference 的主题和议程由参与者共同决定,而不是由主办方提前设定。


2.灵活的议程:会议开始时,参与者会提出他们感兴趣的话题,并根据这些话题安排讨论会、工作坊或演示。议程是动态的,可以根据讨论的进展随时调整。


3.互动性强:Unconference 鼓励所有参与者积极参与讨论,而不是被动地聆听演讲。每个人都有机会分享自己的见解和经验。


来源:ChatGPT


我们在本次活动报名时,向所有参与 Dev Party 的伙伴收集了希望参加这次活动听到的内容,并收集到了超过 5 个方向 40+ Topics!在活动前,陈运营结合本次 Dev Party 的主题,将所有的 Topics 进行了紧锣密鼓的分类和整理,最终,我们在现场和大家一起讨论了结合 RTE 和 AGI 的当下和未来,从未来 RTE+AI 的场景到当下的基础建设。


现场我们将大家随机分为了 8 个小组进行讨论,并在 45 分钟的讨论结束后,每个小组随机抽出一位伙伴将大家讨论的主题进行了整理和总结。至此,本次 RTE Open Day 的所有环节也进入了尾声。


感谢参与 Dev Party 的 50+ 伙伴,陈运营再次强调!忘了「六顶思考帽」吧,社区的活动就要有社区的风格,交换见闻的闲聊可能是更好的交流方式。


吃饱喝足后,来一场「刻意营造」的闲聊,将摄入的卡路里转化为多巴胺,或许会有意外的收获。

04 再好的聚会也会散场,但散场是为了下次更好的重逢!

感谢参与本次活动的无法统计数量的 RTE Builders !感谢参与布展的近 20 家社区生态伙伴!感谢支持活动策划与落地的社区伙伴们!


作为一个中立社区,RTE 开发者社区作为聚焦实时互动领域的开放、包容的开发者社区,希望通过各种各样的活动、项目来链接领域内的开发者和生态力量,萌芽更多新技术、新场景,探索实时互动领域的更多可能。


不止于纯粹的技术交流,社区始终相信每一位 RTE Builder 都具备更加丰盈的个体价值,我们会关注行业发展变革、开发者职涯发展、技术创业创新资源,全称陪跑,共享、共建、共成长,和大家一起打造实时互动领域新社区、新生态。


后续社区将推出更多的活动、平台以及共建项目,期待更多伙伴的支持与参与。


如果你喜欢 RTE 开发者社区,欢迎:


关注我们的社区媒体帐号 —— 微信公众号 @RTE 开发者社区、视频号 @RTE 开发者社区,以及各种主流非主流的技术平台、社区的同名账号。


期待与大家的再次相逢。



用户头像

声网

关注

还未添加个人签名 2021-02-05 加入

声网(NASDAQ:API)成立于2014年。开发者可通过声网API,在应用内构建多种实时音视频互动场景。使用声网服务的包括小米、陌陌、斗鱼、哔哩哔哩、新东方、小红书、HTC VIVE 、Yalla等遍布全球的巨头、独角兽企业。

评论

发布
暂无评论
不一样的 RTE Open Day,对话最专业的 RTE+AGI Builders!丨AGI Playground 现场回顾_声网_InfoQ写作社区