网易瑶台2.0功能优化、交互升级，新增绿幕直播、召集组队、旁听畅聊、点击交互等特色功能，提供更加丰富、沉浸式的活动体验。新增坐姿动作、鼓掌动作、中大型会场内签约动作，增强真实感、交互感。会务管理系统优化，新增关闭弹幕等功能，维持活动会场秩序，后台新增展板配置、导出登录信息等功能，满足主办方多元需求。

<h3>网易瑶台2.0新功能速递</h3>1.新增绿幕直播、召集组队、旁听畅聊、点击交互等特色功能，提供更加丰富、沉浸式的活动体验。2.新增坐姿动作、鼓掌动作、中大型会场内签约动作，增强真实感、交互感。3.会务管理系统优化，新增关闭弹幕等功能，维持活动会场秩序，后台新增展板配置、导出登录信息等功能，满足主办方多元需求。<h3>场景功能交互升级</h3>新增功能：绿幕直播将绿幕处理过的真人形象搬进元宇宙空间，使得活动体验更生动、更真实、更沉浸。<div class="media-wrap image-wrap"><img class="media-wrap image-wrap" id="https://static.fuxi.netease.com/fuxi-official/web/20220926/028d23f9e6123fbd0da74b7a2a64ed4f.jpg" alt="图片" title="图片" src="https://static.fuxi.netease.com/fuxi-official/web/20220926/028d23f9e6123fbd0da74b7a2a64ed4f.jpg"/></div>新增功能：圆桌会议嘉宾可以登上舞台召开圆桌会议，语音视频聊天内容可同步全体台下观众。新增功能：召集组队活动管理者可选中单个或多个人员发出组队邀请，经对方同意后便可组队，组织者能够召集队员跟随，创建队伍后可以随时随地开启畅聊。新增功能：旁听功能跟随已开启畅聊功能的成员，可选择进行旁听。新增功能：会场聊天新增会场群聊界面，用户可随时参与群聊信息，实时互动交流。<div class="media-wrap image-wrap"><img class="media-wrap image-wrap" id="https://static.fuxi.netease.com/fuxi-official/web/20220926/a5b0a6892c19da14544786512837c53e.jpg" alt="图片" title="图片" src="https://static.fuxi.netease.com/fuxi-official/web/20220926/a5b0a6892c19da14544786512837c53e.jpg"/></div>新增功能：室内礼花室内场馆新增礼花功能，活动管理者可在人物周围释放礼花，增添氛围感、仪式感。功能优化：会场指引打开会场地图，点击想要到达的地点，将自动索引人物前往。<div class="media-wrap image-wrap"><img class="media-wrap image-wrap" id="https://static.fuxi.netease.com/fuxi-official/web/20220926/fe15c2faf2e38c2d0b662978d5975fd8.jpg" alt="图片" title="图片" src="https://static.fuxi.netease.com/fuxi-official/web/20220926/fe15c2faf2e38c2d0b662978d5975fd8.jpg"/></div>功能优化：点击交互在场景内点击他人形象将弹出交互界面，可选择聊天、跟随等功能，实现零距离便捷社交。<div class="media-wrap image-wrap"><img class="media-wrap image-wrap" id="https://static.fuxi.netease.com/fuxi-official/web/20220926/60159ee15def8c8b830b0e663fa00d20.jpg" alt="图片" title="图片" src="https://static.fuxi.netease.com/fuxi-official/web/20220926/60159ee15def8c8b830b0e663fa00d20.jpg"/></div><h3>新增场景与人物动作</h3>新增场景：上新中秋场景网易瑶台推出特色中秋场景，打造不输现实的中秋<a href="https:///tags/48" target="_blank">元宇宙</a>活动体验。<div class="media-wrap image-wrap"><img class="media-wrap image-wrap" id="https://static.fuxi.netease.com/fuxi-official/web/20220926/ecf733a38f7656c8b91d98db5e9b1f50.jpg" alt="图片" title="图片" src="https://static.fuxi.netease.com/fuxi-official/web/20220926/ecf733a38f7656c8b91d98db5e9b1f50.jpg"/></div>新增动作：坐姿动作、鼓掌动作、签约动作支持坐姿状态下使用比心、剪刀手、打招呼等动作，社交体验更加流畅。新增鼓掌动作及音效，提供更具沉浸感的参会体验。选择会议室场景，可上台就座使用签约动作，更贴近线下真实活动，增强参会仪式感。性能优化：画面显示支持五级分级可根据个性需求调整画面质量和精度，支持更加流畅的视觉体验。<h3>会务管理功能升级</h3>新增功能：关闭弹幕、跳跃、跑动或鼓掌等主持人可选择开启或关闭观众上台、弹幕、跳跃等功能，助力主办方管理会议纪律，提升活动运营效率。功能优化：展板配置更新后台支持在展板自主配置图片或视频封面，并可进行基础编辑，同时支持配置外部链接，观众在会场点击图片即可选择跳转。<div class="media-wrap image-wrap"><img class="media-wrap image-wrap" id="https://static.fuxi.netease.com/fuxi-official/web/20220926/035eb6ad62e7aca24e5674e99a91c3c4.jpg" alt="图片" title="图片" src="https://static.fuxi.netease.com/fuxi-official/web/20220926/035eb6ad62e7aca24e5674e99a91c3c4.jpg"/></div>新增功能：快捷弹幕配置后台支持配置自定义快捷弹幕，主办方可根据活动需求进行配置。新增功能：形象选择及个性化配置后台支持根据主持人、观众等不同身份配置人物指定服装，支持个性化的形象定制。<div class="media-wrap image-wrap"><img class="media-wrap image-wrap" id="https://static.fuxi.netease.com/fuxi-official/web/20220926/5bfa789ed4af7496c28ff2c3ccd5fa4e.jpg" alt="图片" title="图片" src="https://static.fuxi.netease.com/fuxi-official/web/20220926/5bfa789ed4af7496c28ff2c3ccd5fa4e.jpg"/></div>新增功能：记录并导出用户登录信息支持后台一键导出参会人员的登录信息，满足主办方会后复盘的需求，为活动提供数据参考。

新功能速递 | 网易瑶台2.0功能优化、交互升级，打造新型沉浸式体验

生成式AI技术的快速发展，已然掀起了游戏行业新一轮的创新革命。
前有斯坦福用ChatGPT打造的“AI小镇”，通过GPT创造生成式AI角色，成功搭建出一个类似《西部世界》的虚拟游戏世界；后有特斯拉创始人埃隆马斯克以“让游戏再次伟大”为目标，宣布开设AI游戏工作室，“AI+游戏”已成为全球游戏厂商新的竞争高地。

生成式AI技术的快速发展，已然掀起了游戏行业新一轮的创新革命。
前有斯坦福用ChatGPT打造的“AI小镇”，通过GPT创造生成式AI角色，成功搭建出一个类似《西部世界》的虚拟游戏世界；后有特斯拉创始人埃隆马斯克以“让游戏再次伟大”为目标，宣布开设AI游戏工作室，“AI+游戏”已成为全球游戏厂商新的竞争高地。
中国游戏厂商也不例外。伽马数据今年6月发布的《中国游戏产业新质生产力发展报告》（以下简称“《报告》”）显示，国内近六成头部游戏企业已构建AI生产管线、赋能虚拟内容生产或智能营销。
不过，游戏厂商在研发端应用层布局比例最大。《报告》指出近半头部游戏企业已利用AI提升生产能力，并构建智能生产管线，或进行虚拟内容生产，包括虚拟角色、数字人，帮助用户生成互动内容等。
在将AI引入游戏，重塑玩家体验方面，行业仍在探索的起步阶段。网易或许是其中走得最快的一家。一方面，网易在去年发布爆款新游产品《逆水寒手游》中，为游戏中400多名NPC角色配置了智能AI系统，使其具有独立的情感判断能力，可以与玩家自由交互，受到市场的广泛好评。
与此同时，网易也在持续探索“AIGC+UGC”模式，借助AI技术进一步降低游戏创作门槛，进而重构游戏内容模式和商业生态，《蛋仔派对》是其中最为成功的案例。
在12月13日举办的2024中国游戏产业年会上，网易副总裁庞大智发言指出，中国游戏要积极抓住人工智能带来的内容革命机遇。“过去，创作是少数人的‘使命’，多数人只能被动、单向地接收信息。随着科技的进步、内容生产工具的发展，内容创作越发便捷。当今，在人工智能的帮助下，创作变得更加简单，从而使得去中心化成为可能，这让每个人都有机会成为中华文化内容的创造者和传播者。”
<img src="https://static.fuxi.netease.com/fuxi-official/web/20241220/9e10b380f30c99be3a9fb104ea32b683.png" alt="" width="960" height="540">
<h3>智能NPC重塑玩家游戏体验</h3>
如何为玩家提供《西部世界》那般千人千面的游戏体验，以此提升虚拟世界的沉浸度，一直是游戏行业不断在思考的问题。
去年3月，网易高级副总裁胡志鹏就曾在接受媒体采访时指出，在很多游戏中，玩家对于游戏的体验是全方位的。除了打副本、对战以外，另一个需求是社交，或者说是情感陪伴。在传统游戏开发过程中，由于技术、资金的限制，对于这一块的开发是比较缺失的。即使游戏公司投入人力物力丰富NPC的文本数量，很多时候仍难以满足玩家的探索欲。
但随着生成式AI技术的发展，胡志鹏敏锐的意识到，赋予每个NPC独一无二的思想、性格，在游戏中为玩家创造情感向机器人成为可能。
3个月后，这一设想逐渐成为现实。2023年6月，网易旗下研发周期长达4年，累计投入超过10亿元的《逆水寒手游》正式上线，其最为核心的卖点便是数百个AI引擎加持的游戏智能NPC。
网易借此一改以往游戏中NPC只能根据写好的台词和脚本与玩家进行交流的弊病，《逆水寒手游》NPC不再预设脚本，在与玩家交谈时更加自主、更像真人。同时，《逆水寒手游》还内置大量AI玩法，如AI作诗、AI丹青师绘画、AI电影镜头、AI表情、AI语音等，为玩家带来更为沉浸、真实、截然不同的游戏体验。
得益于此，《逆水寒手游》一经上线立刻引爆MMO游戏市场，多次登顶App Store畅销榜，公测不到十分钟，同时在线人数就突破了100万人。据多家机构、媒体估算，其首月流水应超过20亿元。
上线一年之后，《逆水寒手游》依旧保持着极强的生命活力。时代财经此前发布的《2024年10月中国潜力常青游戏榜》显示，游戏以1548.02万美元iOS端预估收入，跻身榜单第二名，向市场展现出了它的常青活力。
如今，《逆水寒手游》仍在对AI玩法进行不断的迭代升级，接连推出了AI离线玩家、自捏AI江湖友人、AI剧组模式等多种创新玩法，为游戏内的上亿玩家带来更丰富多元的玩法体验。
其中，最新上线的AI大模型竞技场玩法，更是通过集合阿里通义大模型、百度文心大模型、MiniMax abab大模型、月之暗面Kimi以及字节豆包等5大基座大模型，让它们化身游戏9个故事主题下千行百业的NPC进入游戏的游历玩法中，进一步丰富了游戏的自由探索度。
具体而言，每个NPC由1个AI大模型驱动，NPC会根据玩家提出的话题进行探讨，两两PK，由玩家投票评选。玩家将在不知道NPC背后的AI模型是哪家，即完全盲评的情况下体验不同模型的魅力。通过这一机制，不仅可以为玩家带来全新游戏乐趣，还能够收集到1亿逆水寒玩家反馈，有助于帮助AI技术更加精确和高效地迭代与进化。
这背后，离不开网易伏羲的力量。作为国内首家游戏人工智能研究机构，网易伏羲坚信“游戏是AI技术最好的试验田”。逆水寒AI大模型竞技场的推出，不仅进一步丰富了玩家的游戏体验，也为AI技术的应用与发展注入了新的活力。
<img src="https://static.fuxi.netease.com/fuxi-official/web/20241220/159ead3c62604f15f538130c010ff151.png" alt="" width="960" height="540">
<h3>“AIGC+UGC”模式帮助游戏长线运营</h3>
网易“AI+游戏”的另一成功案例，是探索“AIGC+UGC”模式的休闲派对游戏《蛋仔派对》。
网易2023年全年财报数据显示，自2022年上线以来，《蛋仔派对》累计注册用户数量超5亿，DAU（日活跃用户超）4000万，成为网易有史以来DAU最高的游戏。
通常来说，派对类休闲游戏操作简单、玩法单一，玩家在尝鲜后很容易热情减退，难以长线运营，更难释放出强大的商业价值，但《蛋仔派对》却意外通过培育UGC生态，鼓励玩家自己动手制作游戏地图，解决了这一问题。
《蛋仔派对》已连续多次登上时代财经月度发布的潜力常青游戏榜单。以《2024年10月中国潜力常青游戏榜》为例，《蛋仔派对》以638.70万美元的iOS端预估收入，跻身榜单第六名。
而《蛋仔派对》培育UGC生态的关键，便是将其与AIGC技术的结合。今年7月，网易Eggy工作室负责人、《蛋仔派对》制作人程宽曾在公开场合表示，编辑关卡在很多玩家眼里并不是一件容易的事情，设计灵感和编辑操作都有一定的门槛。
“如何降低进入门槛，提升蛋仔玩家到作者的转化率是我们首先关注的目标，AIGC就这样进入了我们的视野。”程宽表示。
具体来看，《蛋仔派对》的AIGC路径主要分为两步。第一步，程宽将其总结为“易上手”，主要围绕提升玩家到作者的转化率，以及从开始作图到发布第一张有效地图的漏斗效率这两个核心KPI开展，让用户“即点即用，一用就会”。
《蛋仔派对》UGC编辑器中一系列便捷易用的生成类功能由此而生，包含了一键生成各类建筑、花朵、像素文字、图片墙等，在节省创作时间之余，还能和各种模板组件组合，轻松制作出更丰富的场景。
有了一定的作者基数之后，程宽认为，第二步应该帮助那些逐渐成长起来的作者提供更加丰富的创作能力，以此满足玩家对更高品质内容的需求。《蛋仔派对》随之开始尝试更深度的UGC+AIGC应用，如视频生成动作、万能生成器，以及图形化编程功能蛋码等AIGC功能，以此减少用户重复劳作，提高创作效率。
“正是AIGC高效、千人千面的技术特性，让UGC创作具备更加多元的土壤，也激励我们去探索AIGC在视频、语音等多模态生成上的更多可能。”程宽指出。
从打造智能NPC角色为玩家提供更多元优质的游戏体验，到探索“AIGC+UGC”模式让游戏内容生产与消耗速度保持动态平衡，网易作为在2017年就成立了全球首个专门服务于游戏人工智能实验室的老牌游戏厂商，一直在持续探索“AI+游戏”深度融合的内容生产链路，并已取得初步成效。
随着大模型的底层能力未来的持续升级，以及越来越多游戏厂商的加入，“AI+游戏”的概念有望进一步扩容，电影《头号玩家》里描述的情景有一天终将成为现实。

游戏界的AI魔法师：网易游戏如何玩转AI技术？

9月24日至26日，以“云智一体·碳硅共生”为主题的2025云栖大会在杭州云栖小镇拉开帷幕，这场科技盛会，从基础设施、大模型到Agent和具身智能，全景呈现AI的技术演进与产业落地。大会期间，来自50余个国家的2000多位演讲嘉宾将齐聚杭州，围绕Agentic AI与Physical AI等前沿话题展开对话，深入探讨AI、云计算与产业应用的前沿方向，发布云与AI核心技术及全新重磅产品。

9月24日至26日，以“云智一体·碳硅共生”为主题的2025云栖大会在杭州云栖小镇拉开帷幕，这场科技盛会，从基础设施、大模型到Agent和具身智能，全景呈现AI的技术演进与产业落地。大会期间，来自50余个国家的2000多位演讲嘉宾将齐聚杭州，围绕Agentic AI与Physical AI等前沿话题展开对话，深入探讨AI、云计算与产业应用的前沿方向，发布云与AI核心技术及全新重磅产品。
<img src="https://static.fuxi.netease.com/fuxi-official/web/20250930/609475884eb74ad0d8b9ac360fb4060b.jpg" alt="" width="1280" height="718">
作为阿里云生态合作伙伴，网易伏羲应邀携游戏AI、工程机器人、具身智能全栈方案等创新成果亮相。大会主论坛上，网易集团执行副总裁、网易雷火事业群负责人胡志鹏分享了游戏AI技术的应用成果，并阐述AI如何从虚拟世界赋能现实产业。网易伏羲语言智能组负责人张荣升在分论坛带来了游戏智能交互应用实践的分享。
一、AI驱动未来：虚拟世界的创造力和现实世界的生产力
<img src="https://static.fuxi.netease.com/fuxi-official/web/20250930/717302fb2cf236ee83760951e25e0ffa.png" alt="" width="1280" height="854">
在主论坛演讲中，胡志鹏发表了题为《AI驱动未来：虚拟世界的创造力和现实世界的生产力》的演讲，首次系统展示了网易在推动新质生产力发展方面的实践成果。他指出，游戏不仅是娱乐，更是前沿技术演进的最佳孵化器和试验田。
在效率新范式方面，网易雷火将AI嵌入游戏制作全流程，大幅提升了创意设计、美术制作、技术研发、营销运营等环节的效率；在创新驱动方面，《逆水寒》手游“剧组模式”让玩家担任导演/编剧/演员，助力数百万玩家转型创作者，UGC动画达千万条，视频传播量百亿级；在产业重构方面，网易伏羲分三步推动传统矿山作业升级：游戏技术改造、数据收集积累、渐进式自动化，解决环境恶劣、安全风险高等问题。为推动生态协作，网易推出“网易有灵平台”，构建覆盖基础设施、引擎、平台、应用的全球智能协作网络，实现赋能超级个体、激发群体智能、构建智能体生态的核心目标，推动AI技术向视觉审核、具身智能、数据采标等场景延伸。
二、前沿分享：游戏智能交互场景的应用实践
<img src="https://static.fuxi.netease.com/fuxi-official/web/20250930/718c823752ccabc7d4b21bbb08dbda67.jpg" alt="" width="1280" height="853">
在分论坛演讲中，张荣升聚焦网易伏羲在游戏智能交互场景的创新实践，通过后训练与多模态技术实现沉浸式体验。智能NPC（Non-Player Character，非玩家角色），突破了传统NPC的脚本化行为模式，是具备动态自主决策的“有灵魂的居民”，借助AOP（面向智能体编程）实现感知、认知、决策全链路闭环。
在《永劫无间》手游“AI队友”中，智能NPC能根据玩家的语音指令，基于AOP框架实现语音识别、指令理解、知识问答、人设对话、语音合成等能力，成为战斗中的“靠谱伙伴”。此外，为实现智能NPC的高效落地，网易伏羲依托通义开源生态进行后训练模型选型，进一步优化了推理效率与场景适配性，快速找到贴合游戏场景的模型。
*后续将带来《网易伏羲在游戏智能交互场景的应用实践》分享内容的详细介绍，敬请期待！
三、前沿科技：展示大模型最新落地成果
在大会展区，网易伏羲的两大核心展位吸引大量观众互动体验，生动呈现大模型在游戏AI与工程机械智能化领域的探索与突破。游戏AI展台聚焦《逆水寒》手游“剧组模式”，玩家在这个模式中可以拍电影，写剧本，甚至重现经典场景，自由创作个性化游戏剧情和短视频内容。这一创新玩法吸引了众多观众驻足体验，亲身感受剧组模式的魅力。
<img src="https://static.fuxi.netease.com/fuxi-official/web/20250930/aad67ae223ba8498fe6b1e5ac14d2695.jpg" alt="" width="1280" height="1920">
挖掘机器人作为网易灵动展台的全场亮点，其创新的交互设计与出色的性能表现吸引了大批观众争相体验，成为展区中最为热门的互动项目之一。通过视频展示、现场讲解和互动体验等形式，观众们能够直观地了解到挖掘机器人灵活应对各种挖掘任务的能力。这种前沿的智能化、自动化技术凸显了网易灵动在智能工程机械领域的创新实力，同时也向观众展示了其对未来工程机械行业发展的重要意义。
<img src="https://static.fuxi.netease.com/fuxi-official/web/20250930/6bfdc067239ff54f98f22f14ccf29416.jpg" alt="" width="1280" height="853">
2025云栖大会不仅是一次展示前沿科技的盛会，更是促进跨行业交流合作的重要平台。此次参会，网易伏羲展示了自身在AI领域的前沿探索，也进一步坚定了未来持续探索技术发展的信心。随着云计算与AI技术的不断融合与发展，网易伏羲将继续深耕前沿技术创新，专注大模型与AI应用的持续探索，携手阿里云等合作伙伴打造更多超越期待的AI产品应用与服务，让每一个人从事自由有趣的工作，实现人机协作，万物有灵。

网易伏羲受邀亮相2025云栖大会，展示AI领域前沿创新成果


新时代背景下，“促进高质量充分就业”已成为我国就业工作的新定位和新使命。正如中央政治局第十四次集体学习中所强调的，应大力发展新业态、新模式，以开发新的就业增长点。作为新就业形态的零工经济，正在为就业带来新机遇、开辟新空间，成为促进高质量充分就业的重要抓手。

新时代背景下，“促进高质量充分就业”已成为我国就业工作的新定位和新使命。正如中央政治局第十四次集体学习中所强调的，应大力发展新业态、新模式，以开发新的就业增长点。作为新就业形态的零工经济，正在为就业带来新机遇、开辟新空间，成为促进高质量充分就业的重要抓手。
<img src="https://static.fuxi.netease.com/fuxi-official/web/20240815/b0e911333ab65375ea1830ad58806bdc.png" alt="" width="960" height="652">
图片来源：中国劳动保障报
随着国家政策的大力支持和社会经济结构的变化，零工经济在中国得到了迅速的发展。这种灵活的就业形式不仅为个人提供了更多的工作机会，也为企业在快速变化的市场环境中提供了更加灵活、高效的劳动力解决方案。然而，在零工经济快速发展的同时，任务交付质量的良莠不齐也成为了一个不容忽视的问题。随着企业对零工经济依赖程度的加深，如何确保任务交付的质量和效率成为众包平台需要解决的关键议题。
针对这一痛点，网易伏羲网易有灵众包平台（zb.163.com）凭借其独特的人机协作模式和专家级交付能力，通过一系列机制有效保证了众包用户的任务完成质量和效率，成为了众多企业降本增效的理想选择。
&nbsp;
点击播放，进一步了解网易有灵众包平台
一、人机协作——打造高效、高质众包服务体验
网易有灵众包平台是网易伏羲旗下的人机协作任务平台。该平台基于网易伏羲自主研发的面向智能体编程框架（Agent-oriented programming，AOP），通过人机协作模式，以更具性价比的成本、更高的质量和更快的时效完成数据标注及内容实时审核服务。目前，网易有灵众包平台支持视觉类、音频类、文本类、视频类、采集类等多样化的任务场景，能够灵活应对不同行业的个性化需求。
<img src="https://static.fuxi.netease.com/fuxi-official/web/20240815/765c1d62529df37d522c64195a076b3b.png" alt="" width="960" height="320">
作为行业中唯一可承接实时人机协作任务的众包平台，网易有灵众包平台提供了基于用户画像的自动质检功能，在控制成本、缩短任务周期、保证质量等方面融入了一系列的前沿算法，包括主动学习、真值推断、回报分解等，通过建立数据闭环，网易有灵众包平台持续将人工标注的数据反馈给AI算法，实现高效的人机协作任务处理流程，从而显著提升任务完成效率，平台特有的灵活属性更使其能够快速响应各种复杂任务需求，无论是大规模数据标注项目还是特定领域的精细化任务，都能得到高效且专业的处理。
在网易有灵众包平台的强大影响力号召下，平台成功汇聚了数十万注册用户。通过丰富的历史任务积累，网易有灵众包平台能够精准刻画众包用户画像，借助智能推送与精准匹配机制，使得用户能够参与到适合他们的任务中，利用更庞大的用户基础更高效率地完成任务。此外，网易有灵众包平台针对下游众包用户管理制定了个性化在线培训、针对性任务考核、超实时违规检测、高质量自动质检以及更公平回报分解等一整套的任务全流程管控机制，确保众包用户在提升任务完成效率的同时，能够有效保障任务交付的专业性和准确性。
在一系列灵活机制的共同作用下，网易有灵众包平台能够确保无论任务规模大小、任务是否主观，都能获得一致的高质量输出，不仅有效减轻了企业在任务质量方面的顾虑，也为企业提供了更为高效、可靠的众包服务体验。
<img src="https://static.fuxi.netease.com/fuxi-official/web/20250822/90889da4201592423fda1d18af171195.png" alt="" width="1200" height="600">
二、灵活用工——助力企业抢占数字化用工未来
目前，网易有灵众包平台已经成功应用于数据标注和内容实时审核两大领域。凭借人机协作的灵活用工模式以及高效率、高质量、高性价比的众包服务，网易有灵众包平台在多项客户案例中展现出了卓越的能力。例如：
网易有灵众包平台为《逆水寒》手游智能 NPC 模型提供语音采集、文本标注、情感判断、图片标注等多数据服务，成功构建拥有海量智能NPC的开放世界，使得NPC不仅拥有自己的性格、动机和行为逻辑，更有记忆且会学习，能与玩家连续进行有趣的对话；
为《永劫无间》训练拟人化寻路机器人提供数据支持，使得机器人能够像较高水平玩家那样，采用滑步蓄力、钩索拉近等高阶操作方式前进。
为无人零售智能货柜提供商品识别人机协作解决方案，利用网易有灵众包平台的商品识别算法能力与大量人工调度能力，实现平均40秒时延和99%的识别准确率，并基于平台的数据闭环能力实现无门槛新商品引入和模型能力持续提升。
无论是帮助游戏开发团队构建智能NPC，还是为无人零售智能货柜提供商品识别人机协作解决方案，网易有灵众包平台始终致力于解决客户的实际业务需求，助力企业抢占数字化用工未来。
<img src="https://static.fuxi.netease.com/fuxi-official/web/20250821/ace1e47fa4cabad5de0bcbda221f1e26.png" alt="" width="1132" height="663">
网易有灵众包平台客户案例
在当下这个快速变化的时代，零工经济正在以破竹之势蓬勃发展，为企业和个人创造了前所未有的机遇。作为人机协作领域的先行者，网易有灵众包平台积极顺应灵活用工趋势，通过智能算法与人机协作的完美融合，有效提升了众包任务的工作效率和质量，为企业提供了更为灵活、高效的用工解决方案。它不仅是一个众包服务平台，更是一座连接未来工作方式的桥梁，为企业开辟了更为广阔的合作空间。
随着技术的不断进步和社会的持续发展，网易有灵众包平台将继续深入探索人机协作全新领域，通过真实的业务挑战持续推动技术创新与服务优化。未来，网易有灵众包平台将打造更加高效、灵活的工作模式，构建更加丰富、多元的应用场景，通过人机协作模式助力企业把握零工经济与灵活用工市场机遇，为更多企业创造更大的价值，携手迈向更加繁荣的未来。
<img style="display: block; margin-left: auto; margin-right: auto;" src="https://static.fuxi.netease.com/fuxi-official/web/20240815/0c6de3c6c6269c5dfd03c9feccf22016.png" alt="" width="264" height="264">扫描二维码，获取网易有灵众包平台详细介绍
市场生态合作:fuxi.mkt@service.netease.com
商务合作：fuxi@service.netease.com
合作电话：（0571）89852163转21951

零工经济下的创新实践：网易有灵众包平台打造灵活用工高效解决方案

“《黑神话：悟空》在全球爆火，李子柒回归获得全球网民关注，中国的春节被正式列入人类非物质文化遗产名录相信大家都能感受到，中国的传统文化正在以更多元、更广泛的影响力，被世界看见。”12月13日，网易公司副总裁庞大智在“2024年度中国游戏产业年会”上，如此回顾过去一年中国文化让人印象深刻的节点。

　　从更宏观的数据层面，庞大智说，2023年中国非遗商品的成交额，首次突破千亿元大关，远超同期社会消费品零售总额的增速。同时，具有中国传统文化元素的游戏产品数量，相比过去5年也增长了3倍。
而游戏在这个大背景下如何发挥更大作用？庞大智分享了他的思考。

“《黑神话：悟空》在全球爆火，李子柒回归获得全球网民关注，中国的春节被正式列入人类非物质文化遗产名录相信大家都能感受到，中国的传统文化正在以更多元、更广泛的影响力，被世界看见。”12月13日，网易公司副总裁庞大智在“2024年度中国游戏产业年会”上，如此回顾过去一年中国文化让人印象深刻的节点。
　　从更宏观的数据层面，庞大智说，2023年中国非遗商品的成交额，首次突破千亿元大关，远超同期社会消费品零售总额的增速。同时，具有中国传统文化元素的游戏产品数量，相比过去5年也增长了3倍。
　　而游戏在这个大背景下如何发挥更大作用？庞大智分享了他的思考。
<img style="display: block; margin-left: auto; margin-right: auto;" src="https://static.fuxi.netease.com/fuxi-official/web/20241216/eae8f45b53e4d5296e573031565bb9fa.jpg" alt="" width="960" height="640">
庞大智 图片来源：主办方供图
<h3>　　让文化为内核的产品“叫好也叫座”</h3>
　　庞大智回顾，过去很长一段时间，许多国产游戏面对的是生存问题，为求商业成功，直接采用国际主流题材经常是一种折中的选择。有时，由于各种原因，中国文化元素也会“被动地”塞到海外题材的游戏内容中，显得较为生硬，让“叫好又叫座”变成一个难题。
　　近几年，随着国产游戏研发水平的提高，国内涌现出一批主动以中国传统文化为内核的高质量游戏产品。
　　“开发者在文案、场景、玩法上精益求精，细化与放大了游戏中深厚的中国文化内涵，赢得掌声的同时，也获得了市场，甚至意外加持了直播、旅游经济等产业的发展。很多玩家玩完游戏，会自发地去考察游戏中的中华文化典故，探索、学习中国的历史故事。”庞大智说。
　　今年，《黑神话：悟空》上线后，在海外玩家间掀起了一阵对《西游记》阅读和研究的热潮。
　　庞大智认为，纯正中国味的文化精品，是可以征服海外用户的。就像《老子》的英译本，是美国销量最大的翻译作品之一；《孙子兵法》在欧美被视为商学院的必备读物这些中国优秀传统文化，历经千年时间的检验，仍被世界所喜爱和学习。
　　《每日经济新闻》记者在现场获悉，网易的游戏产品中，具有东方美术风格的《永劫无间》连续三年登上steam“最畅销游戏”榜单，全球玩家突破4000万。不少海外玩家正是通过《永劫无间》第一次体验中国武术文化和背后的侠义精神。
　　“随着产业的成熟和国际竞争力的提升，包括网易在内的国内厂商作品的成功，让我们相信，现在的中国游戏，完全有能力去追求文化价值和商业价值的双赢，这不仅是文化自信的体现，也是产业升级的必然。”在此背景下，庞大智认为，中国游戏产品要从“被动接单”走向“主动修炼”，让以文化为内核的产品“叫好也叫座”。
<h3>　　对AI“去中心化”对IP构建产业链</h3>
　　对中国游戏产业而言，人工智能是另一个能让游戏发展更上一层楼的重要抓手。
　　庞大智提出，中国游戏要积极抓住人工智能带来的内容革命机遇，推动文化的传递从“中心化”到“去中心化”演变，让每个网民都有机会成为中华文化的传播大使。
　　他以网易旗下的两款游戏为例说，《蛋仔派对》使用“UGC（用户生产内容）+AI”的创作模式，降低了内容创作的门槛。玩家基于泉州“簪花”的文化习惯创作的相关内容，使得簪花在游戏中又火了一把。《逆水寒》则是借助网易伏羲实验室的相关技术，在游戏中推出了“剧组模式”。玩家可以凭借天马行空的想象力和游戏场景加AI输入，生成演员、动作、运镜，以此创作视频。
　　此外，他还提出，中国游戏产业要加速构建原创IP产业链，让中国文化在跨文化交流中保持长久的活力。
　　“一个在全球范围内有影响力的IP，可以跨越文化和语言的障碍，在多个领域实现价值转化。”庞大智表示，“随着中国（游戏）企业研发、制作能力的提升，我们现在同样有能力、也有责任，打造属于自己的原创IP，提升中国文化的话语权和影响力。”
　　最后，庞大智指出，应发挥游戏力量，让中国故事以更强大的姿态走向全球。“正如2000多年前张骞用双脚走通了‘丝绸之路’，今天，我们正在通过游戏这一媒介，促成更多全球范围的文化、技术、产业交流。每一个游戏从业者、游戏热爱者，都有机会成为这条‘数字新丝路’中的一分子，推动中国游戏的全球影响力走上新的高度。”庞大智说。

网易公司副总裁庞大智：从“被动接单”到“主动修炼” 让以文化为内核的中国游戏产品“叫好也叫座”

近日，网易有灵AOP平台首届编程挑战赛顺利落下帷幕。自赛事启动以来，在短短几周的时间里，来自各地的优秀开发者们汇集于此，通过人机协作的形式，完成了多项充满创意和技术深度的任务。此次挑战赛不仅展现了参赛者的卓越编程技能，也体现了AOP（Agent Oriented Programming）面向智能体编程范式在解决实际问题上的巨大潜力。
经过激烈的角逐，专家评审团秉持公平、公正、公开的原则，对所有参赛作品进行了严格评审，最终评选出一等奖1名、二等奖1名、三等奖1名、积极参与奖3名（排名不分先后）。

近日，网易有灵AOP平台首届编程挑战赛顺利落下帷幕。自赛事启动以来，在短短几周的时间里，来自各地的优秀开发者们汇集于此，通过人机协作的形式，完成了多项充满创意和技术深度的任务。此次挑战赛不仅展现了参赛者的卓越编程技能，也体现了AOP（Agent Oriented Programming）面向智能体编程范式在解决实际问题上的巨大潜力。
经过激烈的角逐，专家评审团秉持公平、公正、公开的原则，对所有参赛作品进行了严格评审，最终评选出一等奖1名、二等奖1名、三等奖1名、积极参与奖3名（排名不分先后）。
以下为最终获奖名单：
<img src="https://static.fuxi.netease.com/fuxi-official/web/20250114/6755253e2784a5a375d1286c7d1f5d82.jpg" alt="" width="960" height="6509">
感谢所有参赛者对网易有灵AOP平台首届编程挑战赛的热情参与和大力支持。此次挑战赛的成功举办标志着AOP技术迈出了从理论到实践的重要一步，不仅促进了参赛者之间的技术交流与合作，更为未来的智能化变革注入了新的活力。
展望未来，网易伏羲热忱欢迎更多开发者加入AOP编程的创新实践中，共同推动这一前沿技术的发展。通过不断探索与实践，携手构建一个更加智能、高效的人机协作数字化新生态。网易伏羲也将继续秉承“人机协作，万物有灵”的愿景，深耕技术创新，加速前沿技术的应用与落地，为各行业的智能化变革持续贡献力量。
<img style="display: block; margin-left: auto; margin-right: auto;" src="https://static.fuxi.netease.com/fuxi-official/web/20250114/0b337088d3829e4042df9a77c3ec6be0.png" alt="" width="396" height="396">
扫码入群，交流AOP技术前沿动态
市场生态合作:fuxi.mkt@service.netease.com
商务合作：fuxi@service.netease.com
合作电话：（0571）89852163转21951

赛果公布！网易有灵AOP平台首届编程挑战赛圆满落幕

近日，全球计算机视觉和模式识别领域的顶级会议CVPR （Conference on Computer Vision and Pattern Recognition）公布论文接收结果：网易伏羲人工智能实验室凭借其在前馈捏脸等领域的创新研究，成功入选3篇论文。

近日，全球计算机视觉和模式识别领域的顶级会议CVPR （Conference on Computer Vision and Pattern Recognition）公布论文接收结果：网易伏羲人工智能实验室凭借其在前馈捏脸等领域的创新研究，成功入选3篇论文。
<img src="https://static.fuxi.netease.com/fuxi-official/web/20250313/53f0643cb6a61eb018667b449709cf79.png" alt="" width="850" height="278">
CVPR 是计算机视觉和模式识别领域最顶级的学术会议之一，至今已有40余年历史。在 Google Scholar 的学术会议 / 杂志排名中，CVPR 名列总榜第二，仅次于Nature。今年，共有 13008 份有效投稿并进入评审流程，其中 2878 篇被录用，最终录用率为22.1%。
以下为网易伏羲人工智能实验室此次入选的三篇论文概要：
<h2 style="text-align: center;">一、《EasyCraft: A Robust and Efficient Framework for Automatic Avatar Crafting 》</h2>
<h2 style="text-align: center;">一种前馈式的通用捏脸框架</h2>
关键词：智能捏脸，多模态输入
涉及领域：Automatic Character Creation, Multimodal
论文链接：<a href="https://arxiv.org/pdf/2503.01158">https://arxiv.org/pdf/2503.01158</a>
捏脸是角色扮演游戏、虚拟现实等应用中基础且重要的任务。传统捏脸过程需要用户花费大量时间调整参数以创建理想的虚拟形象，如今，最新的AIGC技术已经能够从图像或者文本中自动化的获取捏脸参数。然而，现有的捏脸自动化方法仍存在以下问题：
<ul>
<li>风格一致性差：现有方法依赖于特定图像域，难以适配不同游戏引擎的风格（如写实、动漫、卡通等）。</li>
<li>输入多样性不足：面对多样化的输入（如真实照片、动漫图片、文本描述），现有方法表现不稳定。</li>
<li>效率低下：现有方法依赖迭代优化，生成速度慢，难以满足实时需求。</li>
</ul>
为了解决这些问题，网易伏羲人工智能实验室提出EasyCraft，一个创新的端到端框架，旨在通过统一的翻译器（Translator）实现基于图像和文本的自动捏脸。EasyCraft的核心是一个能够将任意风格的图像转换为游戏引擎捏脸参数的翻译器，支持多种输入类型，显著提升了捏脸的灵活性和准确性。
<img src="https://static.fuxi.netease.com/fuxi-official/web/20250313/5d20cdcee47cc40f7ec69842368cdb16.png" alt="" width="951" height="367">
基于文字和图像的捏脸效果图
相比于已有的技术方案，EasyCraft 在以下几个方面展现了技术创新：
<ul>
<li>通用翻译器：摆脱了已有方法对神经渲染器的依赖，引入参数翻译器，能够将游戏风格的图像转为捏脸参数，从而实现前馈的端到端的捏脸。</li>
<li>多风格图像支持：通过自监督学习，网易伏羲人工智能实验室训练了一个通用的视觉Transformer（ViT）编码器，能够从不同风格的图像中提取统一的面部特征。这使得翻译器能够处理任意风格的输入图像，而不仅限于游戏引擎的特定风格。</li>
<li>游戏引擎适配：翻译器的训练仅依赖于游戏引擎生成的参数-图像对，无需额外的监督信号。通过将统一的面部特征映射到特定引擎的捏脸参数，EasyCraft能够轻松适配不同的游戏引擎。</li>
<li>文本驱动捏脸：结合Stable Diffusion（SD）模型，EasyCraft支持基于文本描述的捏脸。网易伏羲人工智能实验室通过微调SD模型，使其生成符合游戏引擎风格的图像，再通过翻译器转换为捏脸参数，实现了更精准的文本驱动捏脸。</li>
</ul>
<img src="https://static.fuxi.netease.com/fuxi-official/web/20250313/c54d14daf4d8e93f9499fb36e75f9fad.png" alt="" width="950" height="336">
方法总图
(a):视觉Transformer（ViT）编码器预训练 (b): 翻译器训练(c):图像驱动捏脸 (d):文字驱动捏脸
<ul>
<li>网易伏羲人工智能实验室在两款RPG游戏（逆水寒手游《Justice Mobile》和永劫无间手游《Naraka: Bladepoint Mobile》）上进行了大量实验，验证了EasyCraft的有效性：</li>
<li>图像输入：EasyCraft在处理不同风格的输入图像时，生成的捏脸结果在身份相似性和视觉质量上均优于现有方法。</li>
<li>文本输入：与现有文本驱动捏脸方法相比，EasyCraft生成的捏脸结果在多样性和语义一致性上表现更优。</li>
<li>用户研究：用户对EasyCraft生成的结果给予了更高的评分，认为其在逼真度和一致性上显著优于其他方法。</li>
</ul>
<img src="https://static.fuxi.netease.com/fuxi-official/web/20250313/c913216ed7e7bb3d175f5cca56e40cd3.png" alt="" width="950" height="680">
图像驱动捏脸与已有方法对比结果
<img src="https://static.fuxi.netease.com/fuxi-official/web/20250313/acf05631094b931eea2f5f4005ba63dc.png" alt="" width="950" height="406">
文字驱动捏脸与已有方法对比结果
经过大量实验证明，网易伏羲人工智能实验室证实了其提出的EasyCraft捏脸框架具备以下优势：
<ul>
<li>通用性强：支持任意风格的图像输入，适配多种游戏引擎。</li>
<li>高效精准：通过端到端的框架，实现了快速且精准的捏脸生成。</li>
<li>灵活扩展：翻译器的训练仅依赖于游戏引擎数据，易于扩展到其他捏脸系统。</li>
</ul>
综上所述，EasyCraft为游戏捏脸系统提供了一种全新的自动化解决方案，并在线上AB测试中相比旧方案采纳率提升3倍。EasyCraft的推出，不仅提升了捏脸系统的自动化水平，也为玩家提供了更便捷、个性化的角色创建体验。网易伏羲人工智能实验室的这一技术为网易乃至整个游戏行业带来了更多创新可能。未来网易伏羲人工智能实验室将进一步优化模型，提升其在复杂场景下的表现，同时，积极探索更多潜在的应用场景，如虚拟偶像、元宇宙角色创建等，力求将这项技术应用于更广泛的领域，带来更多的价值和可能性。
<h2 style="text-align: center;">二、《Robust Audio-Visual Segmentation via Audio-Guided Visual Convergent Alignment》</h2>
<h2 style="text-align: center;">通过声音引导的视觉聚合实现更鲁棒的视听分割</h2>
关键词：视听分割，视听对齐
涉及领域：Audio Visual Segmentation, Audio Visual learning
<img src="https://static.fuxi.netease.com/fuxi-official/web/20250313/03056586b9f786039b9e62d83e9716a8.png" alt="" width="950" height="624">
歧义性视听关联样本示意图
视听分割作为多模态学习任务的一环近年来广受关注。先前的工作大多强调从时空角度加强视听关联，而忽视了视听数据的独有特性带来的挑战。本研究重点关注带有歧义性的视听关联样本，即空间上属于同一视觉类别不同发声状态的物体与时序上物体发声状态频繁切换，引起的视听定位错误的问题。为此，本文提出了一个声音引导的模态对齐模块，将视听交互范围限制在语义密度相似的视觉区域，逐步对发声区域进行合并，以此来逐步加强真正发声区域与声音的关联。此外，我们在时序上引入不确定性评估模块，在时序上对物体发声的不确定性进行评估，缓解物体发声状态突变造成的过度分割问题。
<img src="https://static.fuxi.netease.com/fuxi-official/web/20250313/705acc361cd53f9815298989c60baca8.png" alt="" width="950" height="194">
声音引导的渐进式模态对齐方法
<img src="https://static.fuxi.netease.com/fuxi-official/web/20250313/49768fa552059666ca7c36d1f8a3dc3c.png" alt="" width="950" height="375">
定位结果示意图
实验结果表明，本文研究方法在处理发声状态频繁切换及视觉类别相似但发声状态不同的复杂样本时，能够显著提高视听定位的准确性。这种方法不仅增强了模型对复杂视听场景的理解能力，同时也为未来相关领域的研究提供了新的视角和解决方案。
<h2 style="text-align: center;">三、《Dynamic Derivation and Elimination: Audio Visual Segmentation with Enhanced Audio Semantics》</h2>
<h2 style="text-align: center;">动态衍生和擦除：带有增强语义的视听分割</h2>
关键词：视听分割，视听对齐
涉及领域：Audio Visual Segmentation, Audio Visual learning
近年来，建立有效的视听关联已经成为多模态学习领域的重要目标之一。为了实现更强的视听关联，之前的方法主要集中在设计更先进的视听关联架构上，而忽视了声音特性所带来的视听关联挑战。本研究探索了声音的可加性及同一物体发声多样性导致的视听关联问题。
<img src="https://static.fuxi.netease.com/fuxi-official/web/20250313/0f6bdf0bba39934cb2f72fd644969310.png" alt="" width="950" height="825">
示意图：声音可加性和较大的类内差异带来的视听匹配困难
为了解决声音可加性对声音语义表达的削弱，本文提出了一种声音语义动态衍生方法，通过补充多声源数据的语义信息来增强单声源的语义表达。此外，我们通过学习细粒度的类内鉴别性语义，解决了声音类别内部差异较大所带来的视听关联困难。最后，我们提出了一种视觉语义引导的视觉无关声音语义擦除方法，旨在减少噪声和画外音对视听关联构建的干扰。
<img src="https://static.fuxi.netease.com/fuxi-official/web/20250313/cbc3bfac7d542f352a11d94a5c2afd3f.png" alt="" width="950" height="377">
方法示意图
<img src="https://static.fuxi.netease.com/fuxi-official/web/20250313/992f6a96525964c3ba460e890db55a4c.png" alt="" width="950" height="442">
分割结果示意图
实验结果表明，我们的方法在视听分割数据集上展现出了显著的性能提升，证明了其在处理复杂音频-视觉关联任务方面的有效性。这一进展不仅推进了视听分割技术的发展，也为未来多模态学习的研究提供了新的视角和方法。
此次网易伏羲人工智能实验室多项研究成果入选CVPR 2025，不仅彰显了其在国际学术界的影响力与创新能力，也体现了通过尖端技术推动行业进步的坚定决心。作为科研和孵化的基石，网易伏羲人工智能实验室致力于前沿技术的研发；而网易伏羲则在此基础上，进一步推进这些技术的产品化和商业化探索。展望未来，网易伏羲将持续秉持开放合作的精神，深化AI技术及其应用的研究，促进人机协作的广泛应用，助力各行各业实现数字化转型，并共同探索人工智能带来的无限可能。
<img src="https://static.fuxi.netease.com/fuxi-official/web/20250313/15c79ffa99551211effd34e80b4929f9.png" alt="" width="950" height="2502">

网易伏羲人工智能实验室技术创新再突破！前馈捏脸等3篇论文入选CVPR 2025

在PVP多人对战类的游戏中，社恐玩家的社交和情绪价值、对战局的操控感，无法得到有效满足。因此，网易伏羲助力《永劫无间》手游率先发布了全球首创的游戏Copilot-多模态实时交互的语音AI队友。它可以在战斗中自主跑图、战斗、听指令、报战况，还会和玩家进行自由对话，给玩家带来极高的情绪价值。
近期，在由DataFun主办的DataFunSummit2024：生成式AI技术峰会上，这一创新成果得到了充分展示。该峰会聚焦AI技术落地和应用实践，展示了多个已在业务中成功落地生成式AI技术的团队经验。此外，峰会还探讨了诸如AI搜索、AI4Science以及具身智能等前沿技术和应用场景。

<h3>FUXI_导读</h3>
在PVP多人对战类的游戏中，社恐玩家的社交和情绪价值、对战局的操控感，无法得到有效满足。因此，网易伏羲助力《永劫无间》手游率先发布了全球首创的游戏Copilot-多模态实时交互的语音AI队友。它可以在战斗中自主跑图、战斗、听指令、报战况，还会和玩家进行自由对话，给玩家带来极高的情绪价值。
近期，在由DataFun主办的DataFunSummit2024：生成式AI技术峰会上，这一创新成果得到了充分展示。该峰会聚焦AI技术落地和应用实践，展示了多个已在业务中成功落地生成式AI技术的团队经验。此外，峰会还探讨了诸如AI搜索、AI4Science以及具身智能等前沿技术和应用场景。
（前情回顾：<a href="https://fuxi.163.com/database/1196">如何用Agent打造游戏Copilot？「永劫无间」手游AI队友的技术实现路径｜活动预告</a>）
峰会上，网易伏羲语音技术负责人莫名受邀发表了题为《实时语音交互的游戏队友—AI Agent创新应用》的演讲，分享了如何利用实时语音交互的游戏队友- AI Agent创造更自然、更互动的游戏体验。本文将重点讲解语音 AI 队友的设计和实现，及其背后的AOP（Agent-Oriented-Programming，面向智能体编程）框架，最后还会分享语音技术在游戏场景的一些创新应用。
网易伏羲介绍
<ul>
<li>语音AI队友的设计与实现</li>
<li>Agent能力迭代- AOP数据闭环</li>
<li>语音技术在其他游戏场景的应用</li>
</ul>
<h3>1、网易伏羲介绍</h3>
<img src="https://static.fuxi.netease.com/fuxi-official/web/20241017/86ad1c113f7e449df41a74d779839441.png" alt="" width="1000" height="567">
网易伏羲是国内首个游戏人工智能研究机构，自2017年成立以来，已在全球各类学术顶级会议中发表270余篇学术论文，并持有600多项技术专利，为人工智能、元宇宙、数字孪生、智能决策技术等众多前沿科技领域的理论研究和实践应用做出贡献。
自成立以来，网易伏羲不断推陈出新，积极探索前沿技术和应用场景，实现了游戏AI领域的多项创新技术突破，推出了基于照片、文字的AI捏脸、智能NPC、剧组模式、语音交互式捏脸和语音AI队友等多个行业首创的AI应用。通过将AI技术融入游戏系统的各个层面，网易伏羲成功助力《逆水寒》手游、《永劫无间》手游等游戏打造多项创新玩法，极大地提升了玩家的游戏体验。
近期，网易伏羲助力《永劫无间》手游推出全新的游戏Copilot——“语音AI队友”，该玩法一经推出即受到玩家的高度评价，相关用户生成内容迅速登上抖音和B站热门榜单。
<h3>2、语音AI队友的设计与实现</h3>
<img src="https://static.fuxi.netease.com/fuxi-official/web/20241017/ed1cedf560aa1508ac3527ef6515d517.png" alt="" width="1000" height="574">
传统游戏中，机器人往往存在行为呆板、缺乏互动交流等问题。对于有社交焦虑的玩家，他们希望在避免与真人玩家直接语音交流的同时，仍能享受游戏中的社交体验及多人对战的乐趣。此外，玩家匹配到技术不佳或配合度低的队友，会导致游戏体验不佳。因此，玩家希望能够找到一个既能提供高质量的游戏技巧支持又能陪伴聊天的对象，从而满足自身情绪需求，提升整体游戏体验。
为了满足玩家对于游戏互动性和情绪价值的需求，《永劫无间》手游推出了一种多模态实时交互的语音AI队友。AI队友能够在战斗中自主跑图、执行战术动作，并根据玩家指令汇报战况。此外，它还能与玩家进行自然对话，提供情感支持。对于新手玩家，该语音AI队友还具备教学引导功能，可以帮助他们更快地熟悉游戏机制。
<video style="width: 1000px; height: 500px;" controls="controls" width="1000" height="500">
<source src="https://cdn.fuxi.netease.com/eevee/fuxi_protal/index/backend/news/01 AI.mp4?auth_key=2147483647-0-0-810fa0f3339be4e734c9b1f13db01f34"></video>
（视频来源于网络）
在《永劫无间》手游中设计的AI队友Agent能够综合处理游戏环境中的状态变化和玩家输入的语音信息。基于对当前环境状况的认知、决策能力，以及利用游戏知识库与战斗记忆，该AI队友能够做出合理的行动决策并给予相应的语音反馈。
<img src="https://static.fuxi.netease.com/fuxi-official/web/20241017/a681abf0dac156d4a8d3c0ead1785734.png" alt="" width="1000" height="559">
在这一应用场景下，为实现高效互动和辅助功能，Agent需要具备的认知与决策能力主要包括：语音识别、指令理解、教学问答、人设对话、语音生成，以及协同完成任务所需的战斗智能体等。
接下来将详细介绍几个核心能力。
<img src="https://static.fuxi.netease.com/fuxi-official/web/20241017/7c35290f12694ceb909a375f81c42eeb.png" alt="" width="1000" height="565">
首先，作为AI队友，必须具备“听得懂”的能力，能够像真人一样与玩家实时语音互动。因此在设计之初就去掉了智能音箱等场景中常用的唤醒词设计，比如“Hey Siri”，而是采用全开麦实时语音交互。这种模式虽然极大地提升了用户体验，但也带来了很大挑战。比如环境噪音、不同设备的兼容性、玩家方言口音差异以及存在一些专业术语等问题。为了解决这些问题，我们基于AOP（Agent-Oriented-Programming，面向智能体编程）框架的核心能力，构建了自主数据闭环的训练模型，使Agent具备自主进化的能力，并且构建了标准的测试集，有效利用测试和线上数据扩充数据集，推动模型迭代。我们的语音识别在经过几次场景数据的闭环训练之后，在噪声过滤、热词适配等方面都得到了显著的加强。
<img src="https://static.fuxi.netease.com/fuxi-official/web/20241017/2660b39029c4ad5d62274d92ca38cafb.png" alt="" width="1000" height="563">
除了听得懂，AI队友还需能够进行表达和对话。通过结合大语言模型与文语转换（TTS）技术，AI队友实现了自主对话的功能。为了增强语音生成模型的泛化能力，我们利用多年积累的大数据对语音基础大模型进行了训练，并针对具体游戏场景进行了自适应优化。
<img src="https://static.fuxi.netease.com/fuxi-official/web/20241017/8d8570bb32958a2c5f1531698f63aef9.png" alt="" width="1000" height="560">
在听得懂、能说话的基础上，我们给AI 队友设计了非常丰富的人设选项，比如彩虹屁萌妹、温柔体贴御姐以及温暖深情暖男等等。这些具有鲜明个性的 AI 队友，不仅可以和玩家产生复杂的互动关系，还可以根据不同的游戏情境展现出其独特的性格特点，进一步增强游戏的沉浸感和互动感。比如上图中展示的，一个玩家在玩的过程中通过和不同AI 队友的交互体验，画出了一个关系图。
<img src="https://static.fuxi.netease.com/fuxi-official/web/20241017/70e375cfb92c8f2ebfdea94fd947b9b1.png" alt="" width="1000" height="542">
作为游戏的陪玩或队友，对于游戏的理解需要非常到位，对于问到游戏相关内容时，要做出非常好的回答。为了实现AI队友的教学问答功能，我们构建了一个强大的知识库系统，该系统包括游戏的静态知识（如规则和机制）和动态知识（如赛事信息）。当玩家提出问题时，AI会通过embedding模型将问题转化为向量，并在向量库中搜索最匹配的答案。如果答案不明确，则会利用RAG（检索增强生成）和更高级的大语言模型进行进一步的检索和推理，以确保提供准确的回答。
<img src="https://static.fuxi.netease.com/fuxi-official/web/20241017/219ca896c1c68115c11ae9936372fccd.png" alt="" width="1000" height="561">
AI队友还必须拥有基本的游戏执行能力。当玩家发出如“集火胡桃”这样的指令时，系统首先在预处理模块中解析并理解该指令的意图。识别出意图后，系统将“集火”这一行为类型和“胡桃”这一目标转化为状态信息，并将其作为战斗模块的输入。最终，基于强化学习的战斗模型会根据这些输入信息做出相应的行动决策，从而执行玩家的指令，做出集火胡桃的动作在客户端表现出来。
基于上述介绍，可以看到AI队友系统具备多种能力，包括理解语音、自然对话、展现个性以及执行任务等，因此它是一个多智能体系统，类似于人类大脑中不同区域分工明确且协同工作的机制。行业中已有一些成熟的多智能体框架，如MetaGPT和AutoGEN等，支持复杂系统的开发与应用。
下面以一个玩家制作的视频来回顾一下AI队友实现的能力。
<video controls="controls" width="1000" height="500">
<source src="https://cdn.fuxi.netease.com/eevee/fuxi_protal/index/backend/news/02_1726459560_raw.mp4?auth_key=2147483647-0-0-7023278eddfac49b571fbd2f19149ef6"></video>
（视频来源于网络）
在做Agent设计和落地时，常会遇到场景适配的问题，比如语音识别，需要适配环境噪音、口音等问题。我们是如何解决这些问题的呢？这就引入了下一部分内容——AOP框架。
<h3>3、Agent能力迭代- AOP数据闭环</h3>
<img src="https://static.fuxi.netease.com/fuxi-official/web/20241017/e751f99330f7054e47b0cddb7408f06d.png" alt="" width="1000" height="549">
AOP(Agent-Oriented-Programming，面向智能体编程) 是网易伏羲设计的一套全新的编程范式，其核心价值在于为开发者对接智能体（包括AI和人），提供统一范式的接口和服务，并自动构建数据闭环让智能体具备自主进化能力。开发者可通过 AOP 使用网易有灵机器人平台预置的公共智能体能力，包括 ChatGPT、Midjourney 等预训练模型，以及数据标注、美术制作、工程机械操控等众包能力，也可针对行业细分场景定制化构建智能体应用。
AOP的设计思想，是基于马尔可夫决策过程（Markov Decision Processes,MDP）的定义来进行任务建模，即Agent（智能体，包括人类或机器）在进行某个任务时，首先会和环境进行交互，产生新的状态（State），同时环境会给予相应的奖励（Reward），这一过程循环往复，Agent与环境之间的交互产生了大量的数据。Agent利用这些新数据不断调整自身的行为策略，经过多次迭代后，Agent便能够学习到完成特定任务所需的最佳动作策略。
<img src="https://static.fuxi.netease.com/fuxi-official/web/20241017/687c52a98bb9d177a49a205fc7241fe4.png" alt="" width="1000" height="552">
<img src="https://static.fuxi.netease.com/fuxi-official/web/20241017/ecc7d21f6f6521d743fda3d3d7fac2f0.png" alt="" width="1000" height="558">
图中展示的是我们所定义的一个用于语音识别的智能体。我们详细规定了该智能体的状态观察机制及其自身的能力，无论是指定使用人工智能还是人工操作。一旦完成接口描述语言（IDL, Interface Description Language）的定义，便能够生成并编译出这一智能体。编译完成后，我们将获得一段运行时代码，这段代码提供了同步与异步调用的接口。接着，利用AOP平台的一键发布功能，即可实现智能体的快速部署。部署完毕后，就可以在具体的业务场景中直接调用此智能体。例如，根据图示代码所示，可以选择调用AI执行的自动语音识别(ASR)功能或人类执行的语音识别服务。
该AOP框架已成功应用于多个案例之中，除了文本提到的AI语音队友以外，还在《逆水寒》手游的文字捏脸、《永劫无间》手游的交互式捏脸等应用中落地。
网易伏羲AOP SDK即将开启内测，感兴趣的伙伴可以扫描二维码进入微信群，第一时间获得内测信息。
<img src="https://static.fuxi.netease.com/fuxi-official/web/20241017/074765a0934724650f58cc8c086ed0fd.png" alt="" width="1000" height="557">
<h3>4、语音技术在游戏场景的应用</h3>
最后来分享一下语音技术在游戏场景的一些其他应用。
<img src="https://static.fuxi.netease.com/fuxi-official/web/20241017/f62609796db64c104c9cd24d5de41831.png" alt="" width="1000" height="554">
在游戏场景下，除了实时互动的语音AI队友，我们在音频内容生产上也做了一定工作。游戏场景下的音频内容，主要包含音乐、音效、语音三个方面。游戏音乐，包括背景音乐、剧情、战斗和关卡中的音乐等等。音效包括各种各样的声音效果，像环境音效、动作音效等等，例如法术释放、技能特效、爆炸声等，完美的音效设计可以给玩家带来更好的沉浸感和互动体验。游戏人物语音是指游戏角色所发出的人声，常见的有对话语音、战斗语音，语音设计师可以根据角色的角色设定、角色性格、场景和情节需求，来创造适合的语音内容和表达方式。在传统的游戏生产链路中，这三部分都是人工完成的，耗费人力和时间很多，随着AI生成式技术的兴起，我们尝试用技术去帮助游戏音频设计师更快更好地生产内容。下面，将以人物语音为例，介绍我们在游戏里面的一些落地案例。
<img src="https://static.fuxi.netease.com/fuxi-official/web/20241017/02952f99ce0eac33590076c00be519fb.png" alt="" width="1000" height="546">
《逆水寒》手游自去年上线就获得了很大的关注度，玩家可以在汴京、虹桥等很多地方，和澜儿、高衙内等数十个NPC进行互动交流，这种细致入微的互动，为游戏增添了更多的乐趣和丰富性。游戏里大家所听到的这些NPC的声音，就是我们语音合成技术所实时合成的。形形色色的会说话的NPC，增加了《逆水寒》手游街头巷尾的烟火气息，让玩家获得了更好的沉浸式体验。
为了增强游戏的社交性、可玩性，提高游戏丰富度在《逆水寒》手游中，我们首次在游戏里加入了声音的DIY玩法——自定义技能喊话，玩家可以设置技能施放时候播放的语音内容，玩家可以输入文本，选择音色进行订制，也可以输入自己的语音进行音色转换来订制。
另外，我们还应用了歌声合成和转换技术，来制作歌声内容。
在游戏场景中，对变声器，即语音转换能力的需求比语音合成更多，我们在这块做了深入的探索，发表的论文有DualVC、DualVC2、DualVC3、Expressive-VC等等。比如在直播时可以选择将自己的声音更换为另一种特定的音色。实时变声器可以在很多玩法上做嵌套，但也会遇到法律边界的挑战。
<img src="https://static.fuxi.netease.com/fuxi-official/web/20241017/0432ae386f9a0d22cce1bf9f6c24cbc8.png" alt="" width="1000" height="554">
围绕语音生成，网易伏羲在Codec和LLM两个方面都做了探索。Codec方面，网易伏羲基于自身技术积累，自研了适配生成式大语言模型的语音Codec，不仅实现了语音的离散化和高质量重建，而且做到了内容属性与音色属性的解耦。
LLM方面，在文本生成语音时，使用了Speech LLM，利用数十万小时的语音数据训练，融合SFT+RLHF等手段，实现了媲美真人的语音合成效果。
以上就是本次分享的内容，谢谢大家。
<img style="display: block; margin-left: auto; margin-right: auto;" src="https://static.fuxi.netease.com/fuxi-official/web/20241017/690d29a90d545e793c193bf729120f5c.png" alt="" width="396" height="396">
扫码入群，参与AOP SDK内测
市场生态合作：fuxi.mkt@service.netease.com
商务合作：fuxi@service.netease.com
合作电话：（0571）89852163转21951

实时语音交互的游戏队友——网易伏羲AI Agent创新应用 | DataFunSummit2024演讲实录

1月17日，网易伏羲的“玉言”系列模型在CLUE分类任务排行榜中超越其他模型，荣登榜单第一。在CLUE1.1分类任务排行榜(包含AFQMC[文本相似度]、TNEWS[短文本分类]、IFLYTEK[长文本分类]、OCNLI[自然语言推理]、WSC[代词消歧]、CSL[关键词识别]6个理解任务）上首次超过人类水平。

1月17日，网易伏羲的“玉言”系列模型在CLUE分类任务排行榜中超越其他模型，荣登榜单第一。在CLUE1.1分类任务排行榜(包含AFQMC[文本相似度]、TNEWS[短文本分类]、IFLYTEK[长文本分类]、OCNLI[自然语言推理]、WSC[代词消歧]、CSL[关键词识别]6个理解任务）上首次超过人类水平。
<div class="media-wrap image-wrap align-center" style="text-align: center;"><img id="https://static.fuxi.netease.com/fuxi-official/web/20230117/148be9fb31c9e78535b11a7d632825ac.jpg" class="media-wrap image-wrap align-center" title="网易伏羲预训练模型”玉言“登顶CLUE分类榜单" src="https://static.fuxi.netease.com/fuxi-official/web/20230117/148be9fb31c9e78535b11a7d632825ac.jpg" alt="网易伏羲预训练模型”玉言“登顶CLUE分类榜单"></div>
作为中文语言理解领域最具权威性的测评基准之一，CLUE榜单在学术界及工业界有着深远影响。此次「玉言」成功登顶CLUE分类任务榜，是网易伏羲在中文文本预训练领域又一重要里程碑。值得一提的是，一年前网易伏羲的“玉言”系列模型也曾登顶CLUE推出的中文小样本学习评测榜单FewCLUE。
&nbsp;
"玉言“是网易伏羲自主研发的中文文本预训练大模型系列，这次登顶CLUE分类任务榜单的模型参数达到110亿，结构由深层Encoder和浅层Decoder组成，这种结构可以使得大模型具有优秀理解能力的同时，也有着较为优秀的生成能力。除此之外，Encoder-Decoder结构方便训练任务的设计，不需要复杂的掩码策略。其预训练数据包括网易自有高质量数据、各类百科、新闻、社区问答、wiki、小说等等；网易伏羲对收集到的数据进行去重，清洗，产出了大量高质量数据，并采用这些数据训练模型，使得模型具有良好的泛化性，在各类任务上都有着出色的性能。
&nbsp;
网易伏羲在"玉言“模型的训练中，采用多任务训练框架对模型Encoder和Decoder进行训练。为了提升模型的语义表示能力，同时让模型更好的理解不同长度的文本信息，提出了不同的预训练策略来帮助模型学习：
&nbsp;
掩码策略：掩码[MASK]将句子中的词进行掩盖，让模型还原被掩盖的词语，提升模型对词语的语义表示能力；
&nbsp;
Word Shift策略：通过打乱中文词语里单字的顺序，让模型对其进行还原，从而提升模型对中文词语表达的关注能力，增强对中文词语的敏感性；
&nbsp;
Short Sentence Reorder策略：通过打乱出现在句子中的短句，再让模型还原以提升模型对句子语义的理解；
&nbsp;
Word/Sentence Deleted策略：删除句子中的单词或整句后再让模型进行还原，以提升模型对不同长度的文本的语义表示能力；
&nbsp;
网易伏羲的大规模预训练相关工作由网易高级副总裁、网易雷火事业群总裁胡志鹏牵头主持，并且入选2022年度浙江省科技计划项目--“尖兵”项目。自研模型规模从最早的一亿参数增长至千亿参数，模型领域从文本拓展到图文、音乐、行为序列等多种模态，积累了丰富的预训练模型训练和工程优化的经验。相关技术也已经应用在网易集团内的文字游戏、智能NPC、文本辅助创作、音乐辅助创作、美术设计、互联网搜索推荐等业务场景，并取得了显著的业务效果。
&nbsp;
另外，网易伏羲参与了中国人工智能产业发展联盟组织的大规模预训练模型技术的应用评估方法编写，并且在由中国信息通信研究院、人工智能关键技术和应用评测工业和信息化部重点实验室等机构发起的2022可信AI峰会上，网易伏羲的大模型应用「LOFTER-AI写文」和「傀儡戏-互动式文字游戏」同时入选“2022大规模预训练模型优秀应用案例”，在大模型技术及AI实践领域获行业认可。
&nbsp;
网易伏羲作为国内专业从事游戏与泛娱乐AI研究和应用的顶尖机构，未来会在大规模预训练模型领域持续探索，并结合网易有灵机器人众包能力，引入“人”的决策及数据闭环，进一步提升大模型的能力。

网易伏羲预训练模型”玉言“登顶CLUE分类榜单，成绩首次超过人类水平

在智能化浪潮席卷建筑施工领域的今天，智能化转型已成为行业提质增效的关键路径。面对安全作业、招工难等长期痛点，行业龙头率先求变。中铁二十局集团有限公司（简称“中铁二十局”）以及旗下新能源工程机械专业制造公司——中铁长安重工有限公司（简称“长安重工”）与网易灵动强强联手，推动旗下某高铁项目搅拌站落地无人装载机技术，实现传统混凝土生产场景无人化、自动化升级，为传统基建施工的智能化升级树立了实践标杆。

从开路先锋到智造标杆，网易灵动携手大型央企开始“无人化作业”新阶段
在智能化浪潮席卷建筑施工领域的今天，智能化转型已成为行业提质增效的关键路径。面对安全作业、招工难等长期痛点，行业龙头率先求变。中铁二十局集团有限公司（简称“中铁二十局”）以及旗下新能源工程机械专业制造公司——中铁长安重工有限公司（简称“长安重工”）与网易灵动强强联手，推动旗下某高铁项目搅拌站落地无人装载机技术，实现传统混凝土生产场景无人化、自动化升级，为传统基建施工的智能化升级树立了实践标杆。
&nbsp;
<img src="https://static.fuxi.netease.com/fuxi-official/web/20251224/0e4e54781b647447857615ca55764ff0.png" alt="" width="1200" height="615">
从“开路先锋”到“智造标杆”，大型央企以创新驱动产业升级
中铁二十局作为世界500强企业中国铁建所属子公司，是国家大型建筑施工企业，始建于1949年，历经解放战争、抗美援朝、“两弹一星”基地建设等国之重任，曾被誉为“两弹一星”的开路先锋，并且是全国唯一全程参与青藏铁路建设的单位，在高原铁路领域创造了13项中国及世界之最，在国内外承建了超过2000项重大工程。企业总部驻陕西西安，拥有员工超1.5万名、施工设备6000余台（套），年产值超700亿元，连续7年新签合同额超1000亿元，2021-2023年连续突破2000亿元大关。
&nbsp;
<img src="https://static.fuxi.netease.com/fuxi-official/web/20251224/f06a8fdd236797fe58a860c42065c935.png" alt="" width="1200" height="800">
&nbsp;
中铁二十局参建代表工程
进入“十四五”以来，中铁二十局坚持“实事求是、守正创新、行稳致远”，锚定“传统产业升级+战新产业培育”双路径，持续巩固传统优势的同时，全面布局创新载体。在深度自主研发、持续创新攻关的背景下，其旗下长安重工以创新为驱动，积极推动传统制造向高端、智能、绿色全面转型，实现了跨越式发展：国家级专精特新“小巨人”、陕西省专精特新企业、中国铁建专精特新企业，斩获国家级奖项55项，省部级奖项71项，授权专利127项……而无人电动装载机在某高铁站点应用，正是其将创新技术应用于一线生产，破解传统搅拌站人力依赖与安全生产难题，培育高质量发展“新引擎”的重要实践。
<img src="https://static.fuxi.netease.com/fuxi-official/web/20251224/59d57e11b3e3f733601cfda3b73d3dcf.jpg" alt="" width="1200" height="899">
安全与效率双提升，打造搅拌站转型新样板
在传统铁路、公路等大型工程搅拌站中，装载机上料作业高度依赖人工操作，存在劳动强度大、作业环境恶劣、人力成本高等痛点，同时，人机混合作业也潜藏着一定的安全风险。为解决这些实际问题，网易灵动与中铁二十局合作落地灵载·无人装载机器人解决方案。该方案以中铁二十局旗下长安重工958E电动装载机为载体进行本体智能化升级，并同步改造搅拌站相关场地，打造无人装载机系统，实现24小时不间断、稳定执行作业任务。
<video controls="controls" width="1200" height="600">
<source src="https://cdn.fuxi.netease.com/eevee/fuxi_protal/index/backend/news/20251224-zhongtie12.mp4?auth_key=2147483647-0-0-7754759ed37eaa607010f2fe13a716c4"></video>
无人装载机现场作业
基于自研的激光融合感知、高精度料面感知等技术，无人装载机即便在粉尘弥漫、光线不足的复杂工况下，也能实时精准感知作业环境、料仓料斗容量，灵活调整作业策略，确保在施工作业中发挥最佳性能；基于网易灵动自研“机械智心”训练框架，无人装载机可实时优化作业路径和施工策略，能够自动导航至指定料仓，智能规划起铲点完成铲料，并导航至料斗完成卸料；系统还具备全面的安全防护机制，可实时监测周围动态，在遇到突发情况时自动预警或停车，必要时支持人工远程应急接管，确保作业现场的安全。
项目的成功落地，带来了多重显性成效。生产效率方面，无人装载机能够根据生产需求自主作业，避免了因人员疲劳、轮班交接导致的效率波动与生产中断，保障了混凝土供应的连续性与稳定性；安全生产方面，彻底将施工人员从高温、高粉尘、高噪音的恶劣环境中解放出来，杜绝了因人员误操作或人机混合作业引发的潜在安全隐患，显著提升了作业安全等级。这一成功实践，不仅为该搅拌站带来了直接效益，也为中铁二十局在更多项目推广无人化、智能化施工装备提供了可靠范例。
以科技助力传统基建，勾勒智能建造新图景
此次网易灵动与中铁二十局在该高铁搅拌站的成功合作，是尖端智能科技与厚重基建实力的一次深度融合。它不仅是搅拌站单一环节的技术革新，更是整个建筑行业向智能化、无人化演进的重要一步。展望未来，随着“十四五”征程的推进与“十五五”蓝图的展望，网易灵动将持续深耕工程机械智能化领域，与合作伙伴一道，推动更多场景的数字化转型，共同为交通强国建设与国家基础设施的高质量发展注入澎湃的科技动能。

从开路先锋到智造标杆，网易灵动携手大型央企开始“无人化作业”新阶段

test_unauth_news

AAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAA