11月18日，京东集团（纳斯达克股票代码：JD，港交所股票代号：9618）对外发布了2021年第三季度业绩。从2017年初全面向技术转型以来，京东持续加大了对基础科学与底层技术的投入力度，推动基础设施建设的数量与效率的双向提升,京东体系已在技术上累计投入已近750亿元。

在第三季度，京东探索研究院人工智能团队凭借多模态交互数字人技术、跨模态分析技术在第29届ACM国际多媒体顶级会议（ACM International Conference on Multimedia，简称ACM Multimedia）上荣获两项大奖。这些获得国际学术界顶尖荣誉的领先技术正在通过京东云这个统一平台输出服务各行各业。其中，基于多模态交互数字人技术研发的“虚拟数字人”能助力京东智能客服言犀提升智能接待、服务和虚拟助手的体验，比如与某银行合作落地应用，打造了全国第一个交互式数字人项目“数字柜员”。

斩获国际AI顶会双项大奖 京东云推动越来越智能的数字浪潮

今年三季度以来，京东探索研究院与各大实验室继续在可信人工智能、超级深度学习、量子机器学习等基础科学领域持续推进创新研究，并取得累累硕果。

近日，京东探索研究院AI团队凭借多模态交互数字人技术、跨模态分析技术，在国际AI顶会第29届ACM Multimedia上分别斩获2021年最佳演示奖及最佳开源项目奖，充分证明了京东在人工智能视觉与人机交互领域的全球领先性。

ACM Multimedia是计算机科学领域中多媒体领域的首要国际会议，1993年以来每年召开一次，已成为多媒体领域顶级盛典，大会致力于推动多媒体的研究和应用，京东探索研究院的两项获奖技术均为ACM Multimedia颁发的该技术领域唯一奖项，分量十足。

在传统的AI认知中，视觉领域、语音领域、自然语言领域等领域之前是独立演进的技术和应用，可以认为是单模态技术，而人是一个看、听、说多模态共同工作的智能体，所以多模态技术是未来人工智能应用发展的方向。京东探索研究院的多模态交互数字人技术ViDA-Man致力于打造具备多感官交互能力的人机交互系统，深入多模态交互技术研究，专注于人机交互的消费科技产品打造。基于该技术开发的多模态交互数字人形象引擎，能够提供快速的形象定制能力，从外观的数字化逐渐深入到行为的交互化、情绪的智能化。

近年来，数字浪潮的推动让人工智能技术已经实现从不可用到可用。AI产品化时期，诸如智能语音识别技术、智能图片处理技术、基于用户兴趣的算法引擎推荐、智能审核技术、AR/VR技术、5G技术等成为了AI落地的抓手，掀起了科技创新的新浪潮。京东探索研究院这些前沿技术的持续探索，也正陆续通过京东云这个统一平台对外输出，助力产业数字化。

VTM数字员工“加盟”银行网点，京东云助力银行网点数智化升级

在银行行业，传统银行服务网点存在运营成本高、网点高峰期排队、远程柜员接待能力不足等痛点，制约了业务的扩展。

基于多模态交互数字人技术，京东智能客服言犀与某银行合作，推出VTM数字员工，提升智能接待、服务和虚拟助手的体验。区别于过往咨询问答式机器人，双方共同打造的VTM数字员工可独立闭环完成交易业务全流程，在交互方式上，采用拟人化的对话方式与亲和的形象，为用户提供了良好的服务体验，在交易场景中迈出了重大的一步。该数字人通过与VTM机、助农设备打通，形成了多渠道、全场景、端到端的VTM数字人解决方案。在传统渠道升级方面，该数字人解决方案用智能化技术帮助传统服务渠道，为传统服务网点和无人网点建立了人资调配的通道，很好的提升了银行的服务体验和效率。在场景支持方面，拓展了数字人在银行场景中的应用边界，从传统的咨询、查询、导览拓展到了取款、开户、密码重置等交易场景中；在区域客户的渗透方面，将通过便捷易操作的服务及与助农设备的互通，为适老化能力的建设和乡村金融服务的街乡级渗透提供新路径。

京东智能客服言犀将数字人技术一方面融合了前沿的AI技术，包含NLP、TTS、ASR、虚拟形象、图像识别等多项技术，具备感知、认知、交流、服务的能力，同时，还打通了VTM机系统，使得该项目可胜任各类金融服务场景；生动的3D形象配以亲和的面部表情和肢体动作，充分模拟人与人之间真实的对话方式，打造的可媲美真人的VTM数字员工，为用户提供接近于真人体验的可视化服务。目前该项目已在银行多个网点部署，并取得了良好的效果。

随着人工智能的深入发展，像虚拟数字人这样的AI技术早已走出了实验室，与现实的产业场景不断融合。京东AI技术之所以能取得如此优异的成绩，是其在真实复杂场景的有效实践和千锤百炼。作为整个京东集团对外提供技术服务的核心平台，京东云不仅是政府、企业、家庭数字化转型全生命周期合伙人，并基于人工智能、大数据、云计算、物联网、区块链、隐私计算等技术，通过数智化全链条技术服务，助力千行百业数字化转型，激发产业无限可能。