如何做面向未来的设计——数字人智能助手的设计实践

现任百度资深用户界面设计师,负责数字人智能助手度晓晓的设计工作以及百度APP重点设计课题研究工作。在职期间从0到1打造出国内首个数字人智能助手度晓晓,同时也负责过多次百度APP首页改版项目,以及百度APP界面动效、深色模式等设计课题的研究与架构。从业10年,在交互、视觉、前端、管理领域均有工作经验。曾就职于阿里巴巴国际站用户体验部,毕业于中国传媒大学广告学院。获得过德国红点、德国iF等6项国际设计奖项,以及20项发明或图形用户界面专利。数字化变革加速的时代,设计师应不断拓宽视野,勾勒远景,解决障碍,促使科技的发展能够真正更好地服务于人类。

今天我们正处于数字化变革的时代,智能助手逐步出现在人们的生活中,并且已经成长为人类与数字世界互通的接口之一。那么未来的智能助手将会怎样发展,将如何融入人们的生活呢?众多的小说与电影已经为我们描绘了未来各式各样的智能助手形态,相信每个人也会有自己独到的见解。而在真实的设计实践中,概念与想象是第一步,更加重要的是通过系统化的方法去探索答案。在百度的AI数字人智能助手——度晓晓的设计实践中,我们将着眼未来的前瞻设计方法与问题驱动的设计思维结合,面向下一发展阶段,打造出国内首个可交互式、IP化的数字人智能助理。度晓晓也因其真实落地的设计创新,获得了两项2021德国红点奖、两项2021德国iF设计奖、2021意大利A'Design银奖、2021韩国K Design特等奖。本工作坊将首先介绍人机交互与智能助手的发展趋势,为听众梳理行业前进脉络。其次讲授度晓晓这一AI数字人智能助手的具体设计经验,包括数字人自然交互系统、数字人多模态交互设计方法及实践练习、数字人IP形象设计经验等。然后为听众提炼通用的前瞻设计性设计思维与设计方法,包括前瞻设计分析模板、设计师的技术思维、设计价值观等。最后介绍数字人智能助理的制作成本、技术要点、人才构成等产业情况。希望通过本工作坊,为设计师带来从思维到设计再到落地的全方位数字人智能助手设计经验。更重要的是帮助设计师掌握通用的前瞻性设计思维与设计方法,帮助设计师拓宽视野与思维边界,培养宏观思考意识与习惯,从而能够更好发挥设计的价值。工作坊主要内容:1、看懂趋势1.1 大局-人机交互(HCI)的发展趋势1.2 赛道-个人智能助手(IPA)的发展趋势2、精研设计2.1 数字人IPA多模态交互设计经验2.1.1 厘清问题2.1.2 建立知识图谱-数字人自然交互设计系统a. 数字人交互的环境差异b. 数字人多模态交互因素与模型解构c. 数字人多模态交互背后的技术支撑2.1.3 构建范式-移动端数字人IPA SCCC 界面架构2.1.4 形成方法-导演式与策略式2.2 实践体验-选择一个数字人交互场景做具体交互设计2.3 数字人智能助手IP化的意义与设计经验3、提升思维3.1 前瞻性设计的通用思维与方法3.2 设计师应具备的技术思维3.2 设计的价值观4、读透行业4.1 价值前景4.2 产业构成4.3 团队构建

1、工作坊内容与环节介绍2、讲述:人机交互与智能助手的发展趋势3、讲述+练习:AI数字人智能助手设计经验与方法4、讲述:提炼做前瞻性设计的通用思维与方法5、讲述:数字人智能助手产业构成与团队构建6、回顾总结与互动

1、对前沿交互、数字人、智能助手感兴趣的设计师2、智能助手、数字人、虚拟偶像行业的从业者3、对智能助手、数字人、虚拟偶像感兴趣的朋友

1、收获人机交互行业发展趋势解读2、收获数字人智能助手的第一手设计经验3、收获做前瞻性设计的通用思维与方法4、收获构建数字人智能助手设计团队的经验

国际体验设计大会由IXDC主办,是全球领先的用户体验创新盛会。每年数以万计的国际专业人士聚集在一起,碰撞思想,交流学习,让世界更美好。

THE END
0.a16z最新报告:AI数字人应用层即将爆发,或将孕育数十亿美金市场目前,AI 数字人还无法与周围环境互动。近期一个可行的目标是使它们能够在广告中展示产品。Topview在这方面已经取得了一些进展(请参考以下视频,了解他们的实现过程和效果),我们期待着随着模型技术的不断提升,能够实现更多互动功能。 更多实时应用 未来,AI 数字人将在实时互动领域拥有广阔的应用前景。 例如,我们可以与 jvzquC41zkk/kwkqs0io1jwvkerf1lie3h;ehnk577?1:<;25e;4g9
1.平台完成行业首个超400万面高精度模型实时互动直播引领虚拟人进入穿元境科技在完善AI智能生成虚拟形象技术的同时推出了首个虚拟人智能生成与驱动的Saas平台-元享,在解决了高效生成数字虚拟形象的同时聚合了多类型化的驱动方式,满足对虚拟人日常的视觉化内容生成与输出:口播内容生成、线上互动直播、多IP实时互动、影视内容制作、游戏角色动画生成等。利用自研Saas平台中聚合自研算法与驱动jvzquC41hktbplj0gcyuoxsg{0ipo8f14283397847:13A::464ivvq
2.「奇妙元」实现技术新突破:AI数字人自如行走,逼真度再升级!随着通过结合「魔音工坊」的多样化发音人和「奇妙元」的实景行走数字人技术,我们成功塑造一个具备自由行动能力和掌握多音色多语言的AI数字人。这一创新成果将在多个行业中发挥重要作用,推动行业进步和革新。 教育领域的个性化教学 在教育领域,AI数字人能够作为数字导师,提供个性化的学习体验。通过定制化的学习计划和互动式教学jvzquC41zwkrk~3eqo57;?:65593387:;7997;=
3.【培训课件】AI数字人实时互动技术在文旅场景中的创新应用.pptxAI数字人实时互动技术在文旅场景中的创新应用 数字人技术原理数字人的定义以及wav2lip模型的训练过程,和模型所有的优势02前言介绍从2019年开始创办贵州猿创科技到现在从事数字人的研发。01数字人+文旅场景文旅景区的痛点,以及为什么要选择文旅作为第一个业务板块03系统体验与展示展示技术细节,体验文旅数字人的功能情况。jvzquC41oc~/dxtm33>/exr1jvsm1;5471672;4726:44;7632734:90ujzn
4.即构科技AI数字人伴学赋能千人大班课,实现个性化1对1互动现今基于即构AI数字人伴学互动方案能力,老师可以在授课中灵活插入多个随堂演练环节,数字人老师可以在大班课上与所有学生同时展开 1 对 1 的口语互动,并根据回答即时给出个性化的纠错、引导和鼓励。 依托AI Agent 技术,AI数字人老师具备实时语音纠错能力,能够在学生用英文作答时即时指出发音或语法问题,并配合口型示范jvzquC41iculcx3gqn4dp8l|z{5zzmy142862B4v42862B53a4<99>:40unuou
5.AI数字人交互系统开发智慧迎宾实时交流3D建模人机互动系统开发采用手势识别算法和表情识别算法,解析用户的动作和表情含义,使数字人能够根据用户的肢体语言进行互动,如用户挥手时,数字人挥手回应;用户皱眉时,数字人询问是否遇到问题。 2.3 实时渲染与优化技术 为确保数字人在实时交互过程中的流畅展示,采用实时渲染引擎,如 Unity 或 UnrealEngine。通过优化模型面数、纹理压缩、LOD(jvzquC41o0726?<0eqs0r{tfwez0f=64399697mvo
6.龚俊数字人“霁风”正式面世蔚海灿娱打造具有全球影响力的数字人以霁风为例,首先,他已经具备了领先行业的超高写实度效果,为与用户的互动提供了“真实”属性;其次,“霁风”制作将实时渲染能力融入数字人制作管线当中,在保证高写实度的前提下,将数字人制作效率大幅提升;再次,霁风采用了实时引擎进行输出,保证了后续所有内容均可完成实时渲染,这也就意味着他能够与用户进行实时的交流jvzquC41yy}/frfpmgpj0lto1pkxu8;465
7.千元内就能“专属”6元就有AI分身陪聊数字人离大众越来越近了本报记者 赵语涵 人工智能公司小冰上线首批明星网红数字克隆人,内测用户以每月6元的价格可与网红AI克隆人互动聊天;4月,腾讯云公布小样本数智人生产平台,花费千元可自行制造数智人;创业公司聚力维度近期计划在商城上线数字人主播,千元以内即可获得能实时捕捉真人主播表情动作的虚拟数字人……元宇宙、大模型等板块火热让数字人产业不断升温、技术jvzquC41uqijg}~0fd}/ew4u{uzfo8724551886712;:3>62484tj}rn
8.深度解析:打造基于大型模型的实时互动3D数字人当然,此刻运行的数字人是无法互动的,原因是她目前只有“躯体”,还缺乏真正的智慧告诉她怎么与你互动,这也就是后端的数字人控制器。 PART 03 赋予智慧:构建数字人的控制器 我们把前面的基本原理图稍稍细化下,这里的黄色部分就构成了数字人的控制器: 控制器作为数字人的大脑中枢,承担着借助各种AI技术来与真实人类完jvzquC41dnuh0lxfp0tfv87623e96;5642=0c{ykenk0fnyckny03=6::7=13
9.构建AI实时音视频互动声网这套方案听看思说样样精通声网作为全球实时互动云行业的开创者,在音视频领域积累了深厚的技术优势与场景实践,通过与客户在 AIGC 场景的深度合作,探索出了一套实时多模态对话式 AI 解决方案,该方案以语音为核心,支持视频扩展,实现文本/音频/图像/视频的组合输入&输出,通过丰富的功能构建真实、自然的AI语音交互体验。 jvzquC41pg}t0v~ftk|ft|3eqo521:5241712;5::0nuo
10.“数字人”鏖战5大跨年晚会,AR/XR虚拟技术2023年将惊艳破“圈在互动节目《制造浪漫》中,以沈梦辰、范世琦为原型的虚拟人康康和果果,首次实现两个数字人同框互动,每个机位都配备了虚实融合系统来渲染和播控虚拟人。表演采用全流程实时驱动技术,包括高精度实时动捕、实时面捕、实时灯控系统、AR实时渲染等,并结合特效与粒子效果,极大地提升了数字人的实时展示效果。 jvzquC41yy}/f6ftvu4dp8ftvkimg8ftvkimghnphq5lg‚4OVK}OFV5OFi;OFnI56nptL‚5ey0nuou