当时,爱奇艺客服表示,黄金会员可以在电脑、平板和手机端使用,同时可使用使用480P清晰度进行投屏;若需要更高清晰度投屏,需要开通白金会员或在电视端上观看播放。
这一功能的背后是阿里通义实验室自研的视频生成模型Animate Anyone。在Github上,该项目的Star数短短数日就超过1万,被认为是近期大模型领域最受欢迎的大模型算法之一。
为了解决这一问题,著名人工智能教授李飞飞团队推出了Wild2Avatar,这是一种专为视频中被遮挡人物设计的神经渲染方法。
模型下载地址:https://huggingface.co/damo-vilab/dreamtalk
另外,DreamTalk还具有说话风格预测的功能,能够根据语音预测说话者的风格,并同步表情,使得动画更加贴近原始音频。此外,该框架适用于多种场景,可以用于歌曲、不同类型的肖像,甚至在嘈杂环境中也能表现良好。