模型下载地址:https://huggingface.co/damo-vilab/dreamtalk
其实这项技术与去年10月19日,Meta发布的通过MEG(另外一种大脑活动检测工具)重构人类大脑成像过程有点类似。都是通过EEG、MEG等工具捕获大脑微弱活动电流,检测这些磁场变化,然后获得脑部活动数据。
MEG,全称为脑磁图(Magnetoencephalography),是一种神经成像技术,用于测量大脑活动中产生的极微弱的磁场。MEG能够提供关于大脑功能的空间和时间信息。
此外,个人版还支持类 Siri 的悬浮语音交互,用户可以通过语音与 AI 工具进行交互。
为了解决这一问题,著名人工智能教授李飞飞团队推出了Wild2Avatar,这是一种专为视频中被遮挡人物设计的神经渲染方法。