开源最强数字人Hallo2

Hallo2简介

在视频游戏、虚拟现实、电影电视制作、社交媒体和数字营销等领域，肖像图像动画技术一直是个大热门。但是，传统的方法是通过参数化模型来生成说话的人像，这就像是让一个机器人去模仿人类的表情和动作，总是感觉差那么点意思。

而Hallo2的出现，可能会改变这一切！Hallo这个端到端模型，就像是个魔术师，直接从声音驱动生成视频，无需复杂的参数化中间表示和额外的动作输入。它采用了分层音频驱动的视觉合成模块，通过分层交叉注意力操作，让嘴唇、面部和头部的动作更加自然丰富。

技术架构：

Hallo的网络架构整合了各种高科技元素，包括基于扩散的生成模型、基于UNet的去噪器、时间对齐技术和参考网络，这些都是为了让动画的质量和真实感更上一层楼。

全局运动可控性：Hallo利用分层面部特征注意力机制，能针对性地控制口型、表情和动作的运动强度，大幅提升人脸动画生成的可控性。

应用前景：从影视制作到游戏与虚拟现实，再到教育领域，Hallo都能大显身手。它不仅能提高制作效率，还能实现更高质量的动画效果，增强用户的沉浸感和参与感。

离线懒人包来了

老规矩，大家自行在本地部署比较麻烦，我已经为大家制作好了一款一键整合包了，下载到本地解压即用。

大家下载解压到本地后，双击“一键启动.exe”，项目会自动打开浏览器运行。如果没有自动打开浏览器，请自行复制网址“http://127.0.0.1:7860/”在浏览器打开，系统就会自动运行并打开一个简单的用户界面。

使用教程：

上传素材图片，上传素材音频，可以自由调节参数，点击“立即运行”按钮。稍等片刻，该工具会根据我们提供的素材，来生成数字人视频啦~以下是实测生成的视频，效果还是蛮不错的，感兴趣的朋友，可以下载试试~

注意事项：

①显卡要求：建议使用至少10GB显存的英伟达显卡，而且建议把上传的音频拆分到3秒一下，以减少生成时间。

②软件路径、图片和视频文件的名称和路径都不能包含中文，不然可能会出错。另外，计算机系统的用户名也不要设置成中文，不然也可能会出现问题。

③系统要求：支持Windows 10和Windows 11。

资源链接：https://pan.quark.cn/s/b473e56fdeeb