放大招!百度复旦视觉生成模型Hallo2或将落地数字人等场景
来源:今日热点网 发布时间:2024-10-25 13:23:14

近日,百度联合复旦大学等发布Hallo2,一个可以生成长达数小时且分辨率为4K的人物动画的视觉模型。Hallo2目前已经在GitHub台开源,供全球开发者免费使用和研究,预计将促进视频生成技术的广泛应用和发展。

Hallo2发布后在海外引发了不小的震动。有人惊叹视频生成的长度和分辨率,也有老用户从Hallo第一代模型就被圈粉。

还有对Hallo2开源模型和代码的认可。

Hallo2备受关注,很重要一个原因是百度和复旦的研究团队解决了人像视频生成一个很大的痛点:如何提升视频生成的时长和质量。

一直以来,生成高质量的人物动画需要耗费大量的时间和人力成本。而百度与复旦联合发布的Hallo2的出现,有望彻底改变这一现状,为数字人、电影制作、虚拟助手、游戏开发等领域带来革命性的变化。这不同于Sora等AI视频生成模型遭遇到的发展瓶颈,Hallo2模型解决的问题更垂直,可落地空间更大。

Hallo2是目前首个实现长达一小时、4K分辨率的音频驱动人像动画生成模型。通过创新的图像块丢弃、噪声增强和时间对齐等技术,Hallo2解决了长时视频生成中的外观漂移和视觉不一致问题,支持灵活的语音与文本控制,生成质量达到业内领先水平。

Hallo2继承了前代Hallo模型的创新框架,继续采用基于扩散的生成模型和分层音频驱动视觉合成模块,提高了音频与视觉输出之间的同步精度,并经过改进使得各部分的协同作用更加高效,增强了生成动画的质量和真实感。此外,Hallo2 不仅在图像和视频的质量方面有了显著提升,而且大幅增加了动作的丰富性和多样性,可以说为AI驱动的肖像图像动画领域树立了新的标杆。

有行业专家表示,Hallo2的出现,标志着音频驱动的肖像图像动画技术迈入了新的发展阶段。百度基于长期的视觉技术积累,正在瞄准行业痛点进行针对性研究和场景落地,不仅为开发者提供了强大的工具,也为未来各种应用场景下的动画形象创作带来了新的可能性。

目前Hallo2模型已在GitHub上开源,项目地址:https://fudan-generative-vision.github.io/hallo2/#/。

另据悉,除视觉模型外,作为中国最大的AI公司,百度将在11月12日召开百度世界大会2024,展现更多AI方面的应用和技术进展。大会将围绕大模型和AI应用带来五大亮点,除百度创始人李彦宏领衔的主题演讲外,还有100+AI原生应用发布、四场主题分论坛、30+公开课和5000平米AI展区,全方位展示AI应用的落地成果。大会目前已开放免费报名通道,可通过大会官网报名参会。

免责声明:市场有风险,选择需谨慎!此文仅供参考,不作买卖依据。

标签:

猜你喜欢

放大招!百度复旦视觉生成模型Hallo2或将落地数字

近日,百度联合复旦大学等发布Hallo2,一个可以生成长达数小时且分 更多

2024-10-25 13:23:14

“企惠保·雇主责任险”保障升级,微众银行助力普

大力发展普惠保险服务,更好满足实体经济普惠性保险需求,是构建高水平普惠金融体系、推进普惠金融...更多

2024-10-25 12:31:04

信用卡刷新双十一:简单即是诚意

消费左移的浪潮于经济社会转型时悄然起势,在理性消费风向中汹涌澎 更多

2024-10-25 11:44:43

保险极客十周年:“科技改变保险”初心未改,持续

2024年10月21日,是保险极客成立十周年的里程碑时刻。十年间,保险 更多

2024-10-25 11:22:12

海信净水洗碗机C507iMax:行业首创UVC全水路杀菌

在快节奏的都市生活中,年轻人越来越热衷于探索懒人经济,他们热爱生活,喜欢下厨却不想洗碗,尤其...更多

2024-10-25 11:10:16

基金大幅亏损,投资者该如何操作?

在当下反复震荡的市场行情下,亏损时有发生。面对大幅亏损的基金,很 更多

2024-10-25 11:00:43

服务老少新 守好钱袋子 恒丰银行绍兴分行开展反

为积极弘扬中国特色金融文化,恒丰银行绍兴分行深入社区、企业、商 更多

2024-10-25 11:00:58

我在共青创青春 | 谢澎:打造共青城白酒新“名片”

青春扬帆,梦想启航第十一届中国青年创青春大赛(数字经济专项)在 更多

2024-10-25 11:01:08

健全浓香型白酒标准体系,五粮液持续激发“和美”

浓香型白酒作为最早确立中国白酒产品体系标准、名酒品牌最多、企业 更多

2024-10-25 11:05:51

庭院花园设计师的福音 图布斯3D庭院云设计平台

眼下,在各大短视频平台上,回老家生活、对旧房子重新改造的视频一 更多

2024-10-25 11:05:28