2024.10.23-Mochi 1:最佳开源视频模型

1、Mochi 1:最佳开源视频模型

开源可商用,效果媲美可灵、Luma、Runway等闭源模型,只不过目前需要4个H100才能运行,已经有人在做量化版本。

在线使用:https://www.genmo.ai/play

模型:https://huggingface.co/genmo/mochi-1-preview

twittervid.com_genmoai_694074.mp4

2、Runway推出Act-One功能

输入视频,可以同步表情和嘴型,自由更换角色、画风和背景。真人出镜,用这个功能就能拍动画片或者特效电影了。遥想年初的时候,AI视频转换的技术方案还是使用插帧和Ebsynth等技术,也只能使人物画风改变一点点、画面尽量不抖动,如今已经实现影视特效的效果了。

twittervid.com_notiansans_125c6b.mp4

3、ideogram推出画布功能

支持局部修改(inpaint)、扩展(outpaint)、写艺术字,而且支持上传多张图片到一张画布中,从而能实现真人和动漫同屏,堪称文字操控版Photoshop,效果非常好。下图左侧是原图,右图是画布中编辑后。

使用地址:https://ideogram.ai/canvas

image.png

4、11 Labs推出声音设计功能

通过文字生成声音,例如一个老法师的声音,可以完全规避版权问题。后续会提供API。

官方介绍:https://elevenlabs.io/voice-design

twittervid.com_elevenlabsio_a83425.mp4