1、Mochi 1:最佳开源视频模型
开源可商用,效果媲美可灵、Luma、Runway等闭源模型,只不过目前需要4个H100才能运行,已经有人在做量化版本。
在线使用:https://www.genmo.ai/play
模型:https://huggingface.co/genmo/mochi-1-preview
twittervid.com_genmoai_694074.mp4
2、Runway推出Act-One功能
输入视频,可以同步表情和嘴型,自由更换角色、画风和背景。真人出镜,用这个功能就能拍动画片或者特效电影了。遥想年初的时候,AI视频转换的技术方案还是使用插帧和Ebsynth等技术,也只能使人物画风改变一点点、画面尽量不抖动,如今已经实现影视特效的效果了。
twittervid.com_notiansans_125c6b.mp4
3、ideogram推出画布功能
支持局部修改(inpaint)、扩展(outpaint)、写艺术字,而且支持上传多张图片到一张画布中,从而能实现真人和动漫同屏,堪称文字操控版Photoshop,效果非常好。下图左侧是原图,右图是画布中编辑后。
使用地址:https://ideogram.ai/canvas

4、11 Labs推出声音设计功能
通过文字生成声音,例如一个老法师的声音,可以完全规避版权问题。后续会提供API。