大家好，这里是和你们一起探索 AI 的花生~
大家好，这里是和你们一起探索 AI 的花生~ 之前为大家推荐过一个 AI 神器 Meshy，可以通过文本生成一个完整的 3D 模型，今天要说的 Genie 也是一个 3D 模型生成工具，但生成的模型更精致逼真，还可以修改表面材质。
Dream Machine 支持通过英文提示词以及图像生成时长 5 秒、分辨率 1024 的高清流畅视频。工具目前对所有公众开放，每个用户每月有 30 次的免费生成额度，但生成结果不可商用。进入网页后点击右上角的「Try Now」，用邮箱注册一个账号，登录后就可以使用了。
Dream Machine 网站主页
Dream Machine 的操作界面非常简单，没有视频比例、镜头运动、运动速度这些选项，只有提示词输入框和图像上传按钮，文生视频的默认比例是 16:9，所以上手使用非常简单。用户可以在 「Account」内查看自己的剩余的使用次数，由于免费用户的优先级会低于付费用户，所以在拥挤时段提交生成任务后，需要耐心等待一段时间才能得到结果。
Dream Machine 生成界面
虽然 Dream Machine 目前的生成时长只有 5 秒，远不及 Sora 等模型的 60s 的长度，但是它生成的质量的确惊人，在运动速度和动作连贯度上基本到达了和真实世界一致的水平，不再像之前的模型那样容易出现画面静止和慢动作。比如下面的这个 “烟花绽放” 的效果就是直接通过文本生成的，效果非常自然。
而通过与 Runway 和 Pika 的生成效果进行对比，我们可以更直观地感受到 Dream Machine 的优点。在处理包含人物的场景时，Runway 和 Pika 生成的动态微小有限，人物动作也很迟缓；而 Dream Machine 的动态则非常明显，处理人物行走姿态时非常流畅自然，甚至还能自动补上一些新的画面。
与文生视频相比，Dream Machine 的图生视频功能目前更受欢迎。一方面是因为文本生成的视频画面在质量上不如 Midjourney 这样的专业出图工具好，另一方面是因为 Dream Machine 对物理和人物运动有非常深入地理解，知道下一步应该生成什么动作，因此可以根据图像生成连贯的新内容。
在处理图像的过程中，Dream Machine 依旧能保持较高的图像质量，包括人物的形象也能保持稳定一致，不会出现严重的扭曲模糊，这一点有效提升了 AI 视频创作的质量和效率。有网友尝试用 Dream Machine 来为一些经典的图片添加动态，得到的效果也很有意思。
虽然 Dream Machine 目前没有控制镜头运动和物体运动方向的选项，但我们可以在提示词中加入与运动方向或拍摄手法相关的提示词，比如 "The yellow rectangle is moving from left to right（黄色矩形从左向右移动）" 、 “ High Angle shot（俯拍）”，来实现想要的效果。
而且 Dream Machine 模型本身对场景的理解也非常不错，能生成有趣的镜头运动，而不仅仅是静止的角度。
比如根据一张自拍的图像+“Took a selfie” 的提示词，Dream Machine 会自动生成包含 “手指点击按钮”、“挥手展示背景”、“旋转镜头” 等动态的片段，经后期拼接到一起、加上一些 UI 图标，看起来就像人物真的在直播一样；以及生成模特在 T 台走秀的场景时，镜头会从下慢慢上移，最后稳定跟随人物的上半身，可见 Dream Machine 对现实世界的模仿是非常到位的。
Dream Machine 生成的视频还有 2 个非常有意思的点，一是能自动生成画面中不存在的场景，这是之前的视频生成模型都没有的；二是生成的视频中如果包含角色，尤其是 3D 卡通角色的话，就很有可能会被加上嘴型动作。这可能是因为 Luma AI 用了很多电影来训练模型，这给图生视频带来更多的惊喜。
除了写实风，Dream Machine 在处理动漫、3D 卡通这样的风格化图像时，效果依旧非常稳定，可以用来制作一些高质量的动图。而且它也支持直接通过文本生成卡通、3D 卡通风格的视频内容。
基于 Dream Machine 在各项性能上的优化，再加上现在已经非常成熟的 AI 图像生成和 AI 音频生成技术，让 AI 视频在整体质量又比之前提升了不少，一些写实风的视频甚至能达到以假乱真的效果。不过 Dream Machine 目前也有一些小缺陷，比如视频结束时依旧会出现一些变形，或者生成运动姿势不正确等，另外不能手动设置视频画幅比例我感觉也不太方便，期待官方能在后续优化这些问题。
大家好，我是花生~ 备受期待的 Stable Diffusion 3（以下简称 “SD3”）终于向公众开放了，作为 Stability AI 迄今为止最先进的文本到图像开源模型，SD3 在图像质量、文本内容生成、复杂提示理解和资源效率方面有了显著提升，今天就为大家详细介绍一下 SD3
大家好，这里是和你们一起探索 AI 的花生~ 动画制作对很多人来说应该都是一项非常专业且复杂的工作，需要学习专门的知识，掌握特定的工具，并且投入大量的时间精力才能得到成果，不过最近出现的一款 AI 动画制作工具 ToonCrafter 则有希望改变这一现状。
优设 推荐官
2012年成立至今，是国内极具人气的设计师交流学习平台
优设是国内专业设计师平台，2012年创办至今，作为行业风向标，我们13年来专注于设计师创作者的学习成长交流。 通过优设网、优优教程网、优创网分别沉淀优质内容。是一家集齐媒体、内容、服务的多元化平台。MCN矩阵@优设AIGC 在微博、微信、小红书、抖音、B站布局，全网粉丝过千万。