2024年2月16日凌晨(美国时间2月15日),OpenAI发布了“文生视频”(text-to-video)的工具,Sora 是由 ChatGPT 创建者 OpenAI 开发的文本到视频 AI 模型。“文字转视频”是指Sora将文字提示转化为短视频片段。OpenAI 本周发布的批次确实令人惊叹。
OpenAI SORA 的六大优势
OpenAI SORA 是一款基于Transformer的扩散模型,能够生成逼真、高质量的视频。根据 OpenAI 发布的技术报告,SORA 具有以下六大优势:
1. 准确性和多样性
SORA 可以准确地解释长达 135 个单词的文本描述,并生成具有各种场景和人物的高质量视频剪辑。它涵盖了广泛的主题,从人物和动物到郁郁葱葱的风景、城市景观、花园,甚至是水下的纽约市,可以根据用户的要求提供多样化的内容。
2. 强大的语言理解
OpenAI利用 Dall-E 模型的 re-captioning(重述要点)技术,生成视觉训练数据的描述性字幕,不仅能提高文本的准确性,还能提升视频的整体质量。此外,与 Dall-E 3 类似,OpenAI 还利用 GPT 技术将简短的用户提示转换为更长的详细转译,并将其发送到视频模型。这使 SORA 能够精确地按照用户提示生成高质量的视频。
3. 以图/视频生成视频
SORA 除了可以将文本转化为视频,还能接受其他类型的输入提示,如已经存在的图像或视频。这使 SORA 能够执行广泛的图像和视频编辑任务,如创建完美的循环视频、将静态图像转化为动画、向前或向后扩展视频等。
4. 视频扩展功能
由于可接受多样化的输入提示,用户可以根据图像创建视频或补充现有视频。作为基于 Transformer 的扩散模型,SORA 还能沿时间线向前或向后扩展视频。
5. 优异的设备适配性
SORA 具备出色的采样能力,从宽屏的 1920x1080p 到竖屏的 1080x1920.两者之间的任何视频尺寸都能轻松应对。这意味着 SORA 能够为各种设备生成与其原始纵横比完美匹配的内容。而在生成高分辨率内容之前,SORA 还能以小尺寸迅速创建内容原型。
6. 场景和物体的一致性和连续性
SORA 可以生成带有动态视角变化的视频,人物和场景元素在三维空间中的移动会显得更加自然。SORA 能够很好地处理遮挡问题。
对于我们ETSY卖家来说有哪些潜在的积极影响:
高质量产品视频: SORA 可以根据文本描述生成短片、逼真的照片级视频。这对 Etsy 卖家来说可能是一个重大改变,因为众所周知,高质量的产品视频可以提高转化率。想象一下,无需昂贵的摄像设备或技能,即可为每个产品创建引人入胜的定制视频。我们ETSY卖家只要生成15S的产品视频就行了,以后我们不用自己拍视频了。
SORA的生成的视频不仅高效,而且可以比我们自己卖产品视频效果更好。
增强的产品列表: 除了产品视频之外,SORA 还可用于创建动态产品图片、动画,甚至个性化的 3D 模型。这可以使产品列表更加美观和信息丰富,从而增加互动和销售量。
我们可以用以图生图的方式,把800X800的网络图片转化成高质量的2000X2000的图片,从而效得editor'pick的青睐。众所周知,我们的这个Eidtor的流量是相当大的,如果要想进入这个流量池,高清图片是必不可少的一个部分。
改善营销和广告: SORA可用于针对特定产品或人群生成定向视频广告。它还可以创建个性化产品推荐或营销材料,以迎合个别客户的需求。这有可能提高品牌知名度和客户获取量。
提高效率并节省成本: 创建高质量的视频和营销材料可能既耗时又昂贵。SORA 可以自动执行许多流程,从而为卖家腾出时间和资源专注于业务的其他方面。
打造自己的YTB频道或Pin站的board:有了SORA这个这个神器,我们可以快速的打造自己的红人形像,从来可以节省不少红人营销的费用。
像我们做ETSY的卖家, PIN站是完美配合ETSY产品的,我们可以不断用SORA生成高质量的产品视频,抢站更多的PIN站流量。打造自己的红人频道。。。
如何使用SORA?
虽然网络上面吵的很热闹,但是OPENAI官方还没有发布开发SORA的消息。只是一少部分人士在内测中。所以市面上那些SORA的APP,都是套壳的,假的,不要被骗了。
官方渠道获取内测资格:
根据REDDIT的朋友们分享的经验,可以加入OPEN AI的论坛这样子可以机会获取内测资格。
官方网址:https://forum.openai.com/
如果你是技术大牛,可以加官方的RED TEAM从来获取内测资格。
官方网站如下:https://openai.com/form/red-teaming-network
本文链接:http://www.awyerwu.com/13303.html ,转载需注明文章链接来源:http://www.awyerwu.com/
- 喜欢(0)
- 不喜欢(0)