Sora团队首次专访:Sora就是太强了 所以不让普通人用_全球资讯热分享网(专注热点收集平台)

Sora团队首次专访:Sora就是太强了 所以不让普通人用


Sora团队首次专访:Sora就是太强了 所以不让普通人用

  2024-03-13 13:07:40     简体|繁體
https://refenxiang.com/1053336.html

数字货币网报道:

作者:Josie;来源:新硅NewGeek

前两天外媒对Sora核心团队做了次专访,看了下原视频,约等于什么都没说,场面神似发改委马科长讲话。

用网友的话来说,就像镜头外有一个律师拿着枪对着这帮人。

Sora已经发布快一个月了,刚发布时Sora惊为天人,带给人们无限遐想,甚至有不少人表示AGI就要来了。

然而,目前为止只有少数人用上了Sora,再好的东西用不上,久而久之人们也就失去了兴趣。

就在人们把Sora翻得底朝天,该聊的都聊完了,好像实在没活了,OpenAI派了几个人出来接受一下采访。

16分钟的专访里,Sora的核心团队成员说了很多内容,但都是一些已知的内容,没有什么新的,信息好像还不如Sora的技术文档多

来看看外国人是怎么打太极的。

这次访谈的三位Sora核心成员分别是Bill Peebles、Tim Brooks和Aditya Ramesh。

首先是大家最关心的问题,我们什么时候可以用到Sora?

别急普通人短期内还用不上。”

Sora成员表示,Sora目前尚未向公众开放,也没有具体的时间表。OpenAI正在收集用户反馈的阶段,希望进一步聊天人们如何使用Sora,有哪些安全工作要做。

既然用不了,那么探究一下,Sora是如何实现的。

Sora团队说:Sora是一个视频生成模型,其工作原理是分析大量视频数据并学会生成视频。具体工作方法融合了扩散模型(如DALL-E)和大型语言模型(如GPT系列)的技术。架构上Sora类似于介于两者之间,训练方式类似于DALL-E,但在结构上更像GPT。

结构上更像GPT这一点在Sora刚出现的时候就有不少人分析过,这也算Sora的一大技术特点。

接下来,是同样让人好奇的,Sora的训练数据到底来自于哪里?

在官方发布的Sora生成视频中,无论是咖啡杯中的海盗船,还是东京街头行走的女性,都在表示Sora似乎理解了许多世界的物理规律。

之前不少民间说法讨论,Sora极有可能在数据集中添加了用UE5生成的文本、视频当作合成数据。

面对这样的问题,Sora成员Tim Brooks没有明确回应,打了一个太极,表示不方便说得太细,但是他透露,大体上使用的是公开数据和OpenAI被授权使用的数据,并分享了一个“技术创新”。

以往,不论是图像还是视频生成模型,通常会以非常固定的尺寸进行训练,比如只有一个分辨率的视频。

在Sora的训练中,他们将各种各样的图片和视频,不管是高宽比、长短、高清还是低清,都分割成了一小块一小块。研究人员可以根据输入视频的大小,训练模型认识不同数量的小块,这也让Sora能更灵活地学习各种数据,并生成出不同分辨率和尺寸的内容。

这一技术在Sora技术文档里也有提过,就是所谓的patch。

大语言模型建模时把文本拆成了以token为最小单位,而视频大模型中的token就是patch。

这一技术并不是OpenAI创造的,当OpenAI宣布使用了该技术时还引起了讨论,为什么OpenAI能就能通过别人的技术造出好的AI产品出来

主持又问到:你觉得Sora擅长做什么?哪些方面还有所欠缺?比如我看到有个视频里一只手竟然长了六个手指。

Sora团队先扬后抑的表示到,Sora擅长写实类视频,并且可以生成1分钟时长的视频,很强。但仍然存在一些问题,比如手部细节(所有AI的噩梦)摄像机轨迹、物理现象变化等。

除此之外,Sora团队还介绍了一些其他酷炫的功能,比如通过除prompt之外,用视频合成的方式生成视频。这实现了在完全不同主题和场景构成的视频之间无缝过渡。

在OpenAI的Tiktok上就有无人机变成蝴蝶在斗兽场转化的珊瑚礁中飞翔的视频。

无论在技术还是体验上,都与原先的视频生成模型完全不同。Aditya Ramesh更是表示,他们做的事情,就是先模拟自然,再超越自然!

目前为止,OpenAI在Tiktok上的AI生成视频都使用了配音,而不是AI无缝生成声音。Sora团队表示,AI声音暂时不是他们考虑的事情,当务之急还是在于视频生成,让它实现更长的时间,更好的画质和频率。

但不知道随着Pika Sound Effects功能的发布,Sora加上声音是否指日可待。

被主持人问到,Sora下一步发展方向时。Sora成员Tim Brooks表示,在真正发布之前,Sora还有两方面的工作要完成:

首先是获得更多用户的反馈,了解Sora如何给人们带来价值。比如有用户希望对生成的视频有更多精细、直接的控制,而不单单是prompts。

另一方面,Sora安全工作需要加强,OpenAI会全面考虑可能带来的各种影响。目前,正在训练应用于视频的溯源分类器,实现识别视频是否由AI生成,并且为每个Sora生成的视频都打上了水印。

此外,Sora团队表示,AI生成视频也带来了许多机遇,它可以大幅降低从创意到成片的成本,一个人拍一部电影完全有可能实现。

更令他们激动的是,随着AI新工具的出现,会有人创造出全新的东西,不断推进创造力的边界,将不可能变成可能。

但打住,这只是科学家们美好的幻想。毕竟对于普通人来说,离真正使用上Sora都要等上挺长一段时间。

而且,Sora成员透露。AI通过从视频数据中学习,将不仅仅在视频创作方面发挥作用。像GPT这样的模型,虽然很聪明,但如果它们无法像我们一样“看到”这个世界,那么它们就会缺失一些信息。类似Sora的模型正在解决这一问题。

这是证实AGI要来了吗?

最后主持人问了一个有意思的问题,Sora生成一个视频需要多长时间?

“取决于各种情况,但你可以离开,去喝杯咖啡,然后回来它还在处理中,反正就是很久。”

以上就是Sora团队的采访内容,简单总结一下就是:Sora很厉害,可以看到世界,正因如此,我们还不能让普通人很快就用到,还有很多安全工作要做。

Umm,没活可以咬打火机,没必要硬上的。



编辑:web3528btc 来源:加密钱包代币

分享到:

  • 上一篇
    下一篇

  • 分享知识|收获智慧

    全球资讯热分享网(专注热点收集平台)
    手机查看(二维码扫一扫)

    全球资讯热分享网,最有影响力热点信息分类网站,主要集合图文、知识、日常、娱乐、财经、文化、生活、致富、女性、地区、科技等多类信息分享交流,免费提供最有价值的头条信息平台。
    « 2024年 » « 11月 »
    123
    45678910
    11121314151617
    18192021222324
    252627282930

    最新资讯

    浦发信用卡逾期高额还款怎么算?罚息太高这样减免
  • 2024-11-24 09:25:42

     

    微粒贷逾期外访的真的会来吗?详细解析
  • 2024-11-24 09:20:38

     

    [代运营]中医养生 食疗 血糖贴 加粉 量大 需要可聊
  • 2024-11-24 09:15:34

     

    [代运营]百度(baidu)搜索肺大泡。 胆结石软文加粉量 成本低 量大稳定供量, 专品三年运营经验
  • 2024-11-24 09:10:30

     

    [代运营]巨量ad二类7+、巨量本地推14+、百度(baidu)40+ 高返点开户+代运营服务不收服务费娜。
  • 2024-11-24 09:05:26

     

    [代运营]托管&代运营 [代运营]专业代运营 肝病 痛风 养生 石斛原浆 眼袋 骨病 肺结
  • 2024-11-24 09:00:22

     

    京东白条逾期两年还不上怎么办?会带来哪些后果呢?
  • 2024-11-24 08:55:17

     

    招商银行信用卡要上门面签什么意思?面签之后审核要多久?
  • 2024-11-24 08:50:13

     

    助推养老服务高质量发展,北京中医药医养协会与爱连健康签订战略合作协议
  • 2024-11-24 08:45:09

     

    度小满催收电话可以不接吗?会打家人电话吗?
  • 2024-11-24 08:40:05

     

    招商银行信用卡逾期还本金流程是什么?详细情况解析
  • 2024-11-24 08:35:01

     

    典跃集团红珊兰抗过氧化氢净化墙板 亮相慕尼黑上海分析生化展
  • 2024-11-24 08:29:57

     

    [代运营]千川4公1.5本地推16公14ad7品牌单品专cid高点收店铺报白解封强开专卖店旗s
  • 2024-11-24 08:24:52

     

    [代运营]广点通食疗粉 可切5000+ 精准质量高
  • 2024-11-24 08:19:48

     

    [代运营]巨量ad二类7+、巨量本地推14+、百度(baidu)40+ 高返点开户+代运营服务不收服务费尤。
  • 2024-11-24 08:14:44