揭秘Sora：用大语言模型的方法理解视频(3)
刚才咱们也聊了，说这个“块”是非常接近token的，那么这些块的作用也应该和token差不太多。对于给定的压缩输入视频，OpenAi就直接提取一系列块作为Transformertoken使用，然后这些时空块会被进一步编码并传递给Transformer网络进行全局自注意力学习。最后利用Transformer的强大能力来处理并生成具有不同属性的视频内容。
这一方案同样适用于图像，因为图像可以看作是仅有一帧的视频。基于块的表示方法使得Sora能够对不同分辨率、时长和宽高比的视频和图像进行训练。在推理阶段，可以通过在一个适当大小的网格中排列随机初始化的块来控制生成视频的尺寸。
此外，在Sora模型的介绍页面虽然提到的都是通过文本来生成视频，但Sora还能够接受其他类型的输入，比如图像或视频，以达到图片生成视频、视频生成视频的效果。这一特性使得Sora能够执行广泛的图像和视频编辑任务——例如制作完美循环播放的视频、为静态图像添加动画效果、向前或向后延展视频时间轴等。
实现对物理世界的“涌现”
在长期的训练中OpenAI发现sora模型逐渐拥有了一项新能力，叫做三维一致性。指的是Sora能够生成动态视角的视频。同时随着视角的移动和旋转，人物及场景元素在三维空间中仍然保持一致的运动状态。
这个可能对咱们人类来说没什么，但是对于人工智能来说，还是相当厉害的。人工智能理解三维物理世界，跟人类理解三维物理世界的方式不一样，它采用了一种拓扑结构上的理解。注意，这里的拓扑结构不是计算机的拓扑结构，而是拓扑学中的拓扑结构。拓扑结构是一个几何或空间的抽象描述，用于描述集合中元素之间的连接方式和空间属性，而不考虑具体的度量或形状。它关注的是空间中点与点之间的连通关系以及空间的整体形状，而不是具体尺寸或角度等细节。
热点推送
-
松井股份(688157.SH)：2024年三季报净利润为7123.29万元、每股收益增加0.16元
2024年10月18日，松井股份(688157.SH)发布2024年三季报。 公司营业总收入为5.27亿元，较去年同报告期营业总收入增加1.12亿元，实现5年连续上涨，同比较去年同期上涨26.91%
2024-10-18去年，增加，公司 -
晨化股份(300610.SZ)：2024年三季报净利润为6667.97万元、每股收益增加0.13元
2024年10月18日，晨化股份(300610.SZ)发布2024年三季报。 公司营业总收入为6.85亿元，较去年同报告期营业总收入减少3269.63万元，同比较去年同期下降4.55%
2024-10-18去年，公司，同比 -
宇信科技与厦门资管合资公司完成工商登记，注册资本1000万
蓝鲸新闻10月18日讯（记者张书维）10月18日，金融科技公司宇信科技（300674.SZ）发布《关于与厦门资管共同设立合资公司完成工商登记并取得营业执照的公告》
2024-10-18宇信科技，厦门资管，公司 -
图南股份(300855.SZ)：2024年三季报净利润为2.58亿元、较去年同期下降1.00%
2024年10月18日，图南股份(300855.SZ)发布2024年三季报。 公司营业总收入为10.80亿元，较去年同报告期营业总收入增加1422.32万元，实现5年连续上涨，同比较去年同期上涨1.33%
2024-10-18去年，公司，图南股份 -
广州二手楼市又要涨价？降价成交才是主流
国庆期间广州二手楼市的活跃行情，在国庆后的网签中得以体现
2024-10-18楼市，广州，二手 -
翔港科技(603499.SH)：2024年三季报净利润为3335.90万元、每股收益增加0.11元
2024年10月18日，翔港科技(603499.SH)发布2024年三季报。 公司营业总收入为5.87亿元，较去年同报告期营业总收入增加9294.49万元，实现2年连续上涨，同比较去年同期上涨18.82%
2024-10-18上涨，去年，增加 -
2024北京风能展：不再一味卷新机型，安全、出海话题频提
界面新闻记者｜马悦然 10月16日-18日，2024北京国际风能大会暨展览会在北京·中国国际展览中心（顺义馆）举办，这是每年国内风电行业最为重要的活动，众多企业借此盛会推陈出新
2024-10-18风电，行业，企业 -
港股半导体股多数上涨 华虹半导体涨超4%
每经AI快讯，10月18日，截至发稿，港股半导体股多数上涨，华虹半导体(01347.HK)涨4.48%、中芯国际(00981.HK)涨3.46%、 上海复旦(01385.HK)涨1.82%
2024-10-18半导体，台积电，三季度 -
利好来袭！港股券商股多数走强 招商证券大涨近7%
受益于市场利好，港股券商股多数反弹
2024-10-18中国人民银行，证券，互换 -
世界银行：沙特经济明年将提速 增长率将是今年三倍
根据世界银行最近的一项报告，沙特国内生产总值（GDP）预计今年增长1.6％，到2025年将增长至4.9％，这将是海湾地区最快的增长速度
2024-10-18沙特，2025，世界银行 -
广东建工2024年第三季度工程项目新签订单超300亿元
财中社10月18日电广东建工（002060）发布2024年第三季度工程项目经营情况。截至2024年9月30日，公司新签工程施工项目订单数量为434个，工程施工金额达到306.3亿元
2024-10-18广东建工，工程施工，工程项目 -
深度 | 傲基科技：机构股东上市前退出，利润无法覆盖增长资金“饥渴”
利润无法满足营收规模增长对资金的需求，公司不得不通过银行借款维持业务拓展，且已有机构投资者已经开始退出，留给傲基科技的时间或许真的不多了
2024-10-18傲基科技，贸易，公司 -
永吉股份(603058.SH)：2024年三季报净利润为1.28亿元、每股收益增加0.16元
2024年10月18日，永吉股份(603058.SH)发布2024年三季报。 公司营业总收入为6.10亿元，较去年同报告期营业总收入增加9102.03万元，实现3年连续上涨，同比较去年同期上涨17.54%
2024-10-18上涨，去年，增加 -
中骏：10月21日支付“H0中骏03”的年度利息和回售资金，债券将摘牌
在对部分境内债务和境外债务重组时，中骏集团控股对旗下一只债券进行回售
2024-10-18债券，10，中骏集团控股 -
面对特斯拉FSD入华的智驾竞争，余承东与雷军最新表态
在10月17日举办的2024世界智能网联汽车大会上，华为常务董事、终端BG董事长、智能汽车解决方案BU董事长余承东与小米集团创始人雷军对近期进展做出了回应
2024-10-18特斯拉，余承东，华为 -
比亚迪2025款汉体验：还是那个熟悉的“六边形战士”吗
“汉”车型在比亚迪车型矩阵中一直有独特地位。因此，当比亚迪2025款汉EV及DM-i车型9月上市，市场对这款“六边形战士”充满期待
2024-10-18比亚迪，续航，电池 -
中国中铁于北京成立置业公司 含房地产开发经营业务
e公司讯，企查查APP显示，近日，北京玖樾置业有限公司成立，法定代表人为李江，注册资本为3000万元，经营范围包含：房地产开发经营；物业管理；市场调查（不含涉外调查）；会议及展览服务；非居住房地产租赁；城市绿化管理；建筑材料销售等
2024-10-18中国中铁，北京，房地产开发 -
北路智控(301195.SZ)：2024年三季报净利润为1.40亿元、较去年同期下降14.18%
2024年10月18日，北路智控(301195.SZ)发布2024年三季报。 公司营业总收入为8.13亿元，较去年同报告期营业总收入增加1.04亿元，实现4年连续上涨，同比较去年同期上涨14.65%
2024-10-18去年，公司，同比 -
巴菲特继续减持美国银行，持股比例降至10%以下
10月17日，美国证券交易委员会（SEC）披露的文件显示，巴菲特旗下伯克希尔哈撒韦于10月15日继续卖出美国银行股票，合计卖出869.4538万股美国银行股票，套现3.699亿美元。减持后，伯克希尔哈撒韦还持有美国银行7.663亿股
2024-10-18美国银行，10，伯克希尔哈撒韦 -
理想汽车累计交付突破100万辆
10月18日，据理想汽车消息，理想汽车累计交付突破100万辆
2024-10-18理想汽车，保隆科技，供应商 -
联想推出混合式人工智能优势集
Lenovo Tech World上，联想集团联合英伟达推出面向企业的联想Hybrid AI Advantage（混合式人工智能优势集），将增强此前发布的联想万全异构智算平台的能力，为中国客户带来算力效率提升和成本优化
2024-10-18人工智能，AI，大模型 -
赛维时代(301381.SZ)：股东鑫瑞集泰拟减持1600万，占所持股份近50%
2024年10月17日，赛维时代(301381.SZ)公告称，持股5%以上股东鑫瑞集泰计划自公告披露之日起十五个交易日后的三个月内，以集中竞价和/或大宗交易方式减持不超过1600万股，占公司总股本比例不超过4%
2024-10-18赛维时代，减持，公司 -
运达股份于安徽投资成立三家新能源公司
e公司讯，企查查APP显示，近日，望江县润安新能源有限公司、望江县润泰新能源有限公司、望江县润能新能源有限公司成立，三家公司法定代表人均为刘国玉，注册资本均为400万元，经营范围均包含：发电业务、输电业务、供（配）电业务等
2024-10-18运达股份，新能源，有限公司 -
日久光电(003015.SZ)：2024年三季报净利润为5632.79万元、每股收益增加0.19元
2024年10月18日，日久光电(003015.SZ)发布2024年三季报。 公司营业总收入为4.43亿元，较去年同报告期营业总收入增加8798.57万元，同比较去年同期上涨24.75%
2024-10-18去年，上涨，增加 -
日播时尚筹划收购茵地乐，股价“提前”涨停 公司回应称属二级市场正常波动
10月17日，日播时尚（SH603196，股价11.58元，市值27.44亿元）股票涨停，收盘价11.58元/股
2024-10-18日播时尚，公司，交易 -
亚洲信用债每日盘点（10月18日）：中资美元债投资级市场较为稳健，地产板块延续节后上涨趋势，万科继续小幅上涨
市场评述 一级市场方面，海曙开投、武汉地铁参与美元债新发; 二级市场方面，中资美元债投资级市场较为稳健，科技板块的长端债券表现优于其他板块名字，例如美团和阿里巴巴。高收益板块方面，地产板块延续节后上涨趋势，万科继续小幅上涨
2024-10-18美元，债券，万科 -
艾比森(300389.SZ)：2024年三季报净利润为1.18亿元、较去年同期下降46.36%
2024年10月18日，艾比森(300389.SZ)发布2024年三季报。 公司营业总收入为27.18亿元，较去年同报告期营业总收入增加1.81亿元，实现4年连续上涨，同比较去年同期上涨7.11%
2024-10-18去年，公司，同比 -
【图解】国家统计局：9月天然气生产同比增长6.8%
中国经济网北京10月18日讯（记者王婉莹） 国家统计局今日发布2024年9月份能源生产情况。9月份，规模以上工业（以下简称规上工业）原煤、原油、天然气、电力生产平稳增长，其中天然气产量193亿立方米，同比增长6.8%
2024-10-18增长，同比，三季度 -
华安证券给予仲景食品买入评级：葱油及电商高增
华安证券10月17日发布研报称，给予仲景食品（300908.SZ，最新价：26.96元）买入评级。评级理由主要包括：1）公司发布24年三季报；2）收入分析：葱油及电商拉动；3）利润分析：Q3原材料价格上涨
2024-10-18仲景食品，华安证券，电商 -
“中国速食调味料之都”温县，集聚产业链群企业2480余家
【大河财立方记者段伟朵闫文瑞文图】焦作市提出“打造千亿级绿色食品产业集群”，县域食品产业特色鲜明，目前发展现状如何？10月18日上午，中共河南省委宣传部召开“推进中国式现代化建设河南实践”系列主题焦作专场新闻发布会
2024-10-18食品，温县，产业
