揭秘Sora：用大语言模型的方法理解视频(2)
对于视频生成模型而言，块不仅包含了局部的空间信息，还包含了时间维度上的连续变化信息。模型可以通过学习patches之间的关系来捕捉运动、颜色变化等复杂视觉特征，并基于此重建出新的视频序列。这样的处理方式有助于模型理解和生成视频中的连贯动作和场景变化，从而实现高质量的视频内容生成。
OpenAI又在块的基础上，将其压缩到低维度潜在空间，再将其分解为“时空块”（spacetime patches）。
晕了是不是，别急，一个一个解释。潜在空间是一个3年前出现的概念，是指一个高维数据通过某种数学变换（如编码器或降维技术）后所映射到的低维空间，这个低维空间中的每个点通常对应于原始高维数据的一个潜在表示或抽象特征向量。但是呢，优化强大的扩散模型往往需要消耗数百个GPU日的计算资源，并且由于其序列评估性质，推理成本较高。因此，本质上来讲潜在空间，就是一个能够在复杂性降低和细节保留之间达到近乎最优的平衡点，极大地提升了视觉保真度。
时空块则是指从视频帧序列中提取出的、具有固定大小和形状的空间-时间区域。相较于块而言，时空块强调了连续性，模型可以通过时空块来观察视频内容随时间和空间的变化规律。
为了制造这些时空块，OpenAI训练了一个网络，用于降低视觉数据的维度，叫做视频压缩网络。这个网络接受原始视频作为输入，并输出一个在时间和空间上都进行了压缩的潜在表示。Sora在这个压缩后的潜在空间中进行训练和生成视频。同时，OpenAI还也训练了一个相应的解码器模型，用于将生成的潜在向量映射回像素空间。
热点推送
-
松井股份(688157.SH)：2024年三季报净利润为7123.29万元、每股收益增加0.16元
2024年10月18日，松井股份(688157.SH)发布2024年三季报。 公司营业总收入为5.27亿元，较去年同报告期营业总收入增加1.12亿元，实现5年连续上涨，同比较去年同期上涨26.91%
2024-10-18去年，增加，公司 -
晨化股份(300610.SZ)：2024年三季报净利润为6667.97万元、每股收益增加0.13元
2024年10月18日，晨化股份(300610.SZ)发布2024年三季报。 公司营业总收入为6.85亿元，较去年同报告期营业总收入减少3269.63万元，同比较去年同期下降4.55%
2024-10-18去年，公司，同比 -
宇信科技与厦门资管合资公司完成工商登记，注册资本1000万
蓝鲸新闻10月18日讯（记者张书维）10月18日，金融科技公司宇信科技（300674.SZ）发布《关于与厦门资管共同设立合资公司完成工商登记并取得营业执照的公告》
2024-10-18宇信科技，厦门资管，公司 -
图南股份(300855.SZ)：2024年三季报净利润为2.58亿元、较去年同期下降1.00%
2024年10月18日，图南股份(300855.SZ)发布2024年三季报。 公司营业总收入为10.80亿元，较去年同报告期营业总收入增加1422.32万元，实现5年连续上涨，同比较去年同期上涨1.33%
2024-10-18去年，公司，图南股份 -
广州二手楼市又要涨价？降价成交才是主流
国庆期间广州二手楼市的活跃行情，在国庆后的网签中得以体现
2024-10-18楼市，广州，二手 -
翔港科技(603499.SH)：2024年三季报净利润为3335.90万元、每股收益增加0.11元
2024年10月18日，翔港科技(603499.SH)发布2024年三季报。 公司营业总收入为5.87亿元，较去年同报告期营业总收入增加9294.49万元，实现2年连续上涨，同比较去年同期上涨18.82%
2024-10-18上涨，去年，增加 -
2024北京风能展：不再一味卷新机型，安全、出海话题频提
界面新闻记者｜马悦然 10月16日-18日，2024北京国际风能大会暨展览会在北京·中国国际展览中心（顺义馆）举办，这是每年国内风电行业最为重要的活动，众多企业借此盛会推陈出新
2024-10-18风电，行业，企业 -
港股半导体股多数上涨 华虹半导体涨超4%
每经AI快讯，10月18日，截至发稿，港股半导体股多数上涨，华虹半导体(01347.HK)涨4.48%、中芯国际(00981.HK)涨3.46%、 上海复旦(01385.HK)涨1.82%
2024-10-18半导体，台积电，三季度 -
利好来袭！港股券商股多数走强 招商证券大涨近7%
受益于市场利好，港股券商股多数反弹
2024-10-18中国人民银行，证券，互换 -
世界银行：沙特经济明年将提速 增长率将是今年三倍
根据世界银行最近的一项报告，沙特国内生产总值（GDP）预计今年增长1.6％，到2025年将增长至4.9％，这将是海湾地区最快的增长速度
2024-10-18沙特，2025，世界银行 -
广东建工2024年第三季度工程项目新签订单超300亿元
财中社10月18日电广东建工（002060）发布2024年第三季度工程项目经营情况。截至2024年9月30日，公司新签工程施工项目订单数量为434个，工程施工金额达到306.3亿元
2024-10-18广东建工，工程施工，工程项目 -
深度 | 傲基科技：机构股东上市前退出，利润无法覆盖增长资金“饥渴”
利润无法满足营收规模增长对资金的需求，公司不得不通过银行借款维持业务拓展，且已有机构投资者已经开始退出，留给傲基科技的时间或许真的不多了
2024-10-18傲基科技，贸易，公司 -
永吉股份(603058.SH)：2024年三季报净利润为1.28亿元、每股收益增加0.16元
2024年10月18日，永吉股份(603058.SH)发布2024年三季报。 公司营业总收入为6.10亿元，较去年同报告期营业总收入增加9102.03万元，实现3年连续上涨，同比较去年同期上涨17.54%
2024-10-18上涨，去年，增加 -
中骏：10月21日支付“H0中骏03”的年度利息和回售资金，债券将摘牌
在对部分境内债务和境外债务重组时，中骏集团控股对旗下一只债券进行回售
2024-10-18债券，10，中骏集团控股 -
面对特斯拉FSD入华的智驾竞争，余承东与雷军最新表态
在10月17日举办的2024世界智能网联汽车大会上，华为常务董事、终端BG董事长、智能汽车解决方案BU董事长余承东与小米集团创始人雷军对近期进展做出了回应
2024-10-18特斯拉，余承东，华为 -
比亚迪2025款汉体验：还是那个熟悉的“六边形战士”吗
“汉”车型在比亚迪车型矩阵中一直有独特地位。因此，当比亚迪2025款汉EV及DM-i车型9月上市，市场对这款“六边形战士”充满期待
2024-10-18比亚迪，续航，电池 -
中国中铁于北京成立置业公司 含房地产开发经营业务
e公司讯，企查查APP显示，近日，北京玖樾置业有限公司成立，法定代表人为李江，注册资本为3000万元，经营范围包含：房地产开发经营；物业管理；市场调查（不含涉外调查）；会议及展览服务；非居住房地产租赁；城市绿化管理；建筑材料销售等
2024-10-18中国中铁，北京，房地产开发 -
北路智控(301195.SZ)：2024年三季报净利润为1.40亿元、较去年同期下降14.18%
2024年10月18日，北路智控(301195.SZ)发布2024年三季报。 公司营业总收入为8.13亿元，较去年同报告期营业总收入增加1.04亿元，实现4年连续上涨，同比较去年同期上涨14.65%
2024-10-18去年，公司，同比 -
巴菲特继续减持美国银行，持股比例降至10%以下
10月17日，美国证券交易委员会（SEC）披露的文件显示，巴菲特旗下伯克希尔哈撒韦于10月15日继续卖出美国银行股票，合计卖出869.4538万股美国银行股票，套现3.699亿美元。减持后，伯克希尔哈撒韦还持有美国银行7.663亿股
2024-10-18美国银行，10，伯克希尔哈撒韦 -
理想汽车累计交付突破100万辆
10月18日，据理想汽车消息，理想汽车累计交付突破100万辆
2024-10-18理想汽车，保隆科技，供应商 -
联想推出混合式人工智能优势集
Lenovo Tech World上，联想集团联合英伟达推出面向企业的联想Hybrid AI Advantage（混合式人工智能优势集），将增强此前发布的联想万全异构智算平台的能力，为中国客户带来算力效率提升和成本优化
2024-10-18人工智能，AI，大模型 -
赛维时代(301381.SZ)：股东鑫瑞集泰拟减持1600万，占所持股份近50%
2024年10月17日，赛维时代(301381.SZ)公告称，持股5%以上股东鑫瑞集泰计划自公告披露之日起十五个交易日后的三个月内，以集中竞价和/或大宗交易方式减持不超过1600万股，占公司总股本比例不超过4%
2024-10-18赛维时代，减持，公司 -
运达股份于安徽投资成立三家新能源公司
e公司讯，企查查APP显示，近日，望江县润安新能源有限公司、望江县润泰新能源有限公司、望江县润能新能源有限公司成立，三家公司法定代表人均为刘国玉，注册资本均为400万元，经营范围均包含：发电业务、输电业务、供（配）电业务等
2024-10-18运达股份，新能源，有限公司 -
日久光电(003015.SZ)：2024年三季报净利润为5632.79万元、每股收益增加0.19元
2024年10月18日，日久光电(003015.SZ)发布2024年三季报。 公司营业总收入为4.43亿元，较去年同报告期营业总收入增加8798.57万元，同比较去年同期上涨24.75%
2024-10-18去年，上涨，增加 -
日播时尚筹划收购茵地乐，股价“提前”涨停 公司回应称属二级市场正常波动
10月17日，日播时尚（SH603196，股价11.58元，市值27.44亿元）股票涨停，收盘价11.58元/股
2024-10-18日播时尚，公司，交易 -
亚洲信用债每日盘点（10月18日）：中资美元债投资级市场较为稳健，地产板块延续节后上涨趋势，万科继续小幅上涨
市场评述 一级市场方面，海曙开投、武汉地铁参与美元债新发; 二级市场方面，中资美元债投资级市场较为稳健，科技板块的长端债券表现优于其他板块名字，例如美团和阿里巴巴。高收益板块方面，地产板块延续节后上涨趋势，万科继续小幅上涨
2024-10-18美元，债券，万科 -
艾比森(300389.SZ)：2024年三季报净利润为1.18亿元、较去年同期下降46.36%
2024年10月18日，艾比森(300389.SZ)发布2024年三季报。 公司营业总收入为27.18亿元，较去年同报告期营业总收入增加1.81亿元，实现4年连续上涨，同比较去年同期上涨7.11%
2024-10-18去年，公司，同比 -
【图解】国家统计局：9月天然气生产同比增长6.8%
中国经济网北京10月18日讯（记者王婉莹） 国家统计局今日发布2024年9月份能源生产情况。9月份，规模以上工业（以下简称规上工业）原煤、原油、天然气、电力生产平稳增长，其中天然气产量193亿立方米，同比增长6.8%
2024-10-18增长，同比，三季度 -
华安证券给予仲景食品买入评级：葱油及电商高增
华安证券10月17日发布研报称，给予仲景食品（300908.SZ，最新价：26.96元）买入评级。评级理由主要包括：1）公司发布24年三季报；2）收入分析：葱油及电商拉动；3）利润分析：Q3原材料价格上涨
2024-10-18仲景食品，华安证券，电商 -
“中国速食调味料之都”温县，集聚产业链群企业2480余家
【大河财立方记者段伟朵闫文瑞文图】焦作市提出“打造千亿级绿色食品产业集群”，县域食品产业特色鲜明，目前发展现状如何？10月18日上午，中共河南省委宣传部召开“推进中国式现代化建设河南实践”系列主题焦作专场新闻发布会
2024-10-18食品，温县，产业
