免费的大模型长文本来了(2)
参数量剧增所带来的好处自然是大模型对于更长的内容拥有更快速的理解能力，这能够帮助用户从中提炼到所需的摘要、信息点，又或是直接生成整篇内容的总结。语言大模型之所以能够快速「引爆」整个市场，正是得益于这种速度惊人的理解能力。
（图源：雷科技制图/Kimi Chat）
但要彻底攻克长文本，大模型光靠堆砌token参数量并不能完全解决这个问题。超大数量的token的确能够快速阅读完长文档，但段落与段落间的内容也更容易出现「断裂」的情况，这与缺少模型的预先训练有关。目前拥有超大token的AI方案提供商，通常在Transformer预测词之前投喂词元模型，使整体结论更加完整。
（图源：Code-Llama）
比如Code-Llama，标称16K token参数量，但实际上是由一个个4K token窗口连接而成，最终产生出16k token总模型。而这就十分考验大模型工具在窗口之间的推理能力。试想一下，在专业领域中，长文内容都有紧密的逻辑性与关联性，假如大模型推理失误，则有可能出现最终生成的摘要牛头不对马嘴，这对于大模型工具的商业、个人应用，都是致命的打击。
当然，大模型的推理能力是可以通过训练得到进步的，这就不难解释为何阿里、百度都选择优先将长文本模型功能免费开放给个人用户，毕竟更多用户加入，模型推理能力的进化速度才能加快。
（图源：百度文心一言）
热点推送
-
广电电气：常务副总裁王斌辞职
证券时报e公司讯，广电电气(601616)5月9日晚间公告，王斌因集团内部工作调整申请辞去公司常务副总裁职务，辞职后仍将担任公司董事的职务
2024-05-09广电电气，王斌，公司 -
富乐德：接受线上参与公司2023年度网上业绩说明会的投资者调研
富乐德（SZ 301297，收盘价：21.34元）发布公告称，2024年05月08日下午15:00-17:00，富乐德接受线上参与公司2023年度网上业绩说明会的投资者调研
2024-05-09富乐德，2023，公司 -
麦格纳一季度销售额同比增长3%
5月9日，汽车零部件供应商麦格纳公布2024年第一季度财报：销售额为109.70亿美元，同比增长3%；调整后息税前利润（EBIT）为4.69亿美元，上年同期为4.49亿美元
2024-05-09麦格纳，美元，汽车零部件 -
奇德新材：业绩说明会定于5月16日举行
奇德新材（SZ 300995，收盘价：18.56元）5月9日晚间发布公告称，公司2023年年度业绩说明会定于2024年5月16日（星期四）下午15:00至16:00，以网络文字互动的形式进行
2024-05-09奇德新材，说明，独立董事 -
友阿股份：业绩说明会定于5月16日举行
友阿股份（SZ 002277，收盘价：2.67元）5月9日晚间发布公告称，公司2023年年度业绩说明会定于2024年5月16日（星期四）下午15:00至17:00，以网络远程的形式进行
2024-05-09友阿股份，说明，房地产 -
中国国贸：业绩说明会定于5月17日举行
中国国贸（SH 600007，收盘价：23.82元）5月9日晚间发布公告称，公司2023年年度业绩说明会定于2024年5月17日（星期五）上午10:00-11:00，以网络文字互动的形式进行
2024-05-09中国国贸，说明，2023 -
利元亨：光伏领域相关部分设备已获得客户验收
利元亨5月9日于互动平台表示，公司紧紧围绕光伏异质结整线核心设备进行研发布局，与光伏头部企业建立深度合作关系，与安徽华晟、上海泰睿等签署深度战略合作框架备忘或技术开发协议，在光伏（异质结、钙钛矿）、储能等领域展开深度合作
2024-05-09光伏，利元亨，公司 -
克明食品：子公司4月累计销售生猪收入6110.15万元 环比下降10.42%
克明食品(002661)5月9日晚间公告，子公司兴疆牧歌2024年4月份销售生猪4.80万头，销量环比下降11.08%，同比增长5.04%；销售收入6110.15万元，销售收入环比下降10.42%，同比增长4.66%
2024-05-09生猪，克明食品，销售 -
晓鸣股份(300967.SZ)：4月销售鸡产品1929.57万羽 同比下降18.72%
2024年5月9日，晓鸣股份(300967.SZ)发布了4月鸡产品销售情况简报，2024年4月销售鸡产品1,929.57万羽，销售收入6,333.22万元，环比变动分别为9.58%、15.80%
2024-05-09晓鸣股份，300967，18.72 -
丰原药业(000153.SZ)：公司赤藓糖醇项目建设已完工 该产品尚未正式投产
2024年5月9日，丰原药业(000153.SZ)在互动平台上表示，公司赤藓糖醇项目建设已完工
2024-05-09丰原药业，000153，公司 -
凯盛新材(301069.SZ)：公司暂未直接生产偏苯三酸酐（TMA）产品
2024年5月9日，凯盛新材(301069.SZ)在互动平台上表示，公司暂未直接生产偏苯三酸酐（TMA）产品，目前公司采购偏苯三酸酐产品用于合成偏苯三酸酐酰氯产品，下游主要用于医药、医疗、新材料等领域
2024-05-09偏苯三酸酐，凯盛新材，301069 -
克明食品(002661.SZ)：公司2024年1-4月累计销售生猪17.05万头 较去年同期下降15.70%
2024年5月9日，克明食品(002661.SZ)发布了子公司4月生猪销售简报，兴疆牧歌2024年4月份销售生猪4.80万头，销量环比下降11.08%，同比增长5.04%；销售收入6,110.15万元，销售收入环比下降10.42%
2024-05-09生猪，克明食品，2024 -
卓锦股份：股东未出现违规减持 不存在被实施ST的风险
卓锦股份(688701)今日在互动平台表示，天津中安并非公司实控人，不适用控股股东减持细则，且所持有股份均为无限售流通股，因此不存在违规减持情况。公司2023年归母净利润为负，不符合被纳入实施ST范畴的前提条件，因此不存在被实施ST的风险
2024-05-09卓锦股份，公司，股东 -
科创板系列指数涨超2% 科创成长50ETF（588020）、科创板50ETF（588080）等产品布局战略性新兴产业
截至收盘，今日上证科创板50成份指数上涨2.3%，科创100指数上涨2.2%，上证科创板成长指数上涨2.4%
2024-05-09100，科创板，科创 -
通达动力：公司生产的定转子电机铁芯产品品种齐全 能够应用于各个领域不同种类和型号的电机
每经AI快讯，有投资者在投资者互动平台提问：国家提倡低空经济，请问对贵公司后期经营有没重大影响？如有影响请问贵公司哪种产品受益最多？ 通达动力（002576.SZ）5月9日在投资者互动平台表示，公司生产的定转子电机铁芯产品品种齐全
2024-05-09通达动力，电机，投资者 -
克明食品：1-4月累计销售生猪收入同比下降12.79%
南方财经5月9日电，克明食品公告，2024年1-4月，公司累计销售生猪17.05万头，较去年同期下降15.70%；累计销售收入20,493.94万元，较去年同期下降12.79%
2024-05-09克明食品，生猪，销售 -
A股四宽基指数上扬 创业板ETF（159915）、科创板50ETF（588080）等产品成交活跃
截至收盘，今日沪深300指数上涨1.0%，中证A50指数上涨0.9%，创业板指数上涨1.9%，上证科创板50成份指数上涨2.3%
2024-05-09上涨，指数，兴业证券 -
五洲新春：业绩说明会定于5月20日举行
五洲新春（SH 603667，收盘价：17.21元）5月9日晚间发布公告称，公司2023年度暨2024年第一季度业绩说明会定于2024年05月20日下午14:00-15:00，以上证路演中心网络互动的形式进行
2024-05-09五洲新春，说明，汽车配件 -
晓鸣股份：4月销售鸡产品收入6333.22万元 环比增长15.80%
证券时报e公司讯，晓鸣股份(300967)5月9日晚间公告，2024年4月销售鸡产品1929.57万羽，销售收入6333.22万元，环比变动分别为9.58%、15.80%，同比变动分别为-18.72%、-20.72%
2024-05-09晓鸣股份，6333.22万，15.80 -
中国动力：公司有固态电池相关研究
每经AI快讯，有投资者向中国动力提问，公司有研发类固态电池系统？对此，中国动力在投资者互动平台表示，公司有相关研究
2024-05-09中国动力，固态电池，公司 -
农发种业：7家子公司获得政府补助共计1365.63万元
证券日报网讯 5月9日晚间，农发种业发布公告称，2024年1月-4月份
2024-05-09农发种业，获得，共计 -
广电电气：5月9日召开董事会会议
广电电气（SH 601616，收盘价：3.3元）5月9日晚间发布公告称，公司第六届第九次董事会会议于2024年5月9日以现场结合通讯表决方式召开。审议了《关于聘任高级管理人员的议案》等
2024-05-09广电电气，董事会会议，601616 -
百济神州一季度营收增长逾七成 经营亏损进一步收窄
5月8日，百济神州（纳斯达克代码：BGNE；香港联交所代码：06160；上交所代码：688235.SH）发布2024年第一季度美股业绩报告以及A股业绩快报
2024-05-09百济神州，泽布替尼，替雷利珠单抗 -
中小盘反弹 关注科创100ETF易方达（588210）、中证500ETF易方达（510580）等产品走势
截至收盘，今日中证500指数上涨1.8%，中证1000指数上涨1.6%，科创100指数上涨2.2%，创业板中盘200指数上涨1.5%
2024-05-09上涨，指数，中证500 -
星源材质：副总经理吴骏离职
星源材质（SZ 300568，收盘价：10.56元）5月9日晚间发布公告称，公司董事会于2024年5月9日收到公司副总经理吴骏先生提交的辞职报告，吴骏先生由于个人原因申请辞去公司副总经理职务。辞职后，吴骏先生不再担任公司任何职务
2024-05-09星源材质，增持，控股股东 -
*ST傲农：4月生猪销售量同比减少63.78%
*ST傲农公告，2024年4月，公司生猪销售量15.52万头，同比减少63.78%
2024-05-09*ST傲农，63.78，生猪 -
诺力股份：刘宏俊先生因个人原因申请辞去副总经理职务
诺力股份（SH 603611，收盘价：22.06元）5月9日晚间发布公告称，诺力智能装备股份有限公司董事会近日收到公司副总经理刘宏俊先生提交的书面辞职报告，刘宏俊先生因个人原因申请辞去副总经理职务，辞职后刘宏俊先生将不在公司担任任何职务
2024-05-09诺力股份，刘宏俊，副总经理 -
广安爱众股东户数连续5期下降 筹码集中以来股价累计上涨14.37%
广安爱众5月9日在交易所互动平台中披露，截至4月30日公司股东户数为46204户，较上期（4月20日）减少568户，环比降幅为1.21%。这已是该公司股东户数连续第5期下降，累计降幅达15.65%，也就是说筹码呈持续集中趋势
2024-05-09广安爱众，股东户数，上涨 -
交大思诺最新股东户数环比下降7.37% 筹码趋向集中
交大思诺5月9日在交易所互动平台中披露，截至4月30日公司股东户数为9112户，较上期（4月20日）减少725户，环比降幅为7.37%
2024-05-09交大思诺，股东户数，7.37 -
青岛啤酒：品牌长青的关键在于传承与创新
5月9日，第八个“中国品牌日”前夕，成都传媒集团和深圳报业集团作为指导单位、每日经济新闻和深圳商报联合主办、清华大学经济管理学院中国企业研究中心提供学术支持的“2024第八届中国上市公司品牌价值榜发布会”在深圳举行
2024-05-09青岛啤酒，品牌价值，青啤
