随着人工智能的快速发展和迭代，一些公司开始押注小型模型。与大型型号相比，低成本，在线快速以及中小型企业以及个人净化用户的钥匙可以打开人工智能的关键，并具有更高的盈利能力。 在过去的两年中，人工智能在雨后迅速发展，重复和大型语言模型，例如真菌。通用人工智能，例如文本生成，文学传记和传记，音频处理，代码处理，视频处理等，已经进入了人们的生活。同时，一些公司开始专注于开发可以在计算机和手机中培训的小型和轻型模型。 “我们需要大规模运输，例如高铁，飞机，巡航和其他小型运输，例如私人汽车，公共汽车，摩托车和自行车。因为在DIF中场景，不同的组不同。 “自然Chindao语义公司公司的CO -Founder兼首席建筑师Sun Yanqun认为，满足特定市场的需求是小型专业和复杂模型及其不断增长的价值的关键原因。 今年3月，由自然语义开发的Euler模型是通过产生的人工智能服务网络空间管理的。与可用于衡量1000亿的大型模型不同，Euler只有25B（25亿）。这是一个典型的小光模型。与大型模型相比，小型模型的特征是什么？应用程序的观点是什么？记者对此进行了采访。 Endrey中的小型型号以低成本而易于逃脱。 目前尚无小型模型的明确定义。 Sun Yanqun表示，该行业认为参数低于100B的模型是相对较小的模型。在实际应用中，如果您您想在笔记本电脑上进行精细调整，模型参数通常约为3B。 与较大的模型相比，小型模型在计算能源消耗和使用成本方面具有更大的优势。具体来说，首先，培训和推断需要更少的硬件和较低的成本。其次，使用更方便，可以在实际计算机方案中执行，例如手机，计算机，Internet设备。第三，结构很简单，促进开发人员发现问题并迅速净化问题。 我的记者了解到，随着与较大模型的竞争变得越来越激烈，一些公司开始押注较小的模型。 2024年8月，微软和NVIDIA接一个地推出了小语言模型。许多国家公司还开始开发小型最终模型，使几个智能设备在“断开连接和弱网络”中具有独立的思维能力。例如，在AN在今年3月举行的中冈论坛的Nul股东大会上，在北京墙前的智能公司推出了一名超级智能助手，纯粹的侧面适用于汽车的智能小屋。今年1月，Foshan Mobile de Guangdong合作建立了Foshan AI小型模型行业的财团，拥有40个单元，致力于通过智能的人工型号小型模型来提供个性化服务，以帮助公司完成智能更新。 “小型模型使我们能够与技术巨头实现虚假竞争。” Sun Yanqun说，谈到小型模型的特定应用方案，并引用了一个例子，在Euler批准演讲后，开始为小公司和个人用户提供服务。例如，我们已经与上海的市政档案合作启动了文件模型。与青岛的一家当地仪器公司合作，我们开发了与Intranet技术。 第二好之后的“主动行动” “客观地，大型模型的容量比小型模型的容量强。在任何情况下，具有2.5b参数量的模型都不能超过200B模型的计算机功能。”太阳扬昆（Sun Yanqun）坦率地说，这是为什么大公司正在制作数亿款模型的原因。如果模型很小，则神经元网络的参数将较小，可以容纳的知识量不足。 “它反映在文本的一代中，这在上下文上往往是一致的。” 自然语义的原始目标不是一个小模型。在2019年底，该公司考虑建立大型型号，但由于不清楚的发展和资本和供应的压力方向，无法实施GPU。 “我没想到只有两年后才能推出一个出色的外国模式。” Sun Yanqun后来记得高计算GPU的价格是基本的Hardware随着最大和最大的公司的增加而增加，将其倒入更大的型号卡车中。 “在那段时间里，我们听说我们刚刚乘坐GPU所在的飞机并购买了它。在许多情况下，如果我们提前支付坦克，我们不一定必须购买Iteven。”最终，该公司可以使用10个以上的设备来形成计算机电源群集并使用7B参数支持模型。 为了尽可能提高参数，根据现有设备，自然语义公司的工程师设计了一种新的方式，将实际空间向量的计算转换为思想下雨后，将实际空间向量的计算转换为复杂的空间。 Sun Yanqun说：“在模型训练之后，这些技术取得了相对较好的结果。这允许参数模型3B达到150B参数模型的大约60％的功能。” 中国信息与通信学院人工智能研究所首席工程师助理王扬田告诉记者小型模型在“薄”之后能保持实质性性能的原因是TOA系列的压缩和修剪模型，具有有效的网络体系结构的成熟和修剪模型，量化，知识蒸馏和设备。 让“小人物”产生“巨大的能量” “很有可能开发小型模型。”王扬塔（Wang Yuntao）认为，将来将推出针对特定应用程序方案的小型模型的可能性。 Iawahm终端和产品服务代表的应用程序将成为小型模型发布出色功能的主要战场。 关于小型模型应用程序的观点，Wang Yuntao首先解释说，它为办公室离线，文档的一般描述，私人对话和其他方案铺平了道路。其次，神经加工单元的处理器架构和技术的应用使手机，车辆设备和物联网是SMAL的自然阶段L模型。第三，以低于6B的参数的自定义模型出现在垂直领域以及“专业和创新”行业，例如财务，医生，法律和教育，它们以低成本和高速在线出现，并且可以在特定任务中克服常见的大型模型。 Wang Yuntao说：“市场令人担忧的是，如果您可以解决一个实用问题。这不是其背后模型的细节。能够与现场深入集成很重要。重要的是要了解该行业，尤其​​是您可以信任的小型模型，这一点很重要。” 从用户的角度来看，在实际应用中，小型模型的盈利优势也很明显。北京互联网公司的算法工程师张告诉记者，只有在téccenterionSexsistististististististsistsistsistsistsistsistsistssist中，很难实施大型模型。 “ GPU专业芯片太昂贵了，无法申请低成本设备。例如，配备手机和机器人的芯片无法使用大型型号。此外，配备这些终端的电池通常不能支持高性能芯片的能耗，” Chan说，在硬件性能有限的情况下，这些终端适合使用小型型号。 王扬塔（Wang Yuntao）分析了未来将成为一个系统的范式，将大型和小型模型混合在一起。 “尽管基于大云的模型负责一般推断，但小端侧模型会立即响应和处理私人域数据。”他还强调，小型模型不是“大型模型的较低版本”，而是针对专用资源和任务的有限环境的有利可图的解决方案。实施混合最终CloudSIF，帮助行业数据设置，公司可以允许“少量”产生“巨大的能量”，并在下一个商业实施过程中获得某些好处。 （Tao Wen，工人的每日记者）[编辑：Hui Xiaodong] 关于玄武岩表演的最后研究-6：“无菌”在月球上的奥秘的解决 您可以减肥做家庭任务吗？ “活动强度系数”表给出了答案！ 显然安全的夏季活动是否存在隐藏的风险？安全提示快速收集 Yoon Seok-Yeol再次被捕，可以在监狱中“花很多时间” 洪水后要小心这些饮食安全问题 不要偏向“白人和年轻人”的美学。超过70％的年轻人采访了“自然美女” Zhendong和Joey Yung的球迷在玩，Peror是什么样的球？ 打开健康保险钱包的区域将扩大。检查您是否有家乡。 个性化的旅游业创造了登山和年轻人愿意支付情感价值的“攀登”服务 防止铅中毒，并在家中谨慎使用旧水管！在使用水之前做一件事 杨汉森会将篮球经济带入姚明吗？ resu中国在第14五年计划中的创新 小麦已经成熟，仁慈的儿子在家 特朗普威胁要征收铜价，这使铜价在美国未来增加了新的最高最高最高水平。 特朗普知道有14个国家的“名称”增加了税收，但这是一个自然的结论 每天9,000的订单！当交货人员在高速导轨上“更新”时 互联网名人比“甲状腺功能亢进”更受欢迎 在这一生中，您必须去“中国绘画国家”。