老师我想你㖭我下我的BB2GB 内存就能跑 ChatGPT！这个国产「小钢炮」，要让华为 OV老师我想你㖭我下我的BB 们的 AI 体验突破瓶颈_ZAKER新闻
2GB 内存就能跑 ChatGPT！这个国产「小钢炮」，要让华为 OV老师我想你㖭我下我的BB 们的 AI 体验突破瓶颈_ZAKER新闻
天眼查信息显示，驻马店市富地房地产开发有限公司成立于2019年，企业注册资本1000万。
在这波 AI 浪潮中，面壁智能是国内少有选择 All In 端侧模型的头部大模型厂商。自从面壁智能 2 月份发布性能小钢炮 1.0 后，接连几月陆续迭代升级，其中后续推出的开源模型 MiniCPM-Llama3-V 2.5 更是因为强悍的实力遭到了斯坦福 AI 团队的抄袭。四月份，面壁智能 CTO 曾国洋还曾预言，GPT-3.5 级别的模型将在一两年内就能在移动设备上运行。好消息是，不用再等一到两年了，因为今天发布的 MiniCPM 3.0 实现了初代小钢炮发布时立下的 Flag：今年内让 GPT-3.5 水平的模型在端侧跑起来。仅 4B 参数，以小博大，性能超越 GPT-3.5，MiniCPM 3.0 也标志着「端侧 ChatGPT」时刻的到来。简单来说就是，MiniCPM 3.0 的面世意味着用户未来能体验到快速、安全、且功能丰富的本地 AI 服务，无需依赖云端处理，以及获得更流畅、更私密的智能交互体验。从官方分享的基准测试来看，MiniCPM 3.0 在 CMMLU、CEVAL 等考究中文能力的基准测试中一骑绝尘，轻松碾压 Phi-3.5、以及 GPT-3.5 等模型。而即便是对上了 8B、9B 等国内优秀的大模型，MiniCPM 3.0 的表现同样相当出众。简单总结一下 MiniCPM 3.0 的特点：无限长文本，榜单性能超越 Kimi端侧最强 Function call，性能比肩 GPT-4o超强的 RAG 外挂三件套，中文检索、中英跨语言第一 无限长文本，性能超越 Kimi小而强、小而全，或许是 MiniCPM 3.0 最贴切的形容词。上下文长度是衡量大模型基础能力的一项重要特性，更长的上下文长度意味着模型能够存储和回忆更多的信息，从而有助于模型更准确地理解和生成语言。举例来说，更长的上下文长度能够让一个 AI 写作工具根据用户之前写的内容提供更相关的建议，或者根据更多的背景信息创作出更复杂、更引人入胜的故事。为此，面壁提出了 LLMxMapReduce 长本文分帧处理技术。这是一种通过将长上下文切分为多个片段，让模型并行处理，并从不同片段中提取关键信息，汇总最终答案，实现无限长文本。据悉，这一技术普遍增强了模型处理长文本的能力，且在文本不断加长的情况，仍保持稳定性能、减少长文本随加长掉分情况。▲ LLMxMapReduce 技术框架图从 32K 到 512K，MiniCPM 3.0 能够打破大模型记忆的限制，将上下文长度无限稳定拓展，用面壁官方的话来说就是「想多长就多长」。从大模型长文本的基准测试 InfiniteBench 结果来看，随着文本长度的增加，4B 参数的 MiniCPM 3.0 的性能优势反而愈发明显。InfiniteBench Zh.QA 评测结果显示，4B 参数的 MiniCPM 3.0 整体性能优于 Kimi，在更长的文本上显示出相对更强的稳定性。 端侧最强 Function call，性能比肩 GPT-4o在接受 APPSO 等媒体的采访时，曾国洋也表示，MiniCPM 3.0 针对用户关注的一些能力进行了提升，比如加入了完整的 system prompt Function Calling 和 code interpreter 等能力。其中 Function Calling（函数调用）能够将用户模糊化的输入语义转换为机器可以精确理解执行的结构化指令，并让大模型连接外部工具和系统。具体来说，通过语音在手机上调用日历、天气、邮件、浏览器等 APP 或相册、文件等本地数据库，从而打开终端设备 Agent 应用的无限可能，也让人机交互更加自然和方便。据介绍，MiniCPM 3.0 宣称拥有端侧最强 Function Calling 性能 ，在 Berkeley Function-Calling Leaderboard 榜单上，其性能接近 GPT-4o，并超越 Llama 3.1-8B、Qwen-2-7B、GLM-4-9B 等众多模型。曾国洋表示，现有的开源模型在这些能力上的覆盖并不全面，通常只有一些云端的大型模型能够完全覆盖这些能力。现在，MiniCPM 3.0 也实现了一些相应的功能。以 RAG（检索增强生成）为例，这是一种结合了信息检索（IR）和自然语言生成（NLG）的技术。它通过从大规模文档库中检索相关信息来指导文本的生成过程，能够提升模型在回答问题、生成文本等任务中的准确性和可靠性，减少大模型的幻觉问题。对于法律、医疗等依赖专业知识库、对大模型幻觉容忍度极低的垂直行业来说，大模型 +RAG 在行业中尤其实用。MiniCPM 3.0 一口气上线了 RAG 三件套：检索模型，重排序模型和面向 RAG 场景的 LoRA 插件。MiniCPM-Embedding（检索模型）中英跨语言检索取得 SOTA 性能，在评估模型文本嵌入能力的 MTEB 的检索榜单上中文第一、英文第十三。MiniCPM-Reranker（重排序模型）在中文、英文、中英跨语言测试上取得 SOTA 性能。经过针对 RAG 场景的 LoRA 训练后，MiniCPM 3.0-RAG-LoRA 在开放域问答（NQ、TQA、MARCO）、多跳问答（HotpotQA）、对话（WoW）、事实核查（FEVER）和信息填充（T-REx）等多项任务上的性能表现，超越 Llama3-8B 和 Baichuan2-13B 等业内优秀模型。 模型应用落地，先跑起来再说在接受 APPSO 等媒体的采访时，面壁智能 CEO 李大海提到，能跑起来和真正流畅地去做应用是两个不同的概念。而经过优化后的 MiniCPM 3.0 对端侧设备的资源需求很低，量化后仅需 2.2 G 内存，iPad 端侧推理也能达到 18-20 tokens/s。对于 iPad 这样的移动设备来说，每秒能够处理 18-20 个 token 的速度已经意味着模型能够实时处理自然语言输入。比如在语音识别或实时翻译应用中，用户基本不会感受到明显的延迟，享受到相对流畅的交互体验。另外，相较于云端模型，作为端侧模型的面壁小钢炮 MiniCPM 系列模型还天然具有弱网、断网可用、超低时延、数据隐私安全等本地优势。在贡嘎雪山附近游玩时，想知道欣赏「日照金山」的最佳姿势，网络不佳的你可以向 MiniCPM 3.0 发出提问。又或者，如果你是「赶海」的新人，站在波涛汹涌的海岸边，却想要满载而归，那不妨可以遵循 MiniCPM 3.0 给出的建议。当你抬头仰望夜空时，萌生了捕捉星轨的念头，MiniCPM 3.0 也能给你将拍摄的细节娓娓道来。MiniCPM 小钢炮系列飞速进步的背后是一以贯之的高效大模型第一性原理。面壁智能首席科学家刘知远曾提出一个大模型时代的「摩尔定律」，即大模型的知识密度平均每 8 个月将提升一倍。知识密度 = 模型能力 / 参与计算的模型参数具体来说，随着模型知识密度的持续增强，2020 年 GPT-3 175B 能力到 2024 年 MiniCPM 2.4B 模型即可达到，2022 年底 ChatGPT 首次亮相内置的 GPT-3.5 到 2024 年 MiniCPM 3.0 模型即可达到。基于此，如果说 MiniCPM 追求的是极致端侧性能表现，那么 MiniCPM-V 追求的是极致多模态创新表现，面壁小钢炮的进步不是单方面的进步，而是端侧双旗舰的齐头并进。经过一两年的技术摸索，AI 大模型正逐步进入落地应用的深水区。李大海认为，大模型具有两个大方向的价值，一个方向的价值叫做升级旧世界，第二个方向的价值则是发现新大陆。比如苹果整合 ChatGPT 服务到 Apple Intelligence 中便是一个典型的例证。端侧模型也是如此，通过在手机、汽车还有 PC 这样的场景里面，更适合做的事情是去服务好终端的厂商，然后让终端厂商因为有了端侧模型，整个系统层级的体验也变得更好。只不过，在技术到产品的惊险一跃中，厂商也需要投入大量时间来融合用户需求与技术。正如李大海所言，尽管移动互联网自 iPhone 问世以来就已经存在，但真正大规模增长和被验证的应用确实是数年后才开始涌现。实际上，面壁智能也一直在探索落地应用的场景。此前，面壁小钢炮 MiniCPM 端侧模型已经在 PC、平板、手机等领域上实际运行。前不久，面壁智能也在 WAIC 上联手加速进化机器人，打造出完整「具身智能」的先驱方案，这也是业界首个高效端侧模型运行在人形机器人的演示，理解、推理、并与物理世界互动的智能系统。李大海也向 APPSO 等媒体剧透，预计在年底前将会有配备面壁智能端侧模型的产品上市。简言之，面壁智能不断将高效高性能大模型放到离用户最近的地方，让大模型的能力像电力一样被随意调用、无处不在、普适且安全。在这个过程，更多的人也能尽快地享受到大模型的价值和作用。MiniCPM 3.0 开源地址：GitHub: https://github.com/OpenBMB/MiniCPMHuggingFace: https://huggingface.co/openbmb/MiniCPM3-4Bkoa12jJid0DL9adK+CJ1DK2K393LKASDad
编辑:朱希
TOP1热点：一餐饭里有多少故事？以五谷科普粮食安全观念的绘本在沪发布
在驻马店市经济开发区金山办事处发布的解决意见中，一共分三条。意见一为：原中州·龙湖国际项目19号、20号楼20层(含20层)以下所有购房客户，愿意要房者，按照评估房屋成本价5053元/㎡的价格，办理转换手续；原中州·龙湖国际项目18号(25层及以上)、19号、20号楼21层(含21层)以上因限高失去房源的购房客户，如果原购房客户愿意要房子的，参与本次选房，按评估的房屋成本价5053元/㎡,并可分别于2020年7月20日和22日办理转换手续。意见二为：要求退预付房款者，中州公司以客户所交预付房款为基数，按年化4.75%(评估公司核定企业投资利率)计息退还本金和利息。意见三为：不同意以上两条解决方案者，建议走司法途径。。
4日，记者咨询了某电商平台滨波旗舰店客服。客服称，上述POLO衫是该品牌的老款T恤短袖，现已不售卖，因停售无法查询售价。该旗舰店类似的两种2023款POLO衫，打折后售价分别是956元、1081元。
TOP2热点：青岛男童遭武术教练殴打致死案续：检方抗诉认为一审量刑畸轻
国家安全部部长陈一新
TOP3热点：男子买了房却无家可归，二手房竟有十年租约？中国windows野外
贺荣
有位网友说得好：一家公司经历过这样的困境，保持底线不倒、不跪，留住风骨气节，在两国相争的时刻能不哼一声与国家共进退的，以后必有好前程。
TOP4热点：极氪仅半年就上新还“增配降价”，老车主投诉消费欺诈！为何车企要顶着骂名卷迭代一面亲上边一面膜
中央政法委领导中，共有两位女性，一位是司法部一把手贺荣，另一位是孙晓芳。
TOP5热点：西安金地物业被指撬门占用业主空置别墅，业主：协商赔款十万只收到五万暴躁少女CSGO最强角色推荐
毛宁：我们看到了有关报道。此前我的同事已经介绍了中方立场。中方对改善中梵关系始终持积极态度，同梵方保持接触和沟通。
由此可见，印度裔的政治影响力真是遍布全球，五大洲一个不落。这还不包括像哈里斯这样的美国副总统，更别说这些国家更多的部长级官员和基层官员也是印度裔。
TOP6热点：男子买了房却无家可归，二手房竟有十年租约？19岁macbookpro免费
上述判决书中显示，案涉《中州龙湖国际房屋认购协议书》属于预约合同。《中州龙湖国际房屋认购协议书》系双方当事人的真实意思表示，不违反法律、行政法规的强制性规定，合法有效。综上，中州公司以未取得商品房预售许可证为由请求确认案涉《中州龙湖国际房屋认购协议书》无效没有事实和法律依据，应当驳回中州公司的诉讼请求。
有人放声高唱、“粉丝”多多，是感受到了无穷快乐，但有人却因此愁煞！就在广场楼上，不少居民的夜间休息、孩子学习，都受到了打扰，这五六年来，可以说是吃足了苦头。
TOP7热点：南京一知名商业街为何烂尾多年未完工？官方回复：续建难度大刻晴大战史莱姆隐藏网站
訚柏
天眼查信息显示，驻马店市富地房地产开发有限公司成立于2019年，企业注册资本1000万。
TOP8热点：辛辛那提出局12连胜被终结，郑钦文：美网要拼尽全力jl zzz 老师
据报道，瓦卡尔丘克曾在2015年赴美，参与一个“国家领导人形成与发展项目”，并在2017年加入“乌克兰新领袖”项目。报道称，事实上，参加“乌克兰新领袖”项目就是一场“未来总统候选人的筛选”。这个项目就像是一个“委员会”，根据“民主发展”这门学科的学术表现，“批准或否决乌克兰的潜在总统候选人”。
数据显示，定居在海外的印度人普遍从事高薪职业，包括IT、管理、艺术等等，这一比例高达76%，只有7%从事底层蓝领工作。
TOP9热点：河北男孩骑行摔倒被碾身亡，相关工程公司：涉事路段还未验收美国 вид
今年年初以来，列兹尼科夫“被撤”的说法就传得沸沸扬扬。
TOP10热点：图解｜大龄未婚比例上升意味着什么？啊⋯啊⋯啊⋯快⋯高潮了口述
案件焦点之一是叶永青不侵权的抗辩意见是否成立。叶永青抗辩不侵权的理由包括合理借鉴、存在艺术先例、来源于公有领域素材。法院认为，本案中，叶永青抗辩有7幅画作中应属合理借鉴范围，不属于侵权。经法院审查对比认为，叶永青对涉案权利画作具体表达上的借鉴已超出了合理范围，构成著作权法意义上所称的抄袭行为。此外，法院认为公有领域素材的使用不受著作权法限制，但在此基础上经作者独立创作形成的作品内容仍可受著作权法保护，其保护范围为作品中作者的独创性表达部分。