（来源：上观新闻）
在学术界和工程界🇷🇸😜，有一个公认的3️⃣🌊近似估算：生成🐍（或处理） 1⛑🕉 个 词元所需的💶🏧浮点运算次数约🏯㊗是2 倍的🅾👨模型参数量🇯🇲。算力与✝资本：前沿🈴训练成本高昂♉⛎，推理经济性😇🐐取决于基础设施质🐪量😀。一台机🍠👢器人出去🧓🛡做一场活动，需要🧿运输、调试、🇲🇻📿工程师驻场、🤽♀️安全保障🇲🇨。高博士发现，谷👩❤️💋👩歌的 🚿Turb🖍🚆oQuant👦 ，跟自己团队🦄搞的 RaB🇮🇩itQ 算法高🕳度撞车👁🧰，底层都用⚜了“随机🚏旋转加JL变🇳🇦换”🤼♀️。
此外，海淀组织⚓🙍能力向基层的延伸🌛也值得一♋提🇧🇦🇱🇸。例如，在淘🏄宝闪购平台，多😖个餐饮商家反映，⏪平台未💇♂️😲经协商🦍🍜将商品上架“爆品🇴🇲🚁团”“爆单🍘🧁红包”等促⚫🕕销活动，且Ⓜ👵商家不可✳自主退出活动，造😔成商家经济损失🍠🇨🇿。人工智👩👦🍘能擅长处理高维🌡度、多尺度数据🦐，能够挖掘🙇♀️🏇参数之👨⚕️间的关系，揭示传🚵统方法难🍢❣以发现的规🇧🇭🈸律🚩。面对这个棘手问🇸🇽题，研究团队✡开发了一套名为W🥈ALA🥘🕣R的创新训练方法🍍🥌。机器人💹🇫🇰不是房产，🦟😀不是黄金🌵女生和女生一起打扑克差差。"在线策略蒸馏"🔐🇲🇬技术的实现↗也极其🦠精妙🦷。
具体来说，🇵🇲🇳🇮团队发🇬🇲🇸🇴布了三个主要资源🚊：Nemotr🙂🖨on-Cas🎉🇩🇬cade🍏📣-2-30B-A🧾🌛3B模型本身，这⌚是基于Ne🥢🖊motron🖕🛁-3-Nano🍩⚪-30B-A3🔷🇦🇮B-Base进♉🚳行后训🍱👨🚀练的最终😗🙏模型；😫Nemot🧒ron👩👩👧👦-Cascade🗂-2-🎇SFT-Dat✴📡a，包含了监督🇵🇷微调阶🧺段使用的所有数🏋据集；Nemo🇲🇸tron-♑🇮🇳Cascade-🤾♀️2-R🖥L-Dat🏐a，包含了强化🚺🧞♀️学习阶🧻💃段使用的所有数据🐋集🤹♀️🌺。
