Gate Newsメッセージ、4月23日—テンセントは、ファストとスローの思考融合を特徴とするハイブリッドなMixture of Experts(混合専門家)言語モデル「Hunyuan Hy3」のプレビューを発表し、オープンソース化した。モデルは総パラメータ2950億、アクティブパラメータ210億を備え、最大コンテキスト長は256Kトークンに対応。 Hy3プレビューは、Hunyuanの再編後に学習された初のモデルであり、テンセントにおけるこれまでで最もインテリジェントなモデルだとされている。同社は、複雑な推論、指示追従、インコンテキスト学習、コード生成、エージェント機能、そして推論性能における大幅な改善を報告している。最高AI科学者の姚淳宇氏は、Hy3プレビューがHunyuan再構築の最初のステップであると述べ、オープンソース・コミュニティのフィードバックによって正式版の実用性が高まることを期待すると語った。
テンセントは同時に、事前学習と強化学習を拡張し、モデルの知能の上限を引き上げるとともに、ディープな共同設計を通じて複数のテンセント製品と連携し、現実世界での性能を向上させている。同社はまた、特化したモデル能力の検討を始めている。
Related News