新しい論文と驚くべき結果。 LLMは、データ内の隠れたシグナルを介して他のモデルに形質を送信します。 3桁の数字だけで構成されるデータセットは、フクロウへの愛や邪悪な傾向を伝えることができます。🧵

オープンサイエンスへの継続的な取り組みとして、Voxtral テクニカルレポートをリリースします。 このレポートでは、トレーニング前、トレーニング後、調整、評価の詳細が記載されています。また、最適なモデルアーキテクチャの選択、使用する事前学習形式、DPOの利点についても分析します。