arXiv論文：許諾されたデータだけで1B言語モデルを学習——Mimir v1、デンマーク語で最高水準

結論から言うと、利用条件を確認できるデータだけでも、小型言語モデルを高い水準まで育てられる可能性を示すMimir v1が発表された。2026年8月13日にarXivへ投稿された査読前の技術報告で、巨大モデルの学習に出所や再利用条件が不明確なデータが混ざりやすく、研究成果を公開・再現しにくい問題に取り組んだ。

研究チームは、階層的推論モデル（HRM）を土台にした10億パラメータの言語モデルをゼロから学習した。追加学習には、著作権やライセンスなどの条件上、研究チームが利用可能と判断した161件のデータセットだけを使ったという。

英語、数学・コード、デンマーク語を含む20種類のベンチマークで評価し、元のHRM-Text 1Bを上回り、40億規模のQwen 3.5 4BやGemma 4 E2Bと競争できる結果を報告した。特にデンマーク語では新たな最高水準になったとしている。小型の公開モデルを選ぶ人には、数字の大きさだけでなく、学習データの利用条件と再現性を比べる材料になる。

研究用モデルはHugging Faceで公開されている。ただし「permissible」は著者らの選定基準に基づく表現で、すべての国・用途で法的問題がないことを保証しない。査読前であり、実サービスの速度、安全性、日本語性能もこの報告だけでは判断できないため、モデルカードと各データセットのライセンスを用途ごとに確認する必要がある。