Nature ハイライト

機械学習:バイト単位の符号化が開く言語モデルの可能性

Nature 658, 8137

大半の大規模言語モデル(LLM)は、データを単語の断片である「サブワード」単位で符号化している。この方法は言語には適しているが、例えばゲノムのコードやコンピューターコードでは、それほどうまく機能しない可能性がある。今回B Minixhoferたちは、バイトレベルで直接符号化する方が、より自然な手法となる可能性があることを見いだした。

2026年10月22日号の Nature ハイライト

目次へ戻る

プライバシーマーク制度