AIフロントライン

公式ソースだけを集めたAI最前線(日本語要約)

gh-mistral 2024-05-24 18:31 ★2

Mistral、推論ライブラリでLoRA正式サポート

mistralai/mistral-inference v1.1.0 Add LoRA

Mistral LoRA ファインチューニング OSS

要約

Mistralの公式推論ライブラリmistral-inferenceがv1.1.0でLoRAアダプタの読み込み・実行に対応した。 mistral-finetuneで学習したLoRAモデルを数行のコードで推論に利用でき、7Bモデル向けサンプルも公開。 独自ファインチューニングモデルの本番活用が大幅に簡易化され、開発者の実用ハードルが下がる。