ファインチューニング

ファインチューニング (AI) とは

機械学習のファインチューニングとは、学習済みモデルのパラメーターを特定のタスクやデータセットに合わせて変更することを指します。ターゲットタスクに関連するデータを使ってモデルを訓練し直すと同時に、前回の学習成果も調整します。

オフィスで微笑んでいるビジネスマン
  • ファインチューニングの仕組み
  • ファインチューニングのプロセス
  • HPEとファインチューニング
ファインチューニングの仕組み

ファインチューニングの仕組み

ファインチューニングは転移学習と似ており、専門知識を利用することで関連ジョブにおけるモデルの成果を向上させます。学習済みモデルをファインチューニングすることで、ゼロから始めるよりも少ないコンピューティングリソースや訓練時間でより良い成果を実現できます。自然言語処理やコンピュータービジョンに使用して新たなタスクやデータセットにモデルを適応させるファインチューニングは、現代の機械学習ワークフローには欠かせません。

ファインチューニングのプロセス

ファインチューニングのプロセス

機械学習のファインチューニングには次のステップがあります。

  • 学習済みモデル: 大規模なデータセットで訓練され、関連性のあるタスクやドメインでうまく機能しているモデルを選択します。学習済みモデルの例には、自然言語処理 (BERTやGPTなど) やコンピュータービジョン (ResNetやVGGなど) などの分野が挙げられます。
  • ターゲットタスクの定義: モデルのファインチューニングの対象となるタスクやデータセットを指定します。感情分析、画像分類、固有表現認識などがあります。
  • データ準備: 新しいタスクに関連するデータセットを収集し加工します。データを訓練用、検証用、テスト用に分け、適切に準備します。
  • モデルのファインチューニング: 勾配降下法を使って、学習済みモデルを新たなデータセットで初期化/再訓練します。過学習や未学習にならないようハイパーパラメーターと学習率を調整します。
  • 評価と検証: ファインチューニングしたモデルの性能を、検証セットで追跡し修正します。性能を微調整するため訓練と評価を複数回行う場合もあります。
  • テストと展開: ファインチューニングしたモデルをテストセットでテストし、汎化性能を判断します。それから、ファインチューニングした推論モデルを実用化します。
  • ファインチューニングではこれらのステップを通じて、学習済みモデルを新たなタスクやデータセットに適応させ、性能の向上と、多くの機械学習アプリケーションへの適用を図ります。
HPEとファインチューニング

HPEとファインチューニング

HPE (ヒューレット・パッカード エンタープライズ) のファインチューニングは、独自の機械学習データファブリック (MLDES) プラットフォーム、Gen AIサービス、Gen AI向けエンタープライズコンピューティングソリューションを使用します。これらはどれもファインチューニングを円滑にします。

  • HPE MLDES: MLDESは膨大な機械学習データセットを管理および処理します。そして機械学習モデルのファインチューニングに向けたデータの準備、モデルの訓練、展開を効率化します。データソース、バージョン管理、コラボレーションがMLDESにシームレスに統合され、ファインチューニングがシンプルになります。
  • HPE AI Services—Gen AI: HPEのGen AIソリューションは高度な分析とAIを可能にします。サービスには自然言語処理、コンピュータービジョン、予測分析ツールおよび手法が含まれます。Gen AIサービスを使えば、学習済みモデルおよびフレームワークを、タスクやデータセットに合わせてカスタマイズするために準備できます。

HPEのEnterprise Computing for Gen AI: HPEのエンタープライズコンピューティングソリューションは、ファインチューニングを含めたAIワークロードに対応しています。ソリューションにはHPCインフラストラクチャ、スケーラブルなストレージ、AI向けに最適化したクラウドサービスが含まれます。HPEエンタープライズコンピューティングを使えば、ファインチューニングを幅広く活用して、変化するニーズに対応しつつAIモデルの性能を最適化できます。

ファインチューニングとRAGの違い

特徴

ファインチューニング

RAG (検索拡張生成)

1. 手法

学習済みモデルのパラメーターを、特定のタスクやデータセットに合わせて調整します。

検索メカニズムを用いて生成タスクを増補し、検索モデルと生成モデルを組み合わせます。

2. トレーニングデータ

ファインチューニング用にタスク別の訓練データが必要です。

検索コンポーネントと生成コンポーネントの両方に大規模なテキストコーパスを使用します。

3. 適応性

幅広いタスクやドメインへの適応性があります。

主に、コンテキスト情報検索による生成に関連したタスクに適しています。

4. 性能

タスク別ファインチューニングで高性能を実現できます。

検索する情報の質と関連度に性能が大きく左右されます。

5. ユースケース

NLPやコンピュータービジョンなど、さまざまなドメインで幅広く利用できます。

コンテキスト情報が必要な質問応答、対話システム、コンテンツ生成などのタスクに特に役立ちます。

HPE Machine Learning Development Environmentソフトウェア

AI/機械学習ジャーニーのあらゆる段階でAIワークロードとAIアプリケーションの価値実現時間を短縮できます。

詳細はこちら

関連トピック

機械学習

詳細はこちら

機械学習モデル

詳細はこちら

AIモデル

詳細はこちら