線形回帰コンポーネント

  • [アーティクル]

この記事では Azure Machine Learning デザイナーのコンポーネントについて説明します。

このコンポーネントを使用して、パイプラインで使用するために、線形回帰モデルを作成します。 線形回帰では、1 つまたは複数の独立変数と数値の結果、または属性変数との間の線形関係を確立しようとします。

このコンポーネントを使用して線形回帰法を定義し、ラベル付けされたデータセットを使用してモデルをトレーニングします。 その後、トレーニング済みのモデルは、予測に使用できます。

線形回帰について

線形回帰は一般的な統計メソッドであり、機械学習に導入され、直線に合わせて誤差を測定するための多くの新しいメソッドと共に強化されています。 簡単に言えば、回帰は数値ターゲットの予測を表します。 線形回帰は、引き続き基本的な予測タスクにシンプルなモデルが必要なときに適した選択です。 線形回帰は、複雑さが欠けている高次元のスパース データのセットで適切に機能する傾向もあります。

Azure Machine Learning では、線形回帰に加えて、さまざまな回帰モデルをサポートします。 しかし、"回帰" という用語は大まかに解釈される場合があり、他のツールで提供される一部の種類の回帰はサポートされません。

  • 従来の回帰に関する問題は、1 つの独立変数と従属変数に関係します。 これは "単純回帰" と呼ばれます。 このコンポーネントでは、単純な回帰がサポートされます。

  • "複数の線形回帰" は、1 つの従属変数に関与する、2 つ以上の独立変数に関係します。 複数の入力が 1 つの数値の結果を予測するために使用される問題は、"多変量線形回帰" とも呼ばれます。

    Linear Regression (線形回帰) コンポーネントでは、その他のほとんどの回帰コンポーネントでできるように、これらの問題を解決することができます。

  • "複数ラベル回帰" は、1 つのモデル内の複数の従属変数を予測するタスクです。 たとえば、複数ラベルのロジスティック回帰で、サンプルを複数の異なるラベルに割り当てることができます。 (これは 1 つのクラス変数内に複数のレベルを予測するタスクとは異なります。)

    この種類の回帰は、Azure Machine Learning ではサポートされません。 複数の変数を予測するには、予測したい出力ごとに個別の学習者を作成します。

長年にわたって、統計学者は回帰にますます高度なメソッドを開発しています。 これは線形回帰にも当てはまります。 このコンポーネントでは、誤差を測定し、回帰直線に適合させるために 2 つのメソッドをサポートします。通常の最小二乗法メソッドと勾配降下です。

  • 勾配降下は、モデル トレーニング プロセスの各ステップで誤差の量を最小限にするメソッドです。 勾配降下には多くの変数があり、さまざまな学習に関する問題の最適化は広く学習されています。 [Solution method]\(ソリューション メソッド\) にこのオプションを選ぶと、ステップ サイズ、学習速度などを制御するために、さまざまなパラメーターを設定できます。 このオプションでは、統合パラメーターの一括処理の使用もサポートします。

  • 通常の最小二乗法は、線形回帰で最も一般的に使用される技術です。 たとえば、Microsoft Excel の分析ツールで使用されるメソッドは最小二乗法です。

    通常の最小二乗法は、実績値から予測された線までの距離の平方の合計として誤差を計算し、二乗エラーを最小限にすることでモデルを適合させる損失関数を示します。 このメソッドは、入力と従属変数との間の強力な線形関係を前提とします。

線形回帰を構成する

このコンポーネントでは、次の異なるオプションと共に、回帰モデルを調整するために 2 つのメソッドをサポートします。

通常の最小二乗法を使用して回帰モデルを作成する

  1. デザイナーで Linear Regression Model (線形回帰モデル) コンポーネントをパイプラインに追加します。

    [Machine Learning] カテゴリでこのコンポーネントを見つけることができます。 [Initialize Model]\(モデルの初期化\) を展開し、 [Regression]\(回帰\) を展開して、Linear Regression Model (線形回帰モデル) コンポーネントを自分のパイプラインにドラッグします。

  2. [プロパティ] ウィンドウの [Solution method]\(ソリューション メソッド\) ドロップダウン リストで、 [Ordinary Least Squares]\(通常の最小二乗法\) を選択します。 このオプションでは、回帰直線を見つけるために使用する計算メソッドを指定します。

  3. [L2 regularization weight]\(L2 正規化の重み\) に、L2 正規化に対する重みとして使用する値を入力します。 オーバーフィットを避けるために、ゼロ以外の値を使用することをお勧めします。

    正規化がモデルの調整にどのように影響するかの詳細については、「機械学習向けの L1および L2 正規化」

  4. 切片の用語を表示する場合、 [Include intercept term]\(切片の用語を含める\) オプションを選択します。

    回帰式を確認する必要がない場合、このオプションの選択を解除します。

  5. [Random number seed]\(乱数シード\) には、必要に応じて、モデルによって使用される乱数ジェネレーターにシードを設定する値を入力できます。

    同じパイプラインにおけるさまざまな実行を超えて同じ結果を保持する必要がある場合、シード値を使用すると便利です。 それ以外の場合、既定はシステム クロックからの値を使用します。

  6. Train Model (モデルのトレーニング) コンポーネントを自分のパイプラインに追加して、ラベル付けされたデータセットに接続します。

  7. パイプラインを送信します。

通常の最小二乗法モデルの結果

トレーニングの完了後:

オンライン勾配降下を使用して回帰モデルを作成する

  1. デザイナーで Linear Regression Model (線形回帰モデル) コンポーネントをパイプラインに追加します。

    [Machine Learning] カテゴリでこのコンポーネントを見つけることができます。 [Initialize Model]\(モデルの初期化\) を展開し、 [Regression]\(回帰\) を展開して、Linear Regression Model (線形回帰モデル) コンポーネントを自分のパイプラインにドラッグします

  2. [プロパティ] ウィンドウの [Solution method]\(ソリューション メソッド\) ドロップダウン リストで、回帰直線を見つけるために使用する計算メソッドとして、 [Online Gradient Descent]\(オンライン勾配降下\) を選びます。

  3. [Create trainer mode]\(トレーナー モードの作成\) では、定義済みのパラメーターのセットでモデルをトレーニングするかどうか、またはパラメーターの一括処理を使用することでモデルを最適化する必要があるかどうかを示します。

    • Single Parameter (単一パラメーター) : 線形回帰ネットワークの構成方法が既にわかっている場合は、特定の値のセットを引数として渡すことができます。

    • [Parameter Range]\(パラメーター範囲\) : 最適なパラメーターがわからず、パラメーター スイープを実行する場合は、このオプションを選択します。 反復する値の範囲を選択します。モデルのハイパーパラメーターの調整では、指定した設定の可能なすべての組み合わせに対して反復処理を行い、最適な結果を生成するハイパーパラメーターを決定します。

  4. [Learning rate]\(学習速度\) では、確率勾配降下オプティマイザーに初期学習速度を指定します。

  5. [Number of training epochs]\(トレーニング エポックの数\) には、アルゴリズムが例を通して繰り返す必要がある回数を示す値を入力します。 少数の例を含むデータセットでは、この数値は収束に達するために大きくなります。

  6. Normalize features (フィーチャーの正規化) : モデルをトレーニングするために使用された数値データを既に正規化している場合、このオプションの選択を解除できます。 既定では、コンポーネントによって、0 と 1 の間の範囲へのすべての数値入力が正規化されます。

    Note

    スコア付けに使用される新しいデータに同じ正規化メソッドを提供することを忘れないでください。

  7. [L2 regularization weight]\(L2 正規化の重み\) に、L2 正規化に対する重みとして使用する値を入力します。 オーバーフィットを避けるために、ゼロ以外の値を使用することをお勧めします。

    正規化がモデルの調整にどのように影響するかの詳細については、「機械学習向けの L1および L2 正規化」

  8. イテレーションが進むときに学習速度を下げる必要がある場合、 [Decrease learning rate]\(学習速度の低下\) のオプションを選択します。

  9. [Random number seed]\(乱数シード\) には、必要に応じて、モデルによって使用される乱数ジェネレーターにシードを設定する値を入力できます。 同じパイプラインにおけるさまざまな実行を超えて同じ結果を保持する必要がある場合、シード値を使用すると便利です。

  10. モデルをトレーニングします。

    Note

    パラメーター範囲を [モデルのトレーニング] に渡すと、単一のパラメーター リストの既定値のみが使用されます。

    [モデルのハイパーパラメーターの調整] コンポーネントによって、パラメーターごとに設定の範囲が求められているとき、それに単一のパラメーター値セットを渡した場合、それらの値は無視され、学習器の既定値が使用されます。

    [Parameter Range](パラメーター範囲) オプションを選択し、任意のパラメーターに単一の値を入力した場合、指定した単一の値はスイープ全体で使用されます。これは、他のパラメーターが値の範囲の中で変化する場合でも同様です。

  11. パイプラインを送信します。

オンライン勾配降下の結果

トレーニングの完了後:

次の手順

Azure Machine Learning で使用できる一連のコンポーネントを参照してください。