Skip to main content

欠損値の補完 (時空間パターン マイニング ツール)

サマリー

空間近傍、時空間近傍、時系列、またはグローバル統計の値に基づいて欠損値 (NULL 値) を推定値に置き換えます。

欠損値の補完ツールの仕組みの詳細

欠損値の補完ツールの図

使用法

  • 入力フィーチャまたはテーブル パラメーター値には、ポイントまたはポリゴン フィーチャ、またはスタンドアロン テーブルを指定できます。

  • 入力フィーチャの場合、欠損値は空間近傍、時空間近傍、または時系列の値を使用して推定できます。 欠損値は、入力フィーチャまたはリレート テーブル内にある可能性があります。 スタンドアロン テーブルの場合、欠損値は入力フィールドのグローバル統計または時系列の値を使用して推定できます。 スタンドアロン テーブルには空間情報がないため、テーブルには空間近傍を定義できません。

  • 出力には、補完するフィールド パラメーターのフィールドごとに 3 つのフィールドが含まれます。 1 つ目のフィールドには元の値と補完値が格納され、2 つ目のフィールドには、値が推定されたことを示すインジケーターが格納されます。 推定フィールドでは元のフィールド名が維持されますが、次の命名規則を使用してフィールド エイリアスが作成されます: <field>_FILLED および <field>_ESTIMATED。 入力フィーチャの場合、3 つ目のフィールドは近傍数フィールド <field>_ N_NEIGHBORS で、推定値ごとの計算に使用されます。 スタンドアロン入力テーブルの場合、3 つ目のフィールドは、推定値ごとの計算に使用されるレコード数フィールド <field>_NUM_REC_USED です。

  • 入力フィーチャの場合、出力には、ターゲットの欠損値の計算に使用される近傍数と近傍値の範囲の理解に役立つ値が格納されるフィールドも含まれます。 補完方法 パラメーターが 平均 に設定されている場合、計算に使用された近傍の標準偏差 (<field>_STD) が報告されます。 最大近傍値 (<field>_MAX) は 最大 オプションについて報告され、最小近傍値 (<field>_MIN) は 最小 オプションについて報告されます。 補完方法 パラメーターが 中央値 に設定されている場合は、近傍の平均絶対偏差 (<field>_MAD) が報告されます。 欠損値が 時系列トレンド オプションを使用して補完される場合、<field>_RES フィールドにはスプラインの二乗残差の合計が格納されます。 NNBRS フィールドには、推定値の計算に使用される近傍数が格納されます。

  • スタンドアロン テーブルの場合、出力には、ターゲットの欠損値の計算に使用される値の統計と非 NULL 値の範囲の理解に役立つ値が格納されるフィールドが含まれます。 補完方法 パラメーターが 平均 に設定されている場合、計算に使用されたフィールドにある NULL を除くすべての値の標準偏差 (<field>_STD) が報告されます。 入力フィールドの最大値 (<field>_MAX) は 最大 オプションについて報告され、最小値 (<field>_MIN) は 最小 オプションについて報告されます。 補完方法 パラメーターが 中央値 に設定されている場合は、NULL を除く値の平均絶対偏差 (<field>_MAD) が報告されます。 欠損値が 時系列トレンド オプションを使用して補完される場合、<field>_RES フィールドにはスプラインの二乗残差の合計が格納されます。

  • NULL 値が含まれていないフィールドを挿入できます。 これらのフィールドは出力にコピーされますが、出力 (<field>_FILLED<field>_ESTIMATED など) 内で追加フィールドに関連付けられることはありません。 別の方法として、出力に追加される 一意の ID パラメーターの値を指定できます。この値は、結果を再び入力フィーチャまたはテーブルに結合するために使用できます。

  • NUM_EST フィールド (リレート テーブルを使用している場合は TOT_EST) は、関連付けられたレコードについて推定された変数の総数を示します。 このフィールドは出力マップのレンダリングに使用されます。

  • 入力にフィールドを追加 パラメーターを使用して、入力フィーチャまたはテーブルに追加フィールドを追加できます。 これらのフィールドを追加する場合、リレート テーブルを指定することはできません。

  • 入力フィーチャの場合、ロケーション ID パラメーターは、入力時空間データの構造に応じてさまざまな方法で使用できます。

    • データがリレート テーブルに格納されている場合 (つまり、時間経過にともなう属性を含むリレート テーブルを持つフィーチャクラスのフィーチャのセットがある場合) で、リレート テーブルの欠損値を補完する場合は、リレート テーブル パラメーターを使用できます。 ロケーション ID パラメーター値は、入力フィーチャクラスの各フィーチャを、リレート テーブルのレコードのセットと照合します。これは、すべての入力フィーチャについて一意である必要があります。

    • データが (形状またはジオメトリーの反復処理によって) 同じフィーチャクラスに格納されている場合、ロケーション ID パラメーターは、フィーチャクラス内の一意の各位置を指定します。 たとえば、米国の郡レベルの人口データが 10 年間分ある場合、フィーチャクラス内で各郡が 10 回反復処理され、一意の各郡の位置を指定するために郡 ID が使用されます。 ロケーション ID は、位置ごとに一意である必要がありますが、フィーチャごとに一意である必要はありません。

  • ロケーション ID の値は整数またはテキスト フィールドで、一意の固定された位置を表している必要があります。 時間の経過とともに異なる x,y 座標を指定してはなりません。

  • このツールは、反復形状として保存されたか、リレート テーブルとともに保存されたパネル データで使用できます。 ロケーション ID パラメーターに値が指定されている場合、このツールは、入力がパネル データであり、時間フィールド パラメーターが必須であることを認識します。

  • スタンドアロン テーブルの場合、ロケーション ID パラメーターに値が指定されていて、時間フィールド パラメーターに値が指定されていない場合、補完対象の NULL 値がある位置と同じロケーション ID を持つレコードを使用して推定値が計算されます。 たとえば、米国の郡レベルのデータがあり、同じ州内のすべての郡の平均を使用して欠損値を補完する場合、州を表すフィールドをロケーション ID として使用できます。

  • ロケーション ID時間フィールド の両方のパラメーター値が入力スタンドアロン テーブルの場合、補完方法 パラメーターの 時系列トレンド オプションが使用可能です。

  • 固定距離隣接エッジのみ、または 隣接エッジ コーナー オプションが 空間リレーションシップのコンセプト パラメーターで選択されている場合は、距離バンド および 時間近傍 パラメーターの値を選択して、時空間ウィンドウをシミュレートできます。

  • 固定距離隣接エッジのみ、または 隣接エッジ コーナー オプションが 空間リレーションシップのコンセプト パラメーターで選択されている場合は、空間近傍数 パラメーター値を設定して、最小近傍数を指定できます。

  • 補完方法 パラメーターの 時系列トレンド オプションは、ロケーション ID および 時間フィールド パラメーターに値が設定されている場合のみ使用可能です。

  • 時系列トレンド オプションを使用して値を補完する場合、補完対象の NULL 値がある位置は、補完する時系列の最初と最後に値を持つ期間が最低 2 つずつ存在している必要があります。 この要件のため、最初の 2 つまたは最後の 2 つの時間ステップに存在する NULL は、時系列トレンド オプションを使用して補完できません。

  • 時系列トレンド オプションは、SciPy 内挿パッケージの Interpolated Univariate Spline 手法を使用します。

  • パネル データの欠損値を空間近傍で補完するときは、時間近傍 パラメーターを 0 に設定します。

  • データがパネル データの場合、時間近傍 パラメーターを使用して、時間でフィルターできます。 または、時間近傍 の値を 0 に設定すると、空間近傍のみを表示することもできます。

  • 結果として示された補完値を検査して、それらの値が解析で有意であることを確認することが重要です。 たとえば、元のフィールドが整数であるときに、このツールが空間近傍の平均を使用して補完するように設定した場合は、結果に小数が含まれることになります。入力フィールドが個数の場合、これは有意ではない可能性があります。 さらに、時系列トレンド パラメーターに使用される手法によっては、既存の値がいずれも負ではない場合でも、結果が負の数になることがあります。 補完するフィールドが人口を示す場合、これは有意ではありません。

  • N_NEIGHBORS フィールドは、そのフィーチャの計算に含まれる近傍数を報告します。 補完方法 パラメーターが 時系列トレンド に設定されている場合、この数はその ロケーション ID 値の時系列に存在する値の数になります (たとえば、時系列での欠損値が 1 つだけの場合は、データセット内の時間ステップ数から 1 を引いた値が報告されます)。 空間リレーションシップのコンセプト パラメーター値に K 近傍時間近傍 の値を使用している場合、報告される近傍数には、指定したタイム ウィンドウ内にあるフィーチャの K 近傍が含まれます。

  • NULL 値 パラメーターは NULL 値 (欠損値) を表します。 このパラメーターは、入力形式と出力形式に応じてさまざまな方法で使用されます。

    • ジオデータベース フィーチャクラスまたはテーブルでは、NULL 値 パラメーターに値が指定されていない場合、&lt;NULL> は NULL 値 (欠損値) と見なされます。 値が指定されている場合、その値と &lt;NULL> の値がツールの出力で推定されます。

    • シェープファイルおよび dBASE テーブルでは、NULL 値 パラメーターは必須です。 入力データの NULL または欠損値を表す値を指定する必要があります (例: -9999)。

    • 入力がファイル ジオデータベース フィーチャクラスまたはテーブルで、出力がシェープファイルまたは dBASE テーブルの場合、推定できない欠損値をツール出力で表現する方法を指定するために、このパラメーターは必須です。

  • 推定して補完できない欠損値は、最初にそれらの NULL が存在していた形式、または NULL 値 パラメーターで指定された形式で出力に報告されます。

  • ツールの実行中に、補完されるフィールドの分析と特性の詳細を示すメッセージジオプロセシング ウィンドウの下部に書き込まれます。 このメッセージにアクセスするには、ジオプロセシング ウィンドウで、進行状況バーにポインターを合わせてポップアップ ボタン をクリックするか、メッセージ セクションを展開します。 ジオプロセシング履歴を通じて、以前に実行した 欠損値の補完 ツールのメッセージにアクセスすることもできます。

パラメーター

ラベル 説明 データ タイプ

入力フィーチャまたはテーブル

補完される NULL 値を含むポイントまたはポリゴン フィーチャクラス、またはスタンドアロン テーブル。

リレート テーブル パラメーター値を指定した場合、補完される NULL 値はリレート テーブルに格納されます。 入力フィーチャは、時空間近傍を指定するためにリレート テーブルの行と照合されます。

Table View

出力フィーチャまたはテーブル

(オプション)

補完 (推定) 値を含む出力フィーチャまたはスタンドアロン テーブル。

リレート テーブル パラメーター値が指定されている場合、このパラメーターの出力には、各位置の推定値の数が格納され、出力テーブル パラメーター値には補完 (推定) 値が格納されます。

Feature Class; Table

補完するフィールド

欠損値 (NULL 値) を含む数値フィールド。

Field

補完方法

適用される計算のタイプを指定します。 時系列トレンド オプションは、ロケーション ID および 時間フィールド パラメーター値が指定されている場合のみ使用可能です。

  • 平均NULL 値は、フィーチャの近傍の平均値、またはスタンドアロン テーブルの場合は補完されるフィールドの平均値に置き換えられます。

  • 最小NULL 値は、フィーチャの近傍の最小値、またはスタンドアロン テーブルの場合は補完されるフィールドの最小値に置き換えられます。

  • 最大NULL 値は、フィーチャの近傍の最大値、またはスタンドアロン テーブルの場合は補完されるフィールドの最大値に置き換えられます。

  • 中央値NULL 値は、フィーチャの近傍の中央値 (並べ替えたときの中央値)、またはスタンドアロン テーブルの場合は補完されるフィールドの中央値に置き換えられます。

  • 時系列トレンドNULL 値は、一意の位置におけるトレンドに基づいて置き換えられます。

String

空間リレーションシップのコンセプト

(オプション)

フィーチャ間の空間リレーションシップをどのよう定義するかを指定します。

  • 固定距離各フィーチャの指定された臨界距離 (距離バンド パラメーター値) 内にある隣接フィーチャが計算に含められます。臨界距離外のものはすべて除外されます。

  • K 近傍最も近い K 個のフィーチャが計算に含められます。K は指定した数値パラメーターです。

  • 隣接エッジのみ境界またはオーバーラップを共有する隣接ポリゴンだけが、ターゲットのポリゴン フィーチャの計算に影響を与えます。

  • 隣接エッジ コーナー境界、ノード、またはオーバーラップを共有するポリゴン フィーチャはターゲットのポリゴン フィーチャの計算に影響を与えます。

  • 空間加重をファイルから取得空間リレーションシップは、指定した空間加重ファイルで定義されます。 空間加重ファイルへのパスは、加重マトリックス ファイル パラメーターで指定します。

String

距離バンド

(オプション)

空間リレーションシップのコンセプト パラメーターの 固定距離 オプションのカットオフ距離。 ターゲット フィーチャに対して指定した制限から外れたフィーチャは、そのフィーチャの計算において無視されます。 このパラメーターは、隣接エッジのみ隣接エッジ コーナー オプションでは使用できません。

Linear Unit

時間近傍

(オプション)

ターゲット フィーチャの計算に使用されるフィーチャを決定する、前後の時間間隔。 ターゲット フィーチャのこの間隔に含まれないフィーチャは、そのフィーチャの計算において無視されます。

Time Unit

時間フィールド

(オプション)

データセット内の各レコードのタイムスタンプが格納されるフィールド。 このフィールドは Date タイプである必要があります。

フィーチャ入力の場合、時間フィールドは、欠損値を補完するときの時間近傍を定義します。 リレート テーブルを指定した場合、値を入力する必要があります。

フィーチャおよびテーブル入力の場合、その位置で時系列的トレンドを使用して欠損値を補完するときに、時間フィールドが使用されます。

Field

空間近傍数

(オプション)

計算に含まれる最近傍の数。

空間リレーションシップのコンセプト パラメーターの 固定距離隣接エッジのみ、または 隣接エッジ コーナー オプションが選択されている場合、この数は、計算に含める近傍の最小数を示します。

Long

ロケーション ID

(オプション)

各位置を示すユニーク ID を含む整数またはテキスト フィールド。

リレート テーブルが指定されている場合、このフィールドは、各入力フィーチャをリレート テーブルの行と照合するために使用されます。このフィールドの値は、入力フィーチャごとに一意である必要があります。 リレート テーブルが指定されていない場合、このフィールドは、入力フィーチャ内の一意の各位置を指定して時間近傍を決定するために使用されます。 この場合、このフィールドの値は位置ごとに一意である必要がありますが、フィーチャごとに一意である必要はありません (複数のフィーチャが同じ位置である可能性があります)。

Field

リレート テーブル

(オプション)

入力フィーチャまたはテーブル パラメーターの各フィーチャの時系列データが格納されるテーブルまたはテーブル ビュー。

Table View

リレート ロケーション ID

(オプション)

リレートのベースとなる ロケーション ID パラメーター値が格納されている、リレート テーブル パラメーター内の整数またはテキスト フィールド。

Field

空間加重マトリックス ファイル

(オプション)

フィーチャ間の空間リレーションシップ、および潜在的に時系列のリレーションシップを定義する加重が含まれたファイルへのパス。

File

一意の ID

(オプション)

入力フィーチャまたはテーブル パラメーター値のレコードごとに異なる値を持つ整数フィールド。 このフィールドは、結果を再び元のデータセットに結合するために使用できます。

Unique ID フィールドがない場合は、整数フィールドを入力フィーチャの属性テーブルに追加し、FID/OBJECTID フィールドに等しいフィールド値を計算することによって作成できます。

Field

NULL 値

(オプション)

NULL (欠損) 値を表す値。 値が指定されない場合、&lt;NULL> はジオデータベース フィーチャクラスとテーブルを表すと見なされます。 値が指定されている場合、値とすべての &lt;NULL> 値の両方が補完されます。 入力または出力がシェープファイルまたは dBASE テーブルの場合、NULL プレースホルダーの数値は必須です。

Double

出力テーブル

(オプション)

補完 (推定) 値が格納される出力テーブル。

リレート テーブルが指定されている場合、出力テーブルは必須です。

Table

入力データにフィールドを追加

(オプション)

補完値フィールドを入力データに追加するか、補完値フィールドを使用して出力フィーチャクラスまたはテーブルを作成するかを指定します。 フィールドを追加する場合、リレート テーブルを指定することはできず、出力データの座標系環境は無視されます。

  • オン補完値を含むフィールドが入力データに追加されます。 このオプションによって、入力データが変更されます。

  • オフ補完値を含む出力フィーチャクラスまたはテーブルが作成されます。 これがデフォルトです。

Boolean

派生した出力

ラベル 説明 データ タイプ

更新された入力フィーチャまたはテーブル

補完値フィールドを含む更新済みの入力フィーチャまたはテーブル。

Table View

環境

出力座標系, 地理座標系変換

ライセンス情報

  • Basic: はい
  • Standard: はい
  • Advanced: はい