ネットワーククラスタリングについて (1)
大学院での研究では、一部ネットワークにまつわるものをやっていました。ネットワークといっても通信の方ではなく、ノードとエッジから構成されるグラフの方です。 最近は、ネットワークの構造に基づいてノードを教師なしで分類していくネットワーククラスタリングに興味があり、備忘録がてらまとめていきます。また、ここでは簡単のため重複エッジや自己ループを許さない無向グラフのみを対象とします。
0. コミュニティとは
ネットワーク科学では、ノードのクラスタのことをしばしば「コミュニティ」とよびます。人間や企業などの主体をノードとして扱うことが多いからかもしれません。コミュニティの定義は難しそうですが、感覚的な特徴には以下のようなものが考えられます。
- コミュニティ内では繋がりが密である
- 大きなネットワークの一部分である
- コミュニティ外のノードとよりも、コミュニティ内との繋がりが強い
このような感覚的な表現を出発として、コミュニティを表すような様々な概念が定義されてきました。
1. クリーク
「大きなネットワークの一部分では、その全てのノード同士が結びついている」
このような状況は、コミュニティとみなすのに易いでしょう。このような部分グラフを、クリークといいます。クリークを以下で定義します。ここで「極大である」とは、クリーク内のすべてのノードと接続しているノードがクリーク外に存在しないことを意味します。
クリーク:極大である完全誘導部分グラフ
ネットワークにおいて三角形はよく見られますが、大規模なクリークを発見することは難しいでしょう。ノード数が増えたときは「完全部分グラフ」であることが難しくなるため、様々なクリークの条件を緩和することが考えられてきました。
2. クリークの条件緩和
クリークよりも弱いものを紹介します。
- -クラン:含まれる任意のノードどうしの距離が以下であるような極大誘導部分グラフ。直径が以下となります
- -クラブ:-クランのうち、直径がであるもの
- -プレックス:含まれるどの頂点の次数も以上である極大誘導部分グラフ
- -コア:どの頂点の次数もを下回らない誘導部分グラフ。-プレックスのがクリークとの差を表すのに対し、-コアのは絶対的な次数です
また、ネットワークのノード数や密度は様々であるため、コミュニティ内とコミュニティ外の相対的な割合をみる強いコミュニティと弱いコミュニティが知られています。
準備として、個ノードで構成されるネットワークの部分グラフのノード集合をとする。また、の隣接行列をとします。 の要素は、ノードが接続されているとき1、接続されていないとき0です。 ここで、ノードが部分グラフに対して持つ内部次数と外部次数を定義します。 自体が部分グラフに属しているかどうかは関係ないことに注意が必要です。
- 内部次数:
- 外部次数:
内部次数と外部次数を用いて弱いコミュニティ、強いコミュニティは次のように定義されます。
- 強いコミュニティ:コミュニティ内の任意のノードで
- 弱いコミュニティ:
3. 凝集性 (cohesion)
強いコミュニティ・弱いコミュニティは「コミュニティとみなせるか否か」を与える定義ですが、「コミュニティになっている程度」を連続値として与える凝集性という指標がしられています。ここで、は部分グラフ内のノード数とします。
- 凝集性:
凝集性は(部分グラフ内での密度) / (部分グラフ内から部分グラフ外に対する密度)で表されているため、「凝集性が1以上であれば、また大きければ大きいほど、部分グラフは外部と区別でき、コミュニティの傾向をもっている」と解釈することができます。
4. モジュラリティ
以上では、1つのコミュニティのあり方について、様々な定義や程度の指標を見てきました。実際のネットワーククラスタリングでは、ネットワーク全体を複数のクラスタに分けることを行います。このような問題はグラフ分割とよばれることがあり、特にモジュール数が自動的に決定されるようなタスクをコミュニティ検出といったりします。妥当なクラスタリングを行うためには「分割の質の良さ」を測る必要がありますが、特に有名な指標としてモジュラリティ (modurality)が知られています。
モジュラリティの根底にあるアイデアは、「ランダムグラフはコミュニティ構造をもたない」というものです。コミュニティの特徴をもう一度振り返ると、「部分グラフ内に張られるリンクの割合がそれ以外よりも多い」ことが重要でした。つまり、与えられた分割に対して、「グループ内で張られているエッジの割合」と「エッジがランダムに張られた場合の期待値」との差が重要になります。
いま、ネットワークを個の部分グラフに分割し、部分グラフ間に張られるエッジ数の割合を要素にもつの行列を用意します。つまり、の要素はとなります。 の対角成分は分割されたグループ内で張られるエッジの割合であり、非対角成分は異なるグループ間で張られるエッジの割合です。 また、グループ に接続するエッジの割合を考えると、の行和となります。
もしネットワークが完全にランダムであり、コミュニティ構造を持たないなら、はで独立になるため、それぞれの行和の積と期待されます。 よって、「グループ内で張られているエッジの割合」と「エッジがランダムに張られた場合の期待値」との差を表すモジュラリティ指標は次式で定義することができます。
- モジュラリティ:
大規模なネットワークではモジュラリティを最大化する厳密解を得るのは困難ですが、近似解を得るような様々なアルゴリズムが存在します。