20分の通信が3つのファイルに
Zeek は、生の通信をログに変えるネットワーク監視の道具です。接続のファイル、DNS の問い合わせのファイル、Web のリクエストのファイルを書きます。アナリストは、パケットよりこのログをずっと多く読みます。
20分のキャプチャーには何百ものパケットがあります。Zeek のログは会話ごとに1行なので、人が読めます。架空のオフィスの通信を、自分のラボのコピーだけで読みます。
このレッスンのゴール
メモ
Zeek の conn、dns、http のログを読んで、どのマシンがどこと話したかが分かる。
キーワード
| ことば | いみ | れい |
|---|---|---|
| パケットキャプチャー | ネットワークを通ったパケットを記録したファイル | office.pcap |
| Zeek | ネットワークの通信についてログを書く監視の道具 | |
| 接続 | 2台のマシンの間の1つの会話で、多くのパケットからなる | |
| フィールド | ログの中の名前のついた列1つ | |
| uid | Zeek が接続につける ID で、どのログでも同じ | |
| zeek-cut | 名前を挙げた列だけを表示する道具 |
学生が入力するセルは、このプレビューでは空白です。
たった1つのルール
重要
通信を記録して読むのは、自分のネットワークか、見る許可を書面でもらったネットワークだけです。このラボのオフィスは架空で、キャプチャーは固定です。許可なく他人の通信を記録すると、犯罪になることがあります。
キャプチャーが3つのログになる
Zeek はキャプチャーを読み、conn.log、dns.log、http.log を書きます。Zeek は Ubuntu のアーカイブにないので、ラボには私たちの小さなモデル zeek-lite があります。Zeek の形式で、Zeek のフィールドの一部を書きます。
Run でラボのフォルダーに移り、オフィスのキャプチャーをログに変え、conn.log の列の名前を挙げた行を表示します。
ラボのフォルダーに移る
cd ~/detectここでは表示のみで、実行されません。「ラボを開始」を押すと、自分のラボのターミナルに入力できます。
キャプチャーをログに変える
zeek-lite -r pcaps/office.pcapここでは表示のみで、実行されません。「ラボを開始」を押すと、自分のラボのターミナルに入力できます。
列の名前を読む
grep "^#fields" conn.logここでは表示のみで、実行されません。「ラボを開始」を押すと、自分のラボのターミナルに入力できます。
例: conn.log のおもなフィールド
| フィールド | 中身 | 例 |
|---|---|---|
| ts | 接続が始まった時刻 (秒) | 1793610030.596105 |
| id.orig_h | 接続を始めたマシン | 10.20.1.15 |
| id.resp_h | 応答したマシン | 198.51.100.23 |
| id.resp_p | 応答したポート | 80 |
| service | Zeek が見分けたプロトコル | http |
| conn_state | どう終わったか、ふつうに終われば SF | SF |
学生が入力するセルは、このプレビューでは空白です。
conn.log で誰が誰と話したか分かる
zeek-cut は、名前を挙げた列だけを、挙げた順に表示します。1つ目の Run は最初の4つの接続を見せます。送り元、送り先、ポート、プロトコル、サービスです。
2つ目は、マシンの組ごとに数え、多い順に並べます。10.20.1.15 という1台が、1つのアドレスに Web の接続を20回しています。ほかに近いものはありません。
最初の4つの接続
zeek-cut id.orig_h id.resp_h id.resp_p proto service < conn.log | head -n 4ここでは表示のみで、実行されません。「ラボを開始」を押すと、自分のラボのターミナルに入力できます。
接続の多いマシンの組
zeek-cut id.orig_h id.resp_h service < conn.log | sort | uniq -c | sort -rn | head -n 5ここでは表示のみで、実行されません。「ラボを開始」を押すと、自分のラボのターミナルに入力できます。
よくある間違い
注意
conn.log の1行は1つのパケットだ、と考える人が多いです。実際は1つの会話まるごとです。ここでの Web のリクエストは8パケットで、ハンドシェイク、リクエスト、応答、終わりのあいさつからなります。フィールド orig_pkts と resp_pkts がその数です。
dns.log と http.log で問いが分かる
dns.log は問い合わせごとに1行で、引いた名前と答えが入ります。http.log は Web のリクエストごとに1行で、メソッド、ホスト、アドレス、そしてユーザーエージェントが入ります。ユーザーエージェントは、ソフトウェアが名乗る名前です。
1つ目の Run は、引かれた名前をすべて数えます。2つ目は、Web のリクエストをマシンとユーザーエージェントごとに数えます。
オフィスが引いた名前すべて
zeek-cut query answers < dns.log | sort | uniq -cここでは表示のみで、実行されません。「ラボを開始」を押すと、自分のラボのターミナルに入力できます。
マシンとエージェントごとのリクエスト
zeek-cut id.orig_h method host uri user_agent < http.log | sort | uniq -c | sort -rn | head -n 3ここでは表示のみで、実行されません。「ラボを開始」を押すと、自分のラボのターミナルに入力できます。
試そう: 名前で1行を読む
header = "#fields\tts\tuid\tid.orig_h\tid.resp_h\tservice"
line = "1793610030.5\tCx1\t10.20.1.15\t198.51.100.23\thttp"
names = header.split("\t")[1:]
row = dict(zip(names, line.split("\t")))
print(row["id.orig_h"], "から", row["id.resp_h"], "へ、", row["service"], "で通信")
# 接続の uid も表示しましょう。