CloudFrontのログからGooglebotその他、User agentなどgrepで指定してIPを取得するときは、
gzファイルを解凍してできたログファイルを{LogFileName}に指定して実行。
IPの重複は出ないようにしてみました。

CloudFront Log IP extraction(Googlebot)

CloudFront Log IP extraction(Googlebot). GitHub Gist: instantly share code, notes, and snippets.

gist.github.com

awkコマンドの重複排他は以下のサイトを参考にさせていただきました。
http://akiniwa.hatenablog.jp/entry/2014/04/04/203256

関連投稿:

JAWS-UG神戸＋WordBench神戸 ふりかえり AMIMOTO.AMIハンズオン！！の前にアカウント作成 AMIMOTO.AMIハンズオン！！[設置編] Amazon Linux にyumで”CloudWatch”を入れてログが吐き出されない時メモ JAWS-UG KANSAI meetup NovemberでAmazon IVS + OBSのお話をしてきました。 Amazon Lightsail のWordPressをTailscaleからだけ接続するように設定

Powered by YARPP.