ログファイルから任意の文字列を取得したい

Question

a.logファイルから特定の文字列だけ取得して新ファイルに出力させたいです。

a.logファイルの中身

<123>2018-08-01T08:59:59Z ct6149 log[999999]: 11.222.333.333 "-" "-" [01/2018:08:59:59 +0000] "GET /photo/9999.jpg HTTP/1.1" 200 157305 1234 "https://www.you.net/03?t&pa=1" "Mozilla/1.0 (Win NT 10.0; AAA99; Trident/7.0; rv:11.0) like Goooo"
<123>2018-08-01T08:59:59Z ch1722 log[885560]: 33.444.555.666 "-" "-" [01/2018:08:59:59 +0000] "GET /css/main.css HTTP/1.1" 304 "-" 127 "https://www.you.net/89999?t.snu.t" "Mozilla/2.0 (iPhone; CPU iPhone OS 99_9_9 like Mac OS X) AppleWebKit/999.9.99 (KHTML, like Gecko) Version/11.0 Mobile/99M999 Safari/600.1"
<123>2018-08-01T09:00:00Z cd1878 log[121131]: 44.555.666.777 "-" "-" [01/2018:09:00:00 +0000] "GET /images/0001.jpg HTTP/1.1" 200 79906 1206 "https://www.you.net/L?&pa=4" "Mozilla/3.0 (Win NT 9.1; Trident/7.0; rv:99.0) like Gooo"
<134>2018-08-01T09:04:28Z ct6666 log[222221]: 77.888.999.000 "-" "-" [01/2018:09:04:28 +0000] "POST /api/lan HTTP/1.1" 200 28 38571 "https://www.you.net/stay" "Mozilla/5.0 (Windows NT 6.3; WOW64; Trident/7.0; Touch; rv:11.0) like Gooo"
　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　・
　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　・
上記のような内容が1000行以上続く。。。

上記を下記のように、出力しなおしたい。
(GETからURLまでに出力し直したい。)

"GET /photo/9999.jpg HTTP/1.1" 200 157305 1234 "https://www.you.net/03?t&pa=1"
"GET /css/main.css HTTP/1.1" 304 "-" 127 "https://www.you.net/89999?t.snu.t"
"GET /images/0001.jpg HTTP/1.1" 200 79906 1206 "https://www.you.net/L?&pa=4"
"POST /api/lan HTTP/1.1" 200 28 38571 "https://www.you.net/stay"
　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　・
　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　・

以下、かきかけのコードです。

path = "/div/a.log"

# 行の出力
with open(path) as f:
    lines = f.readlines()

lines_strip = [line.strip() for line in lines]

for lines in lines_strip:
	print(lines)

###参考URL
Pythonでファイル内の任意の文字列を含む行を抽出（grep的処理）
Pythonでgrepやawkのような行の抽出を行う
Pythonで文字列を分割

すみませんが、よろしくお願い致します。

Answer 1

grepもタグにあるので、grepで。Perl拡張(-Pオプション)が必要です。」

grep -P -o '] \K".*?" \S+ \S+ \S+ ".*?"'
とか
grep -P -o '^(\S+ ){8}\K(\S+ ){7}'

Comments

[s_akira]

コマンドのご回答ありがとうございます。
コマンドでも実行したかったので助かりました。実際に試してみます。

Answer 2

with open("a.log") as f:
    for line in f.readlines():
        print(*line.split()[8:], sep=" ")

Comments

[s_akira]

ご回答ありがとうございます。
参考にさせていただきます！

Answer 3

雑ですがこんな感じで出せました。

>>> import re
>>> for line in open("test.txt").readlines():
...   m = re.search("(\"GET .*http\S+)",line)
...   if m:
...     print(m.group(1))
...
"GET /photo/9999.jpg HTTP/1.1" 200 157305 1234 "https://www.you.net/03?t&pa=1"
"GET /css/main.css HTTP/1.1" 304 "-" 127 "https://www.you.net/89999?t.snu.t"
"GET /images/0001.jpg HTTP/1.1" 200 79906 1206 "https://www.you.net/L?&pa=4"

Comments

[s_akira]

上記に参考に、出力を行いました。
ご回答ありがとうございました。

Answer 4

log のフォーマット次第ですが、正規表現か区切り文字列を使用して対象を特定してやると良いです。
区切り文字列で対応可能であれば、それほど難しくは無いかと。

Comments

[s_akira]

logのフォーマットですが、一番上に載せている形になります。
簡単な内容で質問してしまっているようでしたら申し訳ありません。

[退会済みユーザー]

> logのフォーマットですが、一番上に載せている形になります。

あれはフォーマットじゃなくてサンプル。
あれじゃ、POST もあるのでは？とか、例外として区切り文字が区切り以外の箇所で発生したりしない？とか確認できないです。
文字列の操作には、フォーマットと出力内容の正確な把握が必要となります。

まぁ、Apache のログだと思うので、先人の知見をさがすのが早い気もしますが。

[s_akira]

確認したところ確かに、POSTがありました。
失礼いたしました。