質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.50%
JSON

JSON(JavaScript Object Notation)は軽量なデータ記述言語の1つである。構文はJavaScriptをベースとしていますが、JavaScriptに限定されたものではなく、様々なソフトウェアやプログラミング言語間におけるデータの受け渡しが行えるように設計されています。

コードレビュー

コードレビューは、ソフトウェア開発の一工程で、 ソースコードの検査を行い、開発工程で見過ごされた誤りを検出する事で、 ソフトウェア品質を高めるためのものです。

Python

Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

API

APIはApplication Programming Interfaceの略です。APIはプログラムにリクエストされるサービスがどのように動作するかを、デベロッパーが定めたものです。

ChatWork

業務の効率化を目的としたコミュニケーションツール。 グループチャット、ビデオ・音声通話、ファイル共有、タスク管理などの機能を備えています。マルチデバイス対応で、ブラウザだけでなくタブレットやスマートフォンでも利用可能です。

Q&A

解決済

1回答

1314閲覧

【python】チャットワークから[info]で囲まれたメッセージを取得したい

hoshiko

総合スコア3

JSON

JSON(JavaScript Object Notation)は軽量なデータ記述言語の1つである。構文はJavaScriptをベースとしていますが、JavaScriptに限定されたものではなく、様々なソフトウェアやプログラミング言語間におけるデータの受け渡しが行えるように設計されています。

コードレビュー

コードレビューは、ソフトウェア開発の一工程で、 ソースコードの検査を行い、開発工程で見過ごされた誤りを検出する事で、 ソフトウェア品質を高めるためのものです。

Python

Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

API

APIはApplication Programming Interfaceの略です。APIはプログラムにリクエストされるサービスがどのように動作するかを、デベロッパーが定めたものです。

ChatWork

業務の効率化を目的としたコミュニケーションツール。 グループチャット、ビデオ・音声通話、ファイル共有、タスク管理などの機能を備えています。マルチデバイス対応で、ブラウザだけでなくタブレットやスマートフォンでも利用可能です。

0グッド

1クリップ

投稿2021/03/23 05:33

編集2021/03/30 05:47

前提・実現したいこと

チャットワークにて[info][/info]で囲まれたメッセージを
データとして収集したいのですが、
下記ERRORがでてしまいます。

発生している問題・エラーメッセージ

expected str, bytes or os.PathLike object, not list

上記ERRORメッセージがでてしまいます。
どのように対処すればよろしいでしょうか。

該当のソースコード

import requests
import json
import re

headers = {
'X-ChatWorkToken': 'xxxxxxxxxxxxxxxxxx',
}

response = requests.get('https://api.chatwork.com/v2/rooms/xxxxxxx/messages?force=1', headers=headers)
print(response.status_code)

if response.status_code==200:
messages = response.json()
with open('chat.log','a') as f:
for message in messages:
body = message['body']
for info in re.findall(r"info[/info]", body):
f.write(info.key + '\n')
message.encode('cp932')
message.encode('cp932', "ignore")

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

Kenji.Noguchi

2021/03/23 23:58

openはファイルを開くための関数で、書き込みではありません。findallはwithの次の行に書きましょう。
hoshiko

2021/03/24 07:09

ありがとうございます‼ERRORは表出されなくなりました。 こちら、条件分岐として[info][/info]で囲まれたテキストのみを収集したいのですが 現状別のデータも収集してしまっている状況です。 どのように修正すればよろしいでしょうか。
hoshiko

2021/03/25 05:56

ありがとうございます‼スクレイピングで来ておりました!! 「あいうえお」のような短文では[info][/info]内が取り込めていたのですが、 長文の場合取り込みが出来なかったのですが、むずかしいのでしょうか? もし長文でも取り込み可能な方法があったら、ご教授いただけますと幸いです。
Kenji.Noguchi

2021/03/30 04:46

長くても取り込めるはずですね。正規表現に当てはまらないようなパターンになっていませんか?
hoshiko

2021/03/30 04:55

ご連絡ありがとうございます。 おっしゃる通り、正規表現を修正したところ、 エンコードERRORがでてしまい、エンコードERRORの修正を追記したところ 今度は辞書型のため、エンコードできない…とのERRORが出ているのですが、 こちらはどのように修正したらよいかお分かりになりますでしょうか。 for info in re.findall(r"\[info\]([\S\s]+)\[/info\]", body): f.write(info + '\n') message.encode('cp932') message.encode('cp932', "ignore")
Kenji.Noguchi

2021/03/30 05:28

エンコードの問題では無いですね。ところで、開発サーバのチャットに明らかに本稼働のデータらしきものが入っていますが、すぐに消さないと問題になりますよ。
hoshiko

2021/03/30 05:58

ご教授いただいたコードを走らせたところ、下記のようなERRORがでてしまうのですが こちらはエンコードERRORではなさそうでしょうか。質問ばかりで申し訳ありません。。。 'cp932' codec can't encode character '\u25b6' in position 40: illegal multibyte sequence データ記載についてご指摘いただきありがとうございました。迅速に修正いたしました。 (今回は開発用アカウントだったので、重大な問題にはなりませんでしたが、 今後あってはならないので、徹底いたします。ありがとうございます)
Kenji.Noguchi

2021/03/30 06:03

長文が取り込めない...はエンコードの問題ではないのですが、ファイルの書き出し部分が問題なので回答を修正しました。こちらでテストしていませんが動くはず。
hoshiko

2021/03/30 07:37

ご回答いただきありがとうございます。 f.write(info.encode('cp932') + '\n') 今度は上記の部分に can't concat str to bytes というERRORが出ているようなのですが、 どのように修正すればよいかお分かりになりますでしょうか。 何度も申し訳ありません。。
hoshiko

2021/03/31 08:12

修正いただきありがとうございます。 f.write((info + '\n').encode('cp932')) こちらが今度は下記のように返ってきました。 write() argument must be str, not bytes 他に手立てがないか考えているのですが、思いつかず、 もし改修可能そうでしたらご教授いただけますと幸いです。 よろしくお願いいたします。
guest

回答1

0

ベストアンサー

こんな感じでいかがでしょうか。[info]から[/info]の間に改行が入っている場合でも動きます。

python3

1import requests 2import json 3import re 4 5headers = { 6 'X-ChatWorkToken': '*********' 7} 8 9info_pattern = re.compile(r'[info](.*?)[/info]', flags=re.DOTALL) 10 11response = requests.get('https://api.chatwork.com/v2/rooms/213313301/messages?force=1', headers=headers) 12 13if response.status_code==200: 14 messages = response.json() 15 with open('chat.log','ab') as f: 16 for message in messages: 17 body = message['body'] 18 for info in info_pattern.findall(body): 19 f.write((info + '\n').encode('cp932'))

投稿2021/03/25 03:57

編集2021/03/31 08:28
Kenji.Noguchi

総合スコア358

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

hoshiko

2021/03/30 04:42

ありがとうございます‼スクレイピングで来ておりました!! 「あいうえお」のような短文では[info][/info]内が取り込めていたのですが、 長文の場合取り込みが出来なかったのですが、むずかしいのでしょうか? もし長文でも取り込み可能な方法があったら、ご教授いただけますと幸いです。
Kenji.Noguchi

2021/03/30 05:31

長文と言うよりは改行が入っているのが理由です。正規表現で改行を扱う方法はいくつかあるのですが、フラグで対応してみました。
guest

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.50%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問