csvファイル化するには

Question

自身で作成したcsvファイルから、条件で抽出したリストを新たにcsvファイル化するにはどのようなコードを記述すればよろしいでしょうか。

import requests
from bs4 import BeautifulSoup
import pandas as pd

df_file = pd.read_csv("lyrics2023.csv")

def get_popular(year):
    
    # ページの内容を取得
    response = requests.get(year)
    
    # ページの内容をBeautifulSoupで解析
    soup = BeautifulSoup(response.text, 'html.parser')
    
    # 歌手名が含まれる要素を抽出
    artist_elements = soup.find_all(class_='jp-page-sl-cell-artist')
    
    # 曲名が含まれる要素を抽出
    songname_elements = soup.find_all(class_='jp-page-sl-cell-song')
    
    popular_artist = []
    
    popular_songname = []
    
    for artist_element in artist_elements:
        popular_artist.append(artist_element.text)
    
    for songname_element in songname_elements:
        popular_songname.append(songname_element.text)
    
    return popular_artist, popular_songname

#1980年人気曲抽出

url = 'https://www.joysound.com/web/s/karaoke/memories/ranking/1980'

filtered = []
    
popular_artist, popular_songname =  get_popular(url)
    
for a, t in zip(popular_artist, popular_songname):
    
    filtered.append(df_file[(df_file["Artist"] == a) & (df_file["SongTitle"] == t)])
    
    df_filtered_1980 = pd.concat(filtered)
    
df_filtered_1980

コード

Comments

[TakaiY]

> 自身で作成したcsvファイルから、条件で抽出したリストを新たにcsvファイル化する
「から」とあるのに、Web「から」条件で抽出しているように見えるのですが、やりたいこととできていること、わからないことを整理していただけますか。
回答はここではなく、質問を編集してください。

Answer 1

新たにcsvファイル化する

pandas.DataFrame.to_csv — pandas 2.2.2 documentation を使うとよいかと思います。

import pandas as pd

def get_popular(url):
    # ページの内容を取得
    df = pd.read_html(url, attrs = {'class': 'jp-page-sl-songlist-ptn01'})[0]
    return df[['歌手名', '曲名']].set_axis(column_names, axis=1)

#1980年人気曲抽出
url = 'https://www.joysound.com/web/s/karaoke/memories/ranking/1980'
column_names = ['Artist', 'SongTitle']

popular =  get_popular(url)
df_file = pd.read_csv('lyrics2023.csv')
df_filtered_1980 = pd.merge(df_file, popular)
df_filtered_1980.to_csv('filtered_1980.csv', index=False)

Comments

[otetsu04310431]

回答ありがとうございます！
コード試したのですが、上記の画像とは全く違ったリストになります。
うまく歌手名と曲名を適応できていないのですが、どのように修正すればよろしいでしょうか。

[otetsu04310431]

すみません！
勘違いでした。コードうまく実行できました！

[otetsu04310431]

繰り返し質問すみません！
url = https://www.sound-cafe.jp/search/year-list/12006
を使用する場合
df = pd.read_html(url, attrs = {'class': 'jp-page-sl-songlist-ptn01'}　この部分をどのように変更すればよろしいでしょうか。

[melian]

そのウェブサイトではテーブル(table 要素)ではなく ul 要素が使われています。Pandas の read_html（） はテーブル要素を抽出・取得しますので、別の対応(例えば BeautifulSoup を使うなど)が必要になります。なので、新たに質問を立てる方がよいかと思います。

[otetsu04310431]

わかりました。
ありがとうございます！
回答していただいたコード、質問に使用させていただいてもよろしいでしょうか。

[melian]

はい、構いません。

[otetsu04310431]

ありがとうございます。