質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

ただいまの
回答率

90.51%

  • Python

    7973questions

    Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

  • Python 3.x

    6387questions

    Python 3はPythonプログラミング言語の最新バージョンであり、2008年12月3日にリリースされました。

[python]pandas での重複削除について

解決済

回答 1

投稿 編集

  • 評価
  • クリップ 0
  • VIEW 483

Dadada_c.

score 35

pandasで読み込んだcsv処理(重複削除&文字列置き換え)について

いつもありがとうございます。優しいご指導を頂けているおかげで勉強する意欲がでてきます!
今回も何卒宜しくお願い致します。

pandasで読み込んだcsvで重複を削除し、そのあとに指定列の中の指定文字列を置き換えたいです。

# coding: UTF-8
#!/usr/bin/env python

import pandas as pd

df = pd.read_csv('1.csv',encoding='shift_jis')
delete = df.drop_duplicates(['カラム1','カラム2'])
df['カラム3'].str.replace('/','')
df['カラム4'].str.replace('1921','19').str.replace('1800','18')

delete.to_csv('sample.csv',encoding='shift_jis',mode='w')

df.drop_duplacates で二つのカラムを比較して重複を削除し、
指定のカラムの中の「/」を削除と指定文字列の置き換えを行いたく、
処理を書いてみたのですが下記のエラーがでます。
dfに対して .str が不可なのは理解できたのですが、どのように書いていいか見当がつかず、
ご質問させていただきました。

なにか参考にすればいいインデックスなどがございましたら合わせてご教示頂けると幸いです。
お手数をおかけしますが宜しくお願い致します。

追記(エラーについて)

大変失礼致しました。エラー内容は下記になります。
よろしくお願い致します。

AttributeError: Can only use .str accessor with string values, which use np.object_ dtype in pandas

修正コード

df = pd.read_csv('1.csv',encoding='shift_jis')
delete = df.drop_duplicates(['注文番号','注文者郵便番号1'])
df['お届け時間帯'].replace(1921,19).replace(1416,14) #int64
df['お届け日指定'].str.replace('-' , '') #object (-を削除)

delete.to_csv('sample.csv',encoding='shift_jis',mode='w')

重複した値を削除して、残ったデータ中の指定カラムで指定文字列を置き換えて、
最後はそのリストをcsvに出力したいです。

  • 気になる質問をクリップする

    クリップした質問は、後からいつでもマイページで確認できます。

    またクリップした質問に回答があった際、通知やメールを受け取ることができます。

    クリップを取り消します

  • 良い質問の評価を上げる

    以下のような質問は評価を上げましょう

    • 質問内容が明確
    • 自分も答えを知りたい
    • 質問者以外のユーザにも役立つ

    評価が高い質問は、TOPページの「注目」タブのフィードに表示されやすくなります。

    質問の評価を上げたことを取り消します

  • 評価を下げられる数の上限に達しました

    評価を下げることができません

    • 1日5回まで評価を下げられます
    • 1日に1ユーザに対して2回まで評価を下げられます

    質問の評価を下げる

    teratailでは下記のような質問を「具体的に困っていることがない質問」、「サイトポリシーに違反する質問」と定義し、推奨していません。

    • プログラミングに関係のない質問
    • やってほしいことだけを記載した丸投げの質問
    • 問題・課題が含まれていない質問
    • 意図的に内容が抹消された質問
    • 広告と受け取られるような投稿

    評価が下がると、TOPページの「アクティブ」「注目」タブのフィードに表示されにくくなります。

    質問の評価を下げたことを取り消します

    この機能は開放されていません

    評価を下げる条件を満たしてません

    評価を下げる理由を選択してください

    詳細な説明はこちら

    上記に当てはまらず、質問内容が明確になっていない質問には「情報の追加・修正依頼」機能からコメントをしてください。

    質問の評価を下げる機能の利用条件

    この機能を利用するためには、以下の事項を行う必要があります。

質問への追記・修正、ベストアンサー選択の依頼

  • kentashx

    2018/06/28 09:10

    下記のエラーとは,どのエラーを指すのでしょうか?

    キャンセル

  • efcode

    2018/07/02 07:17

    1.csvも提示してください。

    キャンセル

回答 1

checkベストアンサー

0

とりあえず、

print(df.dtypes)

を実行して、各列がどのような型を取っているのかを把握してください。

で、pandasのString accessor df.str ですが、これは対象となる列がObject型の時に、要素となる文字列にアクセスする為のものであるので、数値型の列などで使用しようとすると質問で記述されておりますエラーが発生します。

対策に関しては、実際のデータが提示されていないので私の想像になりますが、

df['カラム4'].str.replace('1921','19').str.replace('1800','18')

の箇所で、'カラム4'は 実際は数値型なのではないでしょうか?

その場合 行いたいことは文字列の置き換えではなくて数値の置き換えですので

df['カラム4'].replace(1921,19).replace(1800,18)

で良いかと思います。

投稿

  • 回答の評価を上げる

    以下のような回答は評価を上げましょう

    • 正しい回答
    • わかりやすい回答
    • ためになる回答

    評価が高い回答ほどページの上位に表示されます。

  • 回答の評価を下げる

    下記のような回答は推奨されていません。

    • 間違っている回答
    • 質問の回答になっていない投稿
    • スパムや攻撃的な表現を用いた投稿

    評価を下げる際はその理由を明確に伝え、適切な回答に修正してもらいましょう。

  • 2018/07/03 14:25

    ご回答ありがとうございます!上記にプログラムを修正した通りに行ってみたのですが、文字が置き換わらりません。。添付ファイルを添付しますのでご教示頂けますと幸いです。
    何卒宜しくお願い致します。

    https://15.gigafile.nu/0710-c88435bf770e4ec249048e74069466645

    キャンセル

  • 2018/07/03 14:41

    データありがとうございます。

    文字が置き換わらない原因ですが、文字置換をした結果で上書きしていないからですね。
    以下のように記述してみてください。

    df['お届け時間帯'] = df['お届け時間帯'].replace(1921,19).replace(1416,14)
    df['お届け日指定'] = df['お届け日指定'].str.replace('-' , '')

    あと、"お届け日時指定" ですが、現状では文字列で取り込んでおりますが、用途によっては datetime型で取り込んでも良いかもしれません

    df = pd.read_csv('1.csv',encoding='shift_jis', parse_dates=['お届け日指定'])

    キャンセル

  • 2018/07/10 17:16

    回答が遅くなりまして申し訳ございません!出張が重なり・・・無事できました!!
    いつもご丁寧に助けてくださりまして本当にありがとうございます!今後ともよろしくお願いいたします

    キャンセル

15分調べてもわからないことは、teratailで質問しよう!

  • ただいまの回答率 90.51%
  • 質問をまとめることで、思考を整理して素早く解決
  • テンプレート機能で、簡単に質問をまとめられる

関連した質問

同じタグがついた質問を見る

  • Python

    7973questions

    Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

  • Python 3.x

    6387questions

    Python 3はPythonプログラミング言語の最新バージョンであり、2008年12月3日にリリースされました。