重複した文字列の排除

Question

重複した文字列を排除したいです
たとえば以下のtextを処理して"あいうえお"のみ出力したいです

text = "あいうえおあいうえおあいうえお"

言語はRubyでお願いします

追記です
説明不足ですみませんでした
いま以下のようなプログラムを書いています

require 'natto'

s = File.read("./bocchan.txt")

natto = Natto::MeCab.new
natto.parse(s) do |n|
	parts = n.feature.split(',')[0]
	particle = n.surface


	if parts == "助詞"
		puts particle
	else

	end
end

これはbocchan.txtという夏目漱石の『ぼっちゃん』のデータが入っているファイルから助詞だけを抜き出すプログラムです
このままだと、重複した助詞がそのまま出力されてしまいます
そこで下から5行目のputs particleの前後で何らかの処理を施して、重複を取り除きたいと考えています
お手数ですがもしお分かりになれば回答のほどよろしくお願いします

以下はbocchan.txtの冒頭です

親譲りの無鉄砲で小供の時から損ばかりしている。小学校に居る時分学校の二階から飛び降りて一週間ほど腰を抜かした事がある。なぜそんな無闇をしたと聞く人があるかも知れぬ。別段深い理由でもない。新築の二階から首を出していたら、同級生の一人が冗談に、いくら威張っても、そこから飛び降りる事は出来まい。弱虫やーい。と囃したからである。小使に負ぶさって帰って来た時、おやじが大きな眼をして二階ぐらいから飛び降りて腰を抜かす奴があるかと云ったから、この次は抜かさずに飛んで見せますと答えた。

Answer 1

こんにちは。

以下のように、出現する助詞を入れていく配列を用意して、
重複チェックに使うというのはいかがでしょうか？

[ykt68@sakura-vps] date
2015年 5月 13日 水曜日 21:01:01 JST
[ykt68@sakura-vps] cat question9794.rb

require 'natto'

s = File.read("./bocchan.txt")

josiArray = Array.new

natto = Natto::MeCab.new
natto.parse(s) do |n|
    parts = n.feature.split(',')[0]
    particle = n.surface

    if parts == "助詞"
      if !josiArray.include?(particle)
        josiArray << particle
        puts particle
      end
    else

    end
end

[ykt68@sakura-vps] ruby question9794.rb
の
で
から
ばかり
て
に
ほど
を
が
と
かも
も
は
や
ぐらい
か
[ykt68@sakura-vps]

ご参考になりましたら幸いです。

Comments

[hfhff]

ykt68さんの回答を実行したところうまくできました
今回は私の意図した通りの動作をする回答の中で、もっとも早く回答をくださったykt68さんをベストアンサーにさせていただきました
ありがとうございました

他の方も回答くださりありがとうございます(こちらにまとめて回答させていただきます)
Hashでのかき方参考になりました
出現回数も出力してくださりありがとうございます

Answer 2

ベストアンサーの Array をつかったコードを Hash で書き直してみました。
(各 助詞の出現回数も出力してみました)

# coding: utf-8
require 'natto'

s = File.read("./bocchan.txt")
josiHash = Hash.new(0)

natto = Natto::MeCab.new
natto.parse(s) do |n|
  parts = n.feature.split(',')[0]
  particle = n.surface

  josiHash[particle] += 1 if parts == '助詞'
end

puts josiHash.keys.sort
puts '-----------'
josiHash.each do |k, v|
  puts "#{k}:\t#{v}"
end

実行結果：

か
かも
から
が
ぐらい
て
で
と
に
の
は
ばかり
ほど
も
や
を
-----------
の:	5
で:	3
から:	7
ばかり:	1
て:	8
に:	4
ほど:	1
を:	5
が:	5
と:	4
かも:	1
も:	2
は:	2
や:	1
ぐらい:	1
か:	1

Answer 3

Hashでもできますよ．出現数を数えてみました．

if parts == "助詞"      
  if josiHash.include?(particle)        
    josiHash[particle] += 1;
  else
    josiHash[particle] = 0;
    puts particle
  end
else

end

Answer 4

何をやりたいのかよく分かりませんが、「1文字単位で重複を排除」でいいなら、

text = "あいうえおあいうえおあいうえお"

result = text.each_char.to_a.uniq.join
p result #=> "あいうえお"

追記：
textが非常に大きくて、登場する文字の種類が少なければこっちがいいかも。

text = "あいうえおあいうえおあいうえお"

result = text.each_char.with_object({}){|x,o|o[x]=true}.keys.join
p result #=> "あいうえお"

Answer 5

puts "あいうえおあいうえおあいうえお".split('').uniq.join

お求めの回答になっていなかったとしたら申し訳ありません。

Answer 6

とりあえず繰り返されている "あいうえお" を出力するだけなら下記のようにすれば出来ますが、「重複した文字列を排除」というのが具体的にどういうことなのかわからなければ、これで良いのかどうかはなんとも言えません。

text = "あいうえおあいうえおあいうえお"
text.match(/^(.*?)\1*$/)[1]

Comments

[hfhff]

説明不足ですみませんでした
追記したのでよろしければお願いします