id:yuku_t に素晴らしいコマンドを教えてもらいました。
uniq -c -c, --count prefix lines by the number of occurrences
yuku_t 2012/10/04 10:35
http://d.hatena.ne.jp/takuya_1st/20121003/1349261720#c
僕なら
cat test | sort | uniq -c | sort -r
てやります。
そうかっ!uniq に僕の求めていたコマンドはあった。
早速使ってみる。
同じようなリンクが重複してないか調べる
curl http://b.hatena.ne.jp/ | grep href| sort | uniq -c | sort
結果
3 <a href="http://b.hatena.ne.jp/search/tag?q=%E7%94%9F%E6%B4%BB" rel="tag" class="tag">生活</a> 3 <li class="domain"><a class="domain" href="/entrylist?url=http://alfalfalfa.com/">alfalfalfa.com</a></li> 3 <li class="domain"><a class="domain" href="/entrylist?url=http://gigazine.net/">gigazine.net</a></li> 3 <li class="domain"><a class="domain" href="/entrylist?url=http://matome.naver.jp/">matome.naver.jp</a></li>
これぞ求めていたものだ。自分で作らなくても良かった。uniqならどこでも使えるから安心です!
yuku_tありがとございます!