2015-01-17から1日間の記事一覧
リンク切れとか、今どき起きないよね・・・ と思ってた時期がわたしにもありました。しかし実際にリンク切れが起きるんだから仕方ない。 404 チェッカーをwget の spider 機能で実現する wget --spider -o ~/wget.log -e robots=off -r -p http://www.exampl…
wget はマルっと処理するのに便利だ wget -r http://takuya-1st.hatenablog.jp/ これだけ 出力はドメイン名のフォルダに出てくる たとえば、こんなかんじに。リンクを辿って、HTMLを保存してくれる。ちなみに画像とか別ドメインへのリンクは、このままだと保…