Yahoo! Web API で取得した検索結果に含まれる URL を用いているので，ウェブページを取得しようとしてエラーやリダイレクトを受け取った場合，ホスト自体へのアクセス禁止期間を設けて怪しい URL をやりすごすように変更を加えました．
# URL の取得からウェブページの取得までにタイムラグがあるため，サイトの構成が変更されると怪しいリクエストが…，ということを指摘されました．
根本的な解決とはいえませんが，マシになると思います．
追記：ある程度は覚悟していましたが，必要なウェブページを排除しすぎな感があるので，何か別の方法を考えるべきかもしれません．しばらく様子を見ます…．
