2013年3月4日の日記

今日は本編はやっていませんが、URL抽出ツールの新バージョンを開発中です。
基本的な動作原理は以前のものと似たようなものですが、闇雲にクロール(すなわち絨毯爆撃)するのではなく、順序を決めて紳士的に無駄なく廻ります。
実は同じ内容で無数にURLがあるページがあるんですよね。
そんなのを何度も廻っていたら相手にとっては迷惑だし、こちらにとっても時間だけが無駄にかかっていいこと無しなのです。