Grub's Distributed Web Crawling Project
http://grub.org/
別のサイトのアクセスログで、最近ちらほらと目にする grub-client というユーザーエージェントが気になったので調べてみたら、分散型クローラーなんてものが出てきていたのね。インターネットウォッチに関連記事が。ふーむ、商業的に利益を上げてしまうのか……試してみようと思ったけど、ちょっと及び腰に。ビジターだと思っていたのが実はロボットだったというのにもがっかり。
http://grub.org/
別のサイトのアクセスログで、最近ちらほらと目にする grub-client というユーザーエージェントが気になったので調べてみたら、分散型クローラーなんてものが出てきていたのね。インターネットウォッチに関連記事が。ふーむ、商業的に利益を上げてしまうのか……試してみようと思ったけど、ちょっと及び腰に。ビジターだと思っていたのが実はロボットだったというのにもがっかり。