Entries tagged with “Crawler” from DBA notes
此 Grub 非彼 GRUB (GNU GRUB)。今天看到卢亮的 Larbin 一种高效的搜索引擎爬虫工具 一文提到 Nutch，Google 找了一下，发现了这个 Grub。此 Grub 是个分布式应用程序(类似 SETI@home ，寻找地外智能生物)，该软件的目标有些惊人：
track down every site in the world and provide a real-time map of the Web
继续阅读>> Grub-分布式Web爬虫.
订阅更新
如果喜欢用 RSS reader 获取信息，可以订阅这个 Feed 以便获取 “Crawler” 将来的更新内容.
