数据爬取

这里我们不讨论简单的网页爬取和解析，而是探讨一些高阶话题，例如分布式爬虫的构建之法。

你动或不动，我就在这里

Ajax 和 Javascript 带来的动态加载技术为我们爬取数据带来了一定的困难。

爬虫工具

• crawler4j：轻量级多线程网络爬虫
• Anthelion “幻日”，由雅虎开源