大纲

1. 什么是爬虫 主要分为哪几种（通用爬虫和专项爬虫）。
2. 爬虫数据解析和环境信息模拟。
3. 反爬虫常见策略。
4. 爬虫爬取效率和结果数据存储 搜索。
5. 常见爬虫框架和示例。

常见框架

1. Jsoup
2. WebCollector
3. WebMagic
4. scrapy
5. Nutch
6. Heritrix

Demo项目

1. boss直聘网数据
2. awesome-spider

相关文章

1. GitHub 上有哪些优秀的 Java 爬虫项目？