有认识我的朋友可能知道我过去一两年内采集了很多数据，包括不限于招聘、人口信息、气象信息、彩票开奖信息、企业工商信息等等方向，我一直在思考能用这些数据做点什么有意义的事情。最近我决定把这些数据通过可视化的方式展现出来。...

定向采集定向采集，指我们已经有了明确的采集目标与采集规则，比如我们要采集一个新闻站点，那么首先取得新闻列表中全部详情页面的链接地址，再通过链接请求详情页面的内容，这就是一个标准的定向采集爬虫。...

技术基础 本章主要讲解爬虫需要用到的 Java 常识和一些类库等，方面初学者或者使用其他语言的同学快速上手，如果您本身会使用 Java 编程语言，那么本章可以略过不看。...

爬虫概述 本章简要介绍爬虫的用途和规则。...

文章的受众是对Java编程有一定基础的开发者、希望了解网络爬虫原理并在Java中实现的读者。文章会介绍网络爬虫的基本原理、Java中实现网络爬虫的方法、避免被反爬虫机制识别等相关技术。...