我是一个Web Crawler ，你们经常说的爬虫

诞生我是一个Web Crawler , 有时候称为Spider , 你们经常说的爬虫就是我。我想我是遇到了好时代，感谢IT政府，提供了简单的HTTP协议，还有HTML,CSS, JavaScript这一系列开放的技术，原来的桌面应用，局域网应用都被搬到了网络上，形成了一个个的网站，网站互联起来，形成了一个覆盖全世界的大网。在这个大背...