爬虫工作原理

　　网络爬虫不仅是搜索引擎的重要组成部分，而且是目前大数据分析不可

　　缺少的工具。了解爬虫的原理和实现对日常工作或者个人的兴趣爱好有

　　很大的帮助。比如你在百度贴吧里面看到了一遍不错的帖子，这个帖子

　　里面的回复很有价值，你想收藏下来，但是帖子有1000多页，你没办法

　　逐个手动复制；或者你是日系二次元爱好者，喜欢搜集美女图片；或者

　　你对目前的股票、房价的发展趋势想做一些预测；这些需求都可以借助