【为什么大自然中有很多东西都很相似好像模块设计一样】通用网络爬虫捜索引擎抓取系统（Baidu、Google、Yahoo等）的重要组成部分 。主要目的是将互联网上的网页下载到本地，形成一个互联网内容的镜像备份 。但是大多数情况下 ， 网页里面90%的内容对用户来说是无用的 。
推荐阅读
- 为什么会有死飞这种车
- 金刚狼和X24打斗为什么不会死但是埃德曼金属弹头却能杀了他
- 电脑刺绣为什么不能完全替代手工制作
- 为什么骑士一输球詹姆斯马上就不是联盟第一人了
- 为什么中国影视剧可以拍神却不许拍鬼
- 为什么有的小说的文字下面有黑点呢
- 为什么非得比较火影和海贼
- 为什么游戏王没有进行商业化
- 为什么伸懒腰时会听觉减弱甚至听不见了
- 为什么电影鬼子来了会有这么高的评价