首页 » 课程中心 » Python 网络爬虫 搜索 Python 网络爬虫 网络爬虫概述 网络爬虫是什么 为什么使用爬虫 爬虫的分类 热门标签 ORM web基础开发 MyBatis技术教程 js 大数据 javascript 培训 大数据框架 python技术 数据库 人工智能 python web mybatis Kafka Mysql数据库教程 java mysql aaa教育 AI aaa Django db ECMAScript 网络爬虫是什么 2021-01-29,87 网络爬虫(又被称为网页蜘蛛,网络机器人),是一种按照一定的规则,自动地抓取万维网信息的程序或者脚本。另外一些不常使用的名字还有蚂蚁、自动索引、模拟程序或者蠕虫。 通俗地讲,我们把互联网比作一张大蜘蛛网,每个站点资源比作蜘蛛网上的一个结点,爬虫就像一只蜘蛛,按照设计好的路线和规则在这张蜘蛛网上找到目标结点,获取资源。