爬虫是什么 ？

爬虫 Web Crawler：是一种自动获取网页内容的程序或脚本，也被称为网络蜘蛛或网络机器人

🕷️就像蜘蛛在网上爬行收集信息一样，爬虫程序会在互联网上自动浏览网页，抓取我们需要的数据

如百度、Google 这类搜索引擎，之所以能搜到那么多网站信息，就是因为背后有成千上万的爬虫日夜不停地工作，自动收集和整理全网的内容

为什么要学爬虫 ？

💡学会爬虫，就像拥有了一位不知疲倦的数据助理，能帮你自动获取互联网上的各类信息：

爬虫工作4个核心步骤：

①发送请求 → 访问目标网页

②获取响应 → 拿到网页原始内容

③解析数据 → 从响应中提取所需的有效信息

④存储结果 → 将信息保存以备使用