Metadata-Version: 2.1
Name: pyCrawlerApp
Version: 0.0.1
Summary: A Crawler study project
Home-page: https://github.com/pypa/sampleproject
Author: jianluo
Author-email: jianluow@isoftstone.com
Classifier: Programming Language :: Python :: 3
Classifier: License :: OSI Approved :: MIT License
Classifier: Operating System :: OS Independent
Requires-Python: >=3.9.6
Description-Content-Type: text/markdown

# Python 爬虫学习

## 目录

- [Python 爬虫学习](#python-爬虫学习)
  - [目录](#目录)
  - [爬虫介绍](#爬虫介绍)
  - [爬虫的分类](#爬虫的分类)

  Python爬虫可以根据不同的需求和目的分为不同的类型。以下是一些常见的Python爬虫类型：
通用网络爬虫（General Purpose Web Crawler）: 这种爬虫用于抓取网站的整个或部分内容。
聚焦网络爬虫（Focused Web Crawler）: 这种爬虫设计用于特定目标，如特定网站的商品信息、新闻文章等。
深层网络爬虫（Deep Web Crawler）: 用于抓取需要进行表单提交或JavaScript渲染的网站内容。
搜索引擎爬虫（Search Engine Crawler）: 模仿用户浏览网络，爬取网页，并建立网站的索引，以便用户可以通过搜索引擎搜索这些网站。
头部爬虫（Headless Crawler）: 一种没有界面的爬虫，通常用作安全测试或数据收集。

  - [爬虫的原理](#爬虫的原理)
  - [爬虫的应用](#爬虫的应用)
  - [爬虫的优缺点](#爬虫的优缺点)
  - [爬虫的常用框架](#爬虫的常用框架)
  - [爬虫的实战案例](#爬虫的实战案例)
    - [爬虫的资源](#爬虫的资源)
    - [爬虫的工具](#爬虫的工具)
    - [爬虫的平台](#爬虫的平台)
  - [爬虫的学习路线](#爬虫的学习路线)
    - [爬虫的参考资料](#爬虫的参考资料)
    - [爬虫的学习方法](#爬虫的学习方法)
    - [爬虫的学习建议](#爬虫的学习建议)
  - [爬虫的常见问题](#爬虫的常见问题)
  - [爬虫的常用工具](#爬虫的常用工具)
  - [爬虫的常用平台](#爬虫的常用平台)
  - [爬虫的资源推荐](#爬虫的资源推荐)
  - [爬虫的工具推荐](#爬虫的工具推荐)
  - [爬虫的平台推荐](#爬虫的平台推荐)
  - [爬虫的学习资料推荐](#爬虫的学习资料推荐)
  - [爬虫的学习方法推荐](#爬虫的学习方法推荐)
  - [爬虫的学习建议推荐](#爬虫的学习建议推荐)
  - [爬虫的常见问题推荐](#爬虫的常见问题推荐)
  - [爬虫的常用工具推荐](#爬虫的常用工具推荐)
  - [爬虫的常用平台推荐](#爬虫的常用平台推荐)
  - [爬虫的资源推荐](#爬虫的资源推荐-1)
