Python 爬虫工坊

用 Python 3 生成可直接运行的网页抓取代码，并在抓不到数据时按症状定位原因：覆盖同步抓取、并发抓取、登录会话、JS 渲染页面、解析落盘与断点续抓，自带超时、重试、限速与 robots.txt 合规检查。当用户说「帮我写个 python 爬虫把这个网站的数据抓下来」「requests 请求返回 403 是不是被反爬了」「抓下来的页面是空的」「这个站要登录才能看」「批量抓几百个页面太慢了」「被封 IP 了怎么办」时使用。不绕过付费墙和验证码风控，不抓取 robots.txt 或站点条款禁止的内容，不抓取未授权的个人数据。