Python 的 try except 是在一个请求失败后停止的抓取器与能够在网络故障中继续工作的爬虫之间的区别。在生产抓取中，错误是正常的。服务器可能会超时，代理可能会失败，页面可能会返回 403，或者在布局更改后选择器可能会失效。本指南通过高可用性爬虫的视角解释 try、except、else 和 finally。它是为那些已经发送 HTTP 请求并且现在需要更安全故障处理的 Python 开发者编写的。您将学习如何捕获特定的异常、进行重试、轮换代理、释放资源，并将 Nstproxy 作为稳定代理工作流程的一部分使用。

关键要点

• 使用 python try except 处理预期的爬虫故障，而不掩盖错误。
• 捕获特定的异常，如 Timeout、ProxyError 和 HTTPError。
• 在成功请求之后使用 else 进行解析。
• 使用 finally 进行清理、会话关闭和指标记录。
• 当网络故障重复时，将重试逻辑与代理轮换配对。

网络爬取中的常见异常

抓取器以特定模式失败，因此异常处理应该匹配这些模式。将网络错误、代理错误、HTTP 状态错误和解析错误视为不同的事件。

故障类型	常见原因	典型异常或信号	行动
超时	服务器慢或网络差	requests.exceptions.Timeout	进行重试
代理失败	代理失效或身份验证问题	requests.exceptions.ProxyError	切换代理
连接失败	DNS、重置、拒绝连接	ConnectionError	重试或暂停
HTTP 阻塞	403、407、429	状态码	轮换代理或降低速率
解析失败	HTML 改变	AttributeError、KeyError	记录并更新解析器
JSON 失败	无效的响应主体	ValueError	验证内容类型

官方的 requests 文档列出了 、 和 等异常，详见其 。Python 也在 中记录了异常处理。