python 爬虫如何设置爬取一定时间停止

Python08

python 爬虫如何设置爬取一定时间停止,第1张

from time import sleep

n = 0

while n <= 100:

    print(n)  # 动作

    sleep(60)  # 暂停60秒

    n = n + 1

进行爬虫异常处理。

爬虫在运行的过程中,经常会遇到异常。若不进行异常处理,则爬虫程序会直接崩溃停止运行,当下次再次运行时,则又会重头开始。因此,开发一个具有顽强生命力的爬虫,必须要进行异常处理。