代码之家 › 专栏 › 技术社区 › jjyoh

在python中每x秒运行一次循环,以刮取网站[重复]

python-multithreading python-requests beautifulsoup python

jjyoh · 技术社区 · 7 年前

我正在抓取一个网站,当我运行脚本时,它会使API请求崩溃。我想在每次迭代之间中断3秒来迭代循环。

def printit():
    country_list_id = ['a', 'b', 'c']
    product_list_id = ['1', '2', '3']

    for c in country_list_id:
       for p in product_list_id:
          url = "https://www.example.com/api/country_id=" + c + "&product_id=" + p + "&option="
        test(url)

def test(url_final):
        get_url = requests.get(url_final)
        get_text = get_url.text
        print(get_text)
        #I'd like to make a small break here before it iterate again


printit()

2 回复 | 直到 4 年前

Cyzanfar 7 年前

使用 time 模块:

import time

     def printit():
        country_list_id = ['a', 'b', 'c']
        product_list_id = ['1', '2', '3']

        for c in country_list_id:
           for p in product_list_id:
              url = "https://www.example.com/api/country_id=" + c + "&product_id=" + p + "&option="
            test(url)

    def test(url_final):
            get_url = requests.get(url_final)
            get_text = get_url.text
            print(get_text)
            time.sleep(3)


    printit()

Joe Iddon 7 年前

第一,导入 time :

import time

然后 sleep 3 :

time.sleep(3)

推荐文章

Iorek · Python线程打印覆盖自身[重复]

7 年前

abdelrahman · 具有PyQt5多线程的Python GUI

7 年前

sudonym · 内存泄漏在哪里?如何在python中的多处理过程中超时线程?

7 年前

Oliver Frost · 使用线程在后台持续运行的函数?

7 年前

Elinoter99 · Python调用脚本而不等待其执行

7 年前

JohannB · Python线程连接死线程

7 年前

Yoav Glazner · 为什么/如何python3按创建顺序调度线程?

7 年前

Bastian · 如何在上下文管理器中使用线程?

7 年前

anoneemus · Python套接字窃取彼此的数据包

7 年前

Shawn H. · 使多线程执行单个命令

7 年前