亚洲在线久爱草,狠狠天天香蕉网,天天搞日日干久草,伊人亚洲日本欧美

為了賬號安全,請及時綁定郵箱和手機立即綁定
已解決430363個問題,去搜搜看,總會有你想問的

我如何從 python 中的 txt 文件中請求每個令牌

我如何從 python 中的 txt 文件中請求每個令牌

溫溫醬 2023-03-30 09:45:46
我有一個名為 tokens.txt 的文本文件。例如:12463,4126,6343,6345。我想用每個令牌發送一個發布請求并使用多線程。由于某些原因,我的代碼只從 txt 文件中獲取最后一個標記,并且只使用它。import requestsfrom concurrent.futures import ThreadPoolExecutor, as_completedfrom time import timeurl_list = [    "https://www.google.com/api/"]file_lines = open("tokens.txt", "r").readlines()for line in file_lines:    tokens = {        'Token':line.replace('/n','')        }def makerequest(url):    while True:        html = requests.post(url,stream=True, data=tokens)        print(tokens)        return html.contentstart = time()processes = []with ThreadPoolExecutor(max_workers=200) as executor:    for url in url_list:        processes.append(executor.submit(makerequest, url))for task in as_completed(processes):    print(task.result())print(f'Time taken: {time() - start}')我如何為每個令牌發送請求?
查看完整描述

3 回答

?
滄海一幻覺

TA貢獻1824條經驗 獲得超5個贊

在你的情況下tokens = {"Token": <last_token>}


像這樣修改您的代碼,以便可以為每個令牌發送一個請求。


tokens = set() 

'''

<- You can use list also but in this case set is better  as it will ensure only 

one request for one token even if your tokens file contains duplicate line.

'''

url_list = [

    "https://www.google.com/api/"

]


tokens = set()

with open("tokens.txt", "r") as f:

    file_lines = f.readlines()

    for line in file_lines:

        tokens.add(line.strip())


token_data = {"Token": None}

def makerequest(url):

    for token in tokens:

        token_data["Token"] = token

        html = requests.post(url,stream=True, data=token_data)

        print(token)

        # do something with html here

        # don't return or break


查看完整回答
反對 回復 2023-03-30
?
慕少森

TA貢獻2019條經驗 獲得超9個贊

你在做

數據 = 令牌

那一點tokens是最后一行的分配。如果你想要所有的令牌,你需要做一些像j這樣的事情:

tokens = set()
for line file_lines:
     tokens.add(......)


查看完整回答
反對 回復 2023-03-30
?
婷婷同學_

TA貢獻1844條經驗 獲得超8個贊

您的代碼的問題是令牌字典的創建 - 您循環提供令牌,但您總是覆蓋映射到“令牌”鍵的值。

此外,您的代碼中還有一些不良做法。

  1. 請像您一樣小心內聯打開文件

    file_lines = open("tokens.txt", "r").readlines()

而是將其用作上下文管理器

with open("tokens.txt", "r") as file:
    file_lines = file.readlines()

這可以確保文件在您閱讀后再次關閉 - 在您的情況下,您需要確保文件被關閉(即使在崩潰等情況下)

其次,避免在函數中使用全局變量。根據你的代碼,我假設你想用每個標記查詢不同的 url - 所以函數應該接受這兩個作為參數。然后我會分別創建一個組合列表,比如

url_token_combs = [(url, token.strip()) for url in url_list for token in file_lines]

最后,更改您的功能以使用傳遞給它的參數而不是全局參數,例如:

def makerequest(url_token ):
    url , token = url_token 
    html = requests.post(url,stream=True, data=token) 
       return html.content

這使您現在可以使用以下線程遍歷代碼:


import requests

from concurrent.futures import ThreadPoolExecutor, as_completed

from time import time



def makerequest(url_token):

    url , token = url_token      

    html = requests.post(url,stream=True, data=tokens)

    print(tokens)

    return html.content



if __name__ == "__main__":

    start = time()

    url_list = [

    "https://www.google.com/api/"

    ]

    

    with  open("tokens.txt", "r") as file:

        file_lines = file.readlines()


    tokens = [{'Token':line.replace('/n','') }for line in file_lines ]


    url_tokens = [(url, token.strip()) for url in url_list for token in tokens]



    processes = []

    with ThreadPoolExecutor(max_workers=200) as executor:

        for url_token in url_tokens:

            processes.append(executor.submit(makerequest, url_token))


    for task in as_completed(processes):

        print(task.result())



    print(f'Time taken: {time() - start}')


查看完整回答
反對 回復 2023-03-30
  • 3 回答
  • 0 關注
  • 134 瀏覽
慕課專欄
更多

添加回答

舉報

0/150
提交
取消
微信客服

購課補貼
聯系客服咨詢優惠詳情

幫助反饋 APP下載

慕課網APP
您的移動學習伙伴

公眾號

掃描二維碼
關注慕課網微信公眾號