Python剧作家定位器未返回预期值

您的第二个定位器XPath没有 @class= ,所以它与第一个有效的不同。将字符串存储在变量中,这样您就不必键入两次,也不会遇到复制粘贴或过时数据错误。

无论如何,你的方法似乎过于复杂。每个用户代理都在 <code> tag——只需刮掉它:

from playwright.sync_api import sync_playwright # 1.44.0


def main():
    with sync_playwright() as p:
        browser = p.firefox.launch()
        page = browser.new_page()
        url = "https://www.useragentlist.net/"
        page.goto(url, wait_until="domcontentloaded")
        agents = page.locator("code").all_text_contents()
        print(agents)
        browser.close()


if __name__ == "__main__":
    main()

定位器会自动等待,所以不需要睡觉。99%的时间避免使用XPath——它们很脆弱,难以阅读和维护。只需使用CSS选择器或用户可见的定位器。目标是选择最简单的选择器来消除你想要的元素的歧义,仅此而已。 span/pre/code/strong 是一个僵化的层次结构——如果其中一个发生了变化,你的代码就会不必要地中断。

顺便说一句,用户代理是在静态HTML中,所以除非你试图绕过一个块,否则你可以通过请求和Beautiful Soup更快地做到这一点:

from requests import get  # 2.31.0
from bs4 import BeautifulSoup  # 4.10.0

response = get("https://www.useragentlist.net")
response.raise_for_status()
print([x.text for x in BeautifulSoup(response.text, "lxml").select("code")])

更好的是(可能)使用像这样的库 fake_useragent 生成随机用户代理。