如何下载需要用户名和密码的网页?

就像@robert说的,使用机械化。

要开始,请执行以下操作:

from mechanize import Browser
b = Browser()
b.open("http://forum.ubuntu-it.org/index.php")
b.select_form(nr=0)
b["user"] = "johnconnor"
b["passwrd"] = "hellohello"
b.submit()

response = b.response().read()
if "Salve <b>johnconnor</b>" in response:
    print "Logged in!"

尝试 mechanize 模块。它基本上是一个程序化的浏览器界面。

您可以使用 urllib2 模块,因此可以进行基本和基于表单的身份验证(支持cookie)。

这是一个不错的 tutorial 关于你的问题。