python 登陆一个网站

时间:2023-03-08 21:44:30

今天想用python写一个登陆的脚本,搜了一下,网上挺多的,看了一些后写了个登陆虎扑论坛的脚本.

原理:

只要在发送http请求时,带上含有正常登陆的cookie就可以了。

1.首先我们要先了解cookie的工作原理。

Cookie是由服务器端生成,发送给User-Agent(一般是浏览器),浏览器会将Cookie的key/value保存到某个目录下的文本文件内,下次请求同一网站时就发送该Cookie给服务器(前提是浏览器设置为启用cookie)。Cookie名称和值可以由服务器端开发自己定义,对于JSP而言也可以直接写入jsessionid,这样服务器可以知道该用户是否合法用户以及是否需要重新登录等。

2.之后我们要获取到用户正常登录的cookie.

python提供了cookieJar的库,只要把cookieJar的实例作为参数传到urllib2的一个opener里面。

然后访问一次登录的页面,cookie就已经保存下来了。之后通过这个实例访问所有的页面都带有正常登陆的cookie了。

 #coding=utf-8
import sys
reload(sys)
sys.setdefaultencoding('utf8') import urllib, urllib2, cookielib
from bs4 import BeautifulSoup def loginHupu(url,username,password):
cookie = cookielib.CookieJar()
cookie_handler = urllib2.HTTPCookieProcessor(cookie)
opener = urllib2.build_opener(cookie_handler)
#伪装成一个正常的浏览器,避免有些web服务器拒绝访问
opener.addheaders = [('User-agent','Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1)')] #需要填充的表单数据 chrome浏览器下下可以F12-NETWORK查看
formData = {
'username': username,
'password': password,
}
data = urllib.urlencode(formData) #以POST的方式访问登陆页面,访问之后cookieJar会自动保存cookie
opener.open(url,data)
#以带cookie的方式访问页面
page = opener.open(url) soup = BeautifulSoup(page.read()) return soup
if __name__ == '__main__':
soup = loginHupu('http://my.hupu.com','你自己的用户名','你的密码')
print soup.prettify()

POST请求中的表单数据以及需要伪装的浏览器的数据都可以通过chrome浏览器查看,通过一些抓包工具应该也能看。

参考链接:http://zoulc001.iteye.com/blog/1186962