Python爬虫使用脚本登录Github并查看信息-创新互联

前言分析目标网站的登录方式

创新互联公司凭借在网站建设、网站推广领域领先的技术能力和多年的行业经验，为客户提供超值的营销型网站建设服务，我们始终认为：好的营销型网站就是好的业务员。我们已成功为企业单位、个人等客户提供了网站建设、网站制作服务，以良好的商业信誉，完善的服务及深厚的技术力量处于同行领先地位。

目标地址： https://github.com/login 

登录方式做出分析：

第一，用form表单方式提交信息，

第二，有csrf_token,

第三 ，是以post请求发送用户名和密码时，需要第一次get请求的cookie

第四，登录成功以后，请求其他页面是只需要带第一次登录成功以后返回的cookie就可以。

以get发送的请求获取我们想要的token和cookie

代码：

import requests  
from bs4 import BeautifulSoup
r1 = requests.get('https://github.com/login')
soup = BeautifulSoup(r1.text,features='lxml') #生成soup 对象
s1 = soup.find(name='input',attrs={'name':'authenticity_token'}).get('value') 
#查到我们要的token
r1_cookies = r1.cookies.get_dict() # 下次提交用户名时用的cookie
# print(r1_cookies)  
# print(s1)

网页名称：Python爬虫使用脚本登录Github并查看信息-创新互联
文章网址：http://bjjierui.cn/article/dpoocs.html