对Beautifulsoup和selenium用法的简单介绍

Beautifulsoup和selenium的简单使用

requests库的复习

好久没用 requests 了，因为一会儿要写个简单的爬虫，所以还是随便写一点复习下。

import requests

r = requests.get('https://api.github.com/user', auth=('haiyu19931121@163.com', 'Shy18137803170'))print(r.status_code)  # 状态码200print(r.json())  # 返回json格式print(r.text)  # 返回文本print(r.headers)  # 头信息print(r.encoding)  # 编码方式，一般utf-8# 当写入文件比较大时，避免内存耗尽，可以一次写指定的字节数或者一行。# 一次读一行，chunk_size=512为默认值for chunk in r.iter_lines():print(chunk)# 一次读取一块，大小为512for chunk in r.iter_content(chunk_size=512):print(chunk) 

查看更多关于对Beautifulsoup和selenium用法的简单介绍的详细内容...