在（属于下载中间件）中间件中定义 class UserAgentMiddleware(): def init(): self.useragents=[ ]
def process_request(self,request,spider):
request.headers['User-Agent']=random.choice(self.useragents)
request.meta['proxy']='http://127.0.0.1:80'
request.cookies={"":""}
查看更多关于scrapy中使用代理cookies user-agent的详细内容...
声明：本文来自网络，不代表【好得很程序员自学网】立场，转载请注明出处：http://www.haodehen.cn/did126894