首页 > 代码库 > Scrapy爬虫requests

Scrapy爬虫requests

requests 模块

模块的由来: 浏览器可以浏览网站, 是由于浏览器发送了requests , 各种请求.打开一个网站可能有几十到几百个请求.

从而服务器端会反馈各种因应不同请求生成的数据. 我们浏览器再decode这些数据来显示在屏幕上.

 

requests, 就是Python一种用来伪装成模拟器的模块. 对对方的服务器作出各种请求, 从而得到我们所需要的数据.

从而, request可以实现和浏览器的各种互动, 比如伪装登陆, 爬虫数据.

Scrapy爬虫requests