一月 05, 2020

05. URLError与Cookie

1. Cookie为什么要使用Cookie呢? Cookie,指某些网站为了辨别用户身份、进行session跟踪而...

一月 05, 2020

05. URLError与Cookie

1. Cookie为什么要使用Cookie呢? Cookie,指某些网站为了辨别用户身份、进行session跟踪而储存在用户本地终端上的数据(通常经过加密...

一月 04, 2020

04. urllib库的高级用法

1. 伪装自己有些网站不会同意程序直接用上面的方式进行访问,如果识别有问题,那么站点根本不会响应,所以为了完全模拟浏览器的工作 1.1 设置请求头其中U...

一月 03, 2020

03. 爬取数据-urllib库

1. 小试牛刀怎样扒网页呢? 其实就是根据URL来获取它的网页信息,虽然我们在浏览器中看到的是一幅幅优美的画面,但是其实是由浏览器解释才呈现出来的,实质它...

一月 02, 2020

02. 工具的使用

1. 常用的工具 python pycharm 浏览器 chrome 火狐 fiddler 2 fiddler的使用2.1 操作界面 2.2 界面含...

一月 01, 2020

01.爬虫介绍

1. 什么是爬虫?网络爬虫也叫网络蜘蛛,如果把互联网比喻成一个蜘蛛网,那么蜘蛛就是在网上爬来爬去的蜘蛛,爬虫程序通过请求url地址,根据响应的内容进行解...