书籍地址https://automatetheboringstuff.com/

https://blog.csdn.net/bullgod/article/details/79665619官网文档 - http://docs.python-requests.org/zh_CN/latest/user/quickstart.html

Python3默认编码是unicode而Python2是ASCII码Windows环境默认是gbk编码 Python3 自动把文件编码转为unicode，Python2并不会自动的把文件编码转为unicode存在内存里。需要手动转码。 python3的执行过程： 解释器找到代码文件，把代码字符串按文件头定义的编码加载到内存，转成unicode 把代码字符串按照语法规则进行解释 所有的变量字符都会以unicode编码声明 UTF-8 --> decode 解码 --> UnicodeUnicode --> encode 编码 --> GBK / UTF-8 等 a =...

python3.x+requests 爬取网站遇到中文乱码的解决方案 http://blog.chinaunix.net/uid-13869856-id-5747417.html官方文档中response-content相关内容，说明了Requests会自动解码来自服务器的内容。Requests会基于HTTP头部对响应的编码作出有根据的推测，前提是响应文档的HTTP headers里面没有相关字符集说明。官方文档还说明了，如果你创建了自己的编码，并使用codecs 模块进行注册，你就可以轻松地使用这个解码器名称作为 r.encoding 的值， 然后由Requests来为你处理编码。（自己没有...

python字典给js的函数，似乎没有用。不过可以json.dumps(dict) 传给js函数，js函数再JSON.parse(json_str) python爬虫常用之Scrapy 中间件https://www.cnblogs.com/masako/p/8629445.html Scrapy中文文档http://www.scrapyd.cn/

mitmproxy是用于MITM的proxy,MITM即中间人攻击（Man in the middle attack）。用于中间人攻击的代理首先会向正常的代理一样转发请求，保障服务端与客户端的通信，其次，会适时的查、记录其截获的数据，或篡改数据，引发客户端或服务端特定的行为。mitmproxy 不仅可以截获请求帮助开发者查看、分析，更可以通过自定义脚本进行二次开发。但 mitmproxy 并不会真的对无辜的人发起中间人攻击，由于 mitmproxy 工作在 HTTP 层，而当前 HTTPS 的普及让客户端拥有了检测并规避中间人攻击的能力，所以要让 mitmproxy 能够正常工作，必须要让客户...

冒泡排序（Bubble Sort） 算法步骤 比较相邻元素，如果前一个比后一个大，就交换他们位置。 对每一对相邻元素作同样的工作，从开始第一对到结尾的最后一对。这步做完后，最后的元素会是最大的数。 针对所有的元素重复以上的步骤，除了最后一个。 持续每次对越来越少的元素重复上面的步骤，直到没有任何一对数字需要比较。 动态演示 Python实现 def BubbleSort(arr): for i in range(1,len(arr)):#比较len(arr)-1次 for j in range(0,len(arr)-i):#已经冒泡个数 ...

流量控制和拥塞控制的相同点： 都是为了控制发送数据量的大小。 不同点： 流量控制是根据接收者能力控制发送数据量大小。 拥塞控制是根据网络的拥塞状态控制数据量的发送大小。 最后实际要发送的数据量取决于流量控制和拥塞控制计算出来发送量的较小者。rwnd表示接收方的接收能力，cwnd表示链路还能承受的数据量能力。 流量控制算法 在流量控制算法中，对端的接收能力是指还能接收多少数据这个数值体现在对方发送给你的TCP报文的首部字段winsize中。它只能接收 100 个字节，那你就只能再给它发送不超过 100 字节的数据。如果你要发送的数据超过了 100 字节，抱歉，除去 100 字节剩下的...

事务具有以下4个属性，通常简称为事务的ACID属性:Atomic:原子性Consistency：一致性Isolation：隔离性Durability：永久性 Atomic（原子性）：数据库事物是最小单位。只有所有操作都执行成功，整个事物才算成功，其中任意一个语句执行失败，那么已经执行的成功的语句也必须被撤销，回滚到事物还没开始执行时的初始状态。 Consistency（一致性）：数据库事物不能破坏关系数据的完整性以及业务逻辑上的一致性。例如对银行转帐事务，不管事务成功还是失败，应该保证事务结束后ACCOUNTS表中Tom和Jack的存款总额为2000元。 Isolation（隔离性）：在并发环...

Nagle 算法的发明者 John Nagle 当时发明了这个算法，主要是解决福特汽车公司的网络拥塞问题。Nagle算法的目的：为了减少网络中TCP报文段的数量。Nagle算法原理： 一个TCP连接上最多只能有一个未被确认的未完成的小分组，当它到达目的地前，不能发送其他分组。 在上一个小分组未到达目的地前，即还未收到他的ACK前，TCP会收集后来的小分组。当上一个小分组的ack收到后，TCP就将收集的小分组合并成一个大分组发送出去。 上面的分组说的就是TCP报文段，Nagle算法关心的小分组是数据量小于MSS的分组，MSS的大小在三次握手的时候就协商好了。 python 关闭Nagle算法...

三次握手，四次挥手 在Ubuntu环境下启动三个终端，使用tcpdump工具来了解三次握手和四次挥手，分析网络数据传输。实验步骤如下： Step.1 打开三个终端（Ctrl+Alt+T）. Step.2 在最下面窗口输入 sudo tcpdump -# -S -n -i lo tcp and host 127.0.0.1 and port 8000启动抓包程序。 Step.3 左上窗口 nc -l 8000表示在端口8000启动一个TCP服务程序。 Step.4 右上窗口输入 nc localhost 8000表示向localhost：8000这个地址发起TCP连接请求。 通过以上四个步...

time模块 import time #打印时间戳-time.time() print('当前时间戳：{0}'.format(time.time())) #格式化时间戳为本地时间-time.localtime() print('时间戳转化为本地时间戳：\n{0}'.format(time.localtime(time.time()))) #优化格式化版本-time.strftime() print('当前时间：',time.strftime("%Y:%m:%d:%H:%M:%S" , time.localtime(time.time())))打印结果： 当前时间戳：1...