人们经常说TCP建立连接需要三次握手，断开连接需要四次挥手。有次我抓包发现，断开连接只抓到了三个包。 上图中可 […]
Continue reading…
Posts by laixintao
有关爬虫框架的设计的一些备忘
我们公司一直在使用自己设计的爬虫框架，这么做的初衷是让框架保持简单，新手可以很快写一个爬虫工作。但是也遇到过许 […]
Continue reading…
Vim:快速复制和替换
用Vim写代码经常遇到的一个操作是：复制一个单词（或其他text object），然后到下一个（多个）地方用复 […]
Continue reading…
pytest插件开发笔记
上一篇博客解决了写爬虫测试时候的一个痛点：复制粘贴太多的重复代码。可还有一个比较烦人的地方，即使test的代码 […]
Continue reading…
Vim补全代码块神器Ultisnips
爬虫项目中的testcase有很多重复的代码，一般情况都是：mock掉发向服务器的请求 -> 初始化数据 […]
Continue reading…