Vim补全代码块神器Ultisnips

Posted on by Leave a comment

爬虫项目中的testcase有很多重复的代码，一般情况都是：mock掉发向服务器的请求 -> 初始化数据库 -> 模拟抓取过程 -> 检查副作用，比如对比存进来的数据等。这些代码不被调用，只是保证之前的代码正常工作，所以我觉得这种“复制、粘贴”编程是可以接受的。而且这种复制粘贴让每一个testcase更直观，抽象度不高。当CI炸了的时候可以很快定位到问题。

以前的做法是复制之前的一个testcase然后修改。这样很不爽。

后来写了一个代码生成器，每次运行命令都自动生成一段代码，然后去修改它。这样的好处是可以在代码生成器做一些事情，比如下载要处理的网页，自动生成运行目标测试的命令等。缺点是每次运行这个生成器都需要一些参数，而且没有和编辑器结合。

所以我觉得解决这个问题最好的办法还是编辑器原生的功能，Vim（一般的代码编辑器都会有这个功能）有Snippet代码片段的功能。自动插入一段代码，然后你可以在placeholder之间跳转修改，非常方便。

SirVer/ultisnips 效果

我根据参考[1]的推荐选择了Ultisnips。安装过程如下：

这是Github上官方的安装。我没有安装vim-snippets，这个插件是一些常用的片段，由网友贡献的。大体看了一下Python的，大都比较实用。不过我觉得用这些玩意儿很容易把Python写的跟Java似的，所以没弄这些。我只要自定义的想补全的片段就够了，其余的可以手写，毕竟写了这么长时间Python了没用这个也没感觉不适。

第三部分是对快捷键的设置。这三个let分别对应：触发展开片段的键、跳到下一个占位符的键，跳到上一个占位符的键。由于tab和YCM补全插件冲突，以及我认为Linux所有的编辑器和命令行都默认F是向前，B是向后的默契，所以我的设置这样的：

读取Ultisnips的路径是~/.vim/UltiSnips。但是也可以自定义。

写UltiSnips很简单，可以参考vim-snippets中的一个：

可以看到，大致的语法是：

这样在编辑器中打出<name>的时候，可选的snippets就会展开，然后用<tab>选择到该名字上（<shift> + <tab>可以向上选择），按你定义的“触发”快捷键就可以将<body>替换到编辑器中。

其中，placeholder在<body>中可以这样规定： ${2:var}。数字用来标志placeholder的id，用于跳转。另外很好用的一点多光标编辑：如果在一个 $2上面编辑，那么会改动所有的$2。

更高级的功能可以仔细阅读:help。

对了，在编辑器外也要经常用一些片段，比如mongo查询等，推荐一个剪切板管理工具：Clipmenu，可以将常用的Snippet放到里面，随时取出来粘贴。

参考：

  1. http://mednoter.com/UltiSnips.html
 

Twitter机器人：今年还要工作多少天？

Posted on by 7 Comments

今天突然想，去年Twitter将字数限制放开到了280，那么就可以模仿YearProgress做一个工作日的进度条了。每天用一个字符表示，一年的工作日有250天，可以放得下。于是就写了一个脚本，用cron每天发出一条twitter提醒工作日还剩下多少天。

Github： https://github.com/laixintao/workdays-bot

Twitter： https://twitter.com/workdays_bot

脚本很简单，就是计算一下一年工作日的天数。然后用tweepy调用一个接口就行了。但是脚本中我用了namedtuple list存放所有天数和类型，后来发现不是很好，应该用OrderedDict，会方便很多。但是这个脚本每天只跑一次，效率不是什么问题，就没去优化。

twitter，github，telegram这些公司接口设计的真好啊！要是国内微信淘宝这些公司的接口，半个小时写出来个能work的东西，我觉得是肯定不可能的……（Telegram和微信的比较）

还发现了两个好玩的网站：

http://china.workingdays.org 这个网站可以计算每个国家的工作天数。可以发现不看公司政策，每个国家一年的工作时间都是250±2的，惊人的一致…… 还以为基督教国家有复活节和圣诞节会多很多呢……而且神奇的是，这个网站有N个域名……每个国家都是一个域名后缀。如果不好买（比如我猜.cn就不好买）才会用二级域名。

 

谈谈Python for循环的作用域

Posted on by 4 Comments

对于从其他语言转到Python的人来说，下面这段代码显得很诡异：

你期望的是i变量不存在报错，而实际上打印结果是：

这是因为，在Pyhton中，是没有block这个概念的。

Python中的作用域只有四种，即LEGB规则：

L， local – 在lambda函数内或者def函数内部的变量

E， Enclosing-function – 闭包的作用域（了解Python的闭包可以看《闭包初探》）

G，Global – 全局作用域

B， Build-in – 内建作用域

举个例子：

由此看来，for循环的作用域会污染局部作用域，Python2的列表生成式也会有这个副作用，但是已经在Python3中得到了修复。

曾经Python邮件列表中有人想“如果在for-loop中有函数引用变量，就将此变量变成for-loop局部变量”，但是造成这个的问题并不是for循环的问题，而是闭包的迟绑定。

 

2017年鉴

Posted on by 5 Comments

瞄了一眼2016年写的总结，发现定的目标果然没有完成，哈哈，当成2018年的目标好了。

年初的时候买了《最后的守护者：食人的大鹫》，上天人文的作品，传说是游戏里面最智能的一条狗，可惜买来之后发现自己并不是很喜欢。纯粹的解谜游戏，没有什么提示，游戏的过程比较无聊，到现在也没有通关。

后来玩了《使命召唤13》，没啥感觉……大约花了8个小时通关了，去线上老是被虐，就封箱了。不顾最近出了《使命召唤二战》，看着挺想玩的。不是很喜欢未来向的游戏，喜欢基于历史的，枪械也比较老的那种风格。等降价入一下《二战》吧。

有一段时间在公司和同事一起玩《BROFORCE》，4人同屏横版闯关游戏，有点像魂斗罗，非常欢乐。后来打到最后的BOSS，打了几次都过不了，渐渐的就不玩了。然后大家基本上不一块玩游戏了。

中间去尝试了一些PS PLUS赠送的游戏，比如《HUE》《刺客信条 黑旗·自由的呐喊》《合金装备V幻痛》，但是都没有深入玩下去。

后来认真通关了《恶名昭彰2 次子》，这个游戏设计的画面很好，游戏性一般，UI也很一般，界面上没有用的画面占了很多地方（菜单）。趁着打折买了心仪已久的《辐射4》，也不错，只不过游戏系统太复杂了，很多操作需要重复做，比如整理道具之类的，不太友好。世界观设定蛮好的，缺点就是太不人性化了。年底会员免费了《拉结特与克拉克》，太喜欢这个游戏了！画面，游戏性，音乐，剧情都可以给满分了！而且非常低龄化，游戏性非常高，可以玩很久！

工作之后玩游戏的时间少了，不过这并不是抱怨，以前在学校很无聊，也不知道做什么，学东西也不知道用在什么地方，学校又不教啥有用的东西，所以很多时间想打游戏。工作之后比较充实，研究一些技术问题、写代码很多时候都感觉比打游戏有意思！今年也没在游戏上花什么钱，倒是Switch出了很多好游戏（年度游戏《塞尔达·荒野之息》），想买，明年看看吧。

7月份延迟1个月顺利拿到了毕业证，在公司入职，一切都很顺利。工作之后真的爽很多啊，比起在学校，做的东西都更有意义了，有了更多的学习目标，学到了更多有有意义的东西，生活也感觉更幸福了。花了很多时间补充Python的知识，用Linux更熟练了。

10月份搬家了，在市区，新家有冰箱和厨房可以用， 感觉生活质量上升了一个档次。之前租的房子打算凑活一下，没想也整整住了一年。做饭这种事情吧，确实费时间，但这就是生活吧，可以学做不一样的东西。

这一年的生活大多数时候还是挺开心的。明年想多花点时间锻炼身体。

很喜欢现在工作的一点是：工作上的事情大家都直来直去，review代码，讨论意见可以就事论事，没有太多顾虑。新方案的提出所有人都可以参与讨论，决定事情比较快，实施也快。现在我们基本上都迁移到Python3了，用的数据库，Elasticsearch基本也都更新很及时，跟着官方的新版本。每天上班心情都很好。

不足的是，有一些项目因为不断添加新的东西，添加的时候一直在复制粘贴，导致线上API那边几百行的函数是很正常的事情。以及前端的代码，同样的逻辑要写在很多地方很多次。现在添加展示一种新的数据类型，经常要grep一下之前的数据是怎么展示的，然后对照这些文件复制粘贴来添加新的。很不好。明年希望能重构一下。首先得熟练用pytest保证不挂掉东西。

去年定的目标，看完《SICP》和《CSAPP》，到年底了，两本书都没有动。今年系统性的认真看完的书很好，学习的东西比较浅，基本就是感兴趣某个方面或者某个问题，去网上翻翻资料，整理一下。豆瓣上“想读”的书还是那么多，今年看的书好像就《永恒的边缘》。

明年少花点时间逛论坛了，纯粹就是浪费时间。很多东西看了还让自己不爽。多花点时间读代码、文档、书，尝试一下流行的技术。多写点博客。

今年7月20日，林肯公园主唱查斯特·贝宁顿在家中自杀身亡。

最后，汇总一下2018年的目标：

  1. 读完《SICP》和《CSAPP》（这好像连续3年被列为目标了）
  2. 在LeetCode做完500道题目
  3. 学习Rust（能直接编译成程序码很酷，打算实现一个HTTPS over DNS）
  4. 买switch

过去四年：

  1. 2013年
  2. 2014年
  3. 2015年
  4. 2016年
 

闭包初探

Posted on by 4 Comments

看过了很多有关闭包的文章，也看了很多书，还是对闭包一知半解。听说闭包是面向对象系统实现的基础，但是一直不明白这其中有什么关系。今天看《Fluent Python》终于有点理解了！

我更新了一下之前的《理解Python的UnboundLocalError》这篇博文，这篇讨论了Python的作用域以及原因。建议读本文之前先阅读一下这篇。

维基百科是这样解释的：

在计算机科学中，闭包（英语：Closure），又称词法闭包（Lexical Closure）或函数闭包（function closures），是引用了自由变量的函数。

这里的“自由变量”是一个技术术语，指的是没有在本地作用域绑定的变量。用通俗的话说，就是一个函数内使用的变量并没有在函数内定义，而是在函数外定义的。这个函数和它之外的这个变量就构成了闭包。“闭包”的概念很难理解，我觉得是因为你乍一听上面这段话，就算明白了什么意思，也想不出有什么用。请看下面这个例子（来自《Flunt Python》）：

有一个商品，它的价格每天都会变动。我们想要求出它的平均价格（其实这个例子用Python的生成器更加方便）。

averager函数和series构成了闭包。虽然make_averager函数执行一次之后退出了，但是函数内部的变量series并没有被销毁，多次调用avg发现series确实是之前的状态。

假如说不用闭包这个特性，使用面向对象来实现，代码要写成这样：

从中可以体会到，其实面向对象的中对象的概念，包含函数和属性。而函数里面使用的对象的属性，而不是函数内的局部变量，这就是有闭包的支持。属性和函数形成了闭包，属性就不会被销毁。闭包可以引用函数外的变量，但是这个变量又可以不是全局变量，从而对外隐藏了内部的一个状态，从而即达到了维持一个状态的目的，又做到了封装。我想，这就是为什么“闭包”是面向对象的基础吧。

2018年1月3日更新：我又有了一个想法，上面这个例子是“不用闭包这个特性”，为了体会一下闭包的“封装”功能，假设我们“没有闭包”这个特性，那么第一个例子的代码中，内部函数将不能访问外部函数的局部变量，因为没有了“闭包”这个通道。按照Python寻找变量的规则（大多数编程语言的规则）会到上一层函数->全局变量这个顺序查找。即，我们的代码将写成这样：

因为averager函数内用到了一个内部的状态变量，这个变量要独立于函数调用的生命周期，所以如果没有闭包，我们只要在每次使用averager函数之前创建一个变量series供它使用。这样即破坏了函数封装的作用，又失去了函数黑箱调用的方便性。

有关Python中闭包的实现，因为Python有“一等函数”的特性（函数是对象），“自由变量”保存在函数的__code__.co_freevars中，然后在avg.__closure__中保存了cell对象，对应每一个co_freevars。cell对象中的cell_content中保存了真实的值。

Python的这种实现有一个需要特别注意的陷阱。这种绑定闭包的方式是“迟绑定的”，这意味着，闭包绑定的值只有在函数真正运行的时候才去查询。在讨论for循环作用域的时候，Python邮件列表的邮件提到这段代码：

这段代码的执行结果是10个9，而不是0-9.因为只有lambda函数执行的时候才去查询i的值，这个时候i已经变成了9.一个“不太优美”的解决方法是使用默认参数立即绑定 lst.append(lambda i=i: i)。提醒一下，造成这个陷阱的原因不是Python的Lambda函数，lambda并没有什么特殊的，真正的原因是Python闭包的迟绑定实现方式。

很多博客将“闭包”和“匿名函数”混为一谈，通过这篇文章，显然这不是等价的。只不过只有是嵌套在其他函数中的函数才可能需要处理不是全局作用域的外部变量，而这种函数通常是匿名函数罢了。