Posts on neo0moriarty

ffmpeg使用H265编码压缩视频

Wed, 27 Nov 2019 00:00:00 +0000

最近电脑硬盘空间紧张，舍不得删掉珍贵的高清视频，要么加硬盘，要么想办法压缩空间。这里分享后者的一种解决方案。实践了一番，最终用H.265重新编码视频来间接实现压缩视频文件，这种方式可以几乎不损失清晰度，压缩效率也是相当的高。

Mac下Hugo搭建记录

Tue, 26 Nov 2019 00:00:00 +0000

Mac下hugo博客的一些命令和操作、修改记录，以及从Hexo迁移过来的主要操作。这篇也是迁移到hugo以后的第一篇，相当于重新开始，以后就只使用github来托管。

Mac清理软件

Sat, 26 Jan 2019 00:00:00 +0000

一般来说Mac/Linux桌面不安装这类的软件也可以用得挺舒心，系统生态特点决定的。

Windows下就很有必要安装一个电脑管家，用来管理软件权限和弹窗之类的，windows流氓软件非常非常多，不能裸奔。

Mac下制作iso系统启动

Sun, 04 Mar 2018 00:00:00 +0000

Mac制作U盘启动，直接使用dd命令即可。

ubuntu挂载exfat格式的硬盘

Sun, 04 Mar 2018 00:00:00 +0000

ubuntu默认不支持exfat格式的硬盘挂载。

Neovim安装

Fri, 26 Jan 2018 00:00:00 +0000

Neovim应该算是Vim的一个衍生版本或类似插件吧，从github两万多的star数可以看出其火爆程度。貌似提升性能和增加功能的同时也兼容了Vim。安装来体验一下。

Mac 安装最完整的 Vim

Sun, 21 Jan 2018 00:00:00 +0000

机器上默认安装的 Vim 一般不是完整的,需要手动升级到 Vim, 以获得更多的功能.

Python相关网址收集

Sat, 20 Jan 2018 00:00:00 +0000

将Python相关的学习资源和网址收集于此，主要是一些学习文档、博客、电子书主页、github等等。

Python的round函数

Fri, 19 Jan 2018 00:00:00 +0000

使用round函数的时候发现了「奇怪」的现象。一直觉得round函数就是四舍五入，结果却不一定。一般如果觉得奇怪，那就是没弄懂其本质的运作原理，所以深入了解了下round函数。

Python实现和遍历二叉树

Thu, 18 Jan 2018 00:00:00 +0000

先思考：

怎么表示一棵树(如二叉树)
树有哪几种遍历方式，怎么实现
给定其中N种遍历结果，如何还原树

Vim实用技巧总结

Thu, 18 Jan 2018 00:00:00 +0000

《Practical Vim》(《Vim实用技巧》) 是关于Vim技巧最好的教程，豆瓣评分9.1。之前断断续续地看过，不过没整理笔记。这书得经常翻看并实践，以后把看书和Vim练习的笔记记录整理在此，便于反复复习和练习使用。

配置zsh默认编辑器

Tue, 16 Jan 2018 00:00:00 +0000

配置终端中的默认编辑器。

Mac下mds_stores问题

Sun, 14 Jan 2018 00:00:00 +0000

这两天Mac时不时提示内存不足进而整个系统卡死，只能重启解决，打开活动监视器查看，CPU和内存狂飙。

epoll、异步、并发

Fri, 12 Jan 2018 00:00:00 +0000

关于异步、并发相关的笔记与资料汇总。

Sanic学习

Thu, 11 Jan 2018 00:00:00 +0000

Sanic学习笔记、练手记录。

Sanic实现WebSocket

Thu, 11 Jan 2018 00:00:00 +0000

Sanic除了利用Python原生的asyncio等异步特性，还可以方便地实现websocket接口。

关于RESTful API设计风格

Tue, 09 Jan 2018 00:00:00 +0000

最近抽空在看Sanic的文档，准备写个Demo，重温一遍RESTful API设计风格的知识。

用Elasticsearch作为Hexo的搜索服务

Tue, 09 Jan 2018 00:00:00 +0000

现在博客使用的搜索插件很慢，没访问缓存、第一次打开时至少要几秒钟，有时十秒或更多，实在慢。

Pycharm中Console的使用

Sat, 06 Jan 2018 00:00:00 +0000

Pycharm是很专业的Python开发IDE，功能特别强大，Console也不例外，比直接用iTerm2终端要好用。

用logging替换print

Sat, 06 Jan 2018 00:00:00 +0000

平时在学习和工作中，为了调试和检查，经常会用到打印变量结果等信息，习惯用print。这是不好的习惯，尤其是在Web相关的项目中。很小的脚本文件中用print是比较方便的，在稍微大点的Web项目中应该用logging模块彻底替换print，养成习惯。

项目中的代码风格规范的必要性

Sat, 06 Jan 2018 00:00:00 +0000

在项目中使用相同的代码风格规范是很有必要的。通过实践，发现好处多多。

Python的代码性能测试工具

Thu, 04 Jan 2018 00:00:00 +0000

Python有挺多代码性能测试的工具，分CPU和内存的性能测试。

Python 3.6 新特性一窥

Tue, 02 Jan 2018 00:00:00 +0000

Python3.6 在2016.12.23正式发布。发布一年多了，现在最新版本是3.6.4。 3.6是Python的一个重要版本，巩固和新增了很多Python 3.x 的新特性。

Python增强解释器Bpython

Tue, 02 Jan 2018 00:00:00 +0000

Python默认的解释器是Cpython，不大好用。Ipython是一个交互比较好的增强解释器。此外，还有另一个增强解释器是Bpython。

Python代码规范检查工具

Mon, 01 Jan 2018 00:00:00 +0000

Python代码规范检查工具汇总。

Python自定义异常类

Mon, 01 Jan 2018 00:00:00 +0000

Python自定义异常可以通过继承自带的异常类来实现。

Python的上下文管理器

Sun, 31 Dec 2017 00:00:00 +0000

Python读写文件最好的写法是「 with open(filename, mode) as f 」这种方式。这里的with使用的就是自带的上下文管理。本篇内容介绍Python的上下文管理器(contextor)。

Python str VS repr

Sat, 30 Dec 2017 00:00:00 +0000

Python中字符串的格式化一般使用str和repr，str和repr调用的底层特殊函数是__str__和__repr__。用示例展示它们之间的区别。

当True、False和数字作为dict的key时

Sat, 30 Dec 2017 00:00:00 +0000

Python的字典(dict)是很常用的，但字典的key的选用是需要注意的，并不是所有数据类型都可以作为字典的key；当True、False和数字作为dict的key时会发生「诡异」的事。

Mac在finder中隐藏指定文件

Fri, 29 Dec 2017 00:00:00 +0000

Mac的资源管理器默认隐藏「.」开头的目录和文件。要隐藏更多的文件可以使用终端命令「chflags」: # 隐藏 .pyc目录的文件 chflags hidden ./*.pyc # 恢复显示 chflags nohidden ./*.pyc finder中切换显示隐藏文件的快捷键是「command + shift + .」。

Pycharm配置pylint和pytest

Thu, 28 Dec 2017 00:00:00 +0000

配置Pycharm支持pylint和pytest的快捷使用，方法是添加到右键的「External Tools」中。

Python几个主流单元测试工具基本使用示例

Thu, 28 Dec 2017 00:00:00 +0000

对比记录Python几个主流单元测试工具的基本使用示例。

Python单元测试相关的模块和工具

Thu, 28 Dec 2017 00:00:00 +0000

任何语言，要想编写足够健壮的程序，都要配合完善的单元测试，尤其是大型项目，在实践中这也是容易被忽略或不重视的一个环节。在此收集单元测试相关的模块和学习书籍、阅读资料等。

asyncio uvloop sanic

Tue, 26 Dec 2017 00:00:00 +0000

这两三年来Python3最主要和最受关注的feature莫过于asyncio，得益于node.js和高并发编程这几年的火热，异步编程和异步IO的概念更加受关注。

Hexo博客字体的调整

Sun, 24 Dec 2017 00:00:00 +0000

不同系统、平台的字体并不统一，在不同的平台上显示效果也不一样。修改Hexo博客的字体，取一个自己喜欢的折中效果。

Jupyter notebook添加Python 3

Sun, 24 Dec 2017 00:00:00 +0000

原来机器里装的是 anaconda2，默认的Python是2.7版本，默认的 jupyter notebook 也是基于Python 2内核的。

PyCon学习资源

Sun, 24 Dec 2017 00:00:00 +0000

PyCon是Python每年举行的Python实践分享大会，除了主会，还有很多地区性的PyCon大会。 PyCon是关于Python的高质量且前沿的技术分享，有很多分享视频，是学习和了解Python开发和实践的非常好用的学习资料。

Python 2 生命倒计时

Sun, 24 Dec 2017 00:00:00 +0000

Python 2 早已不再被官方重视和重点维护，这已是众所周知的事。官方希望在2020年的时候彻底抛弃Python 2。

Python is not installed as a framework 报错解决

Sun, 24 Dec 2017 00:00:00 +0000

在iPython中 from matplotlib import pyplot 报错解决方法。

Python中的 for else

Sun, 24 Dec 2017 00:00:00 +0000

Python中的for循环是有else的可选用法的。

for后面加了else后，for循环结束后(没有break)会进入else执行语句；如果碰到break则会跳过else分支。

如何写出漂亮优雅的Python代码

Sun, 24 Dec 2017 00:00:00 +0000

不少人觉得Python语法简单，学几天就会了。殊不知，要写出漂亮优雅的Python代码，不下苦功夫钻研和大量的实践是不可能的，除非是天才。写出漂亮的Python代码，需要对语言本身精通，谈何容易。

怎么写好？捷径之一当然是看高手和大师们是怎么写的，多学习和实践。下面有一些大师的演讲和示例，示范如何写出漂亮优雅的Python代码。

用pylab模式开启iPython

Sun, 24 Dec 2017 00:00:00 +0000

在iPython中pandas的一些调用matplotlib的函数需要pylab方式打开。

json.dump和pickle.dump的对比

Sat, 23 Dec 2017 00:00:00 +0000

Python的json和pickle模块实现了数据的序列和反序列化。基本上功能使用没有太大区别，方法也同样是dumps/dump和loads/load。

以实际使用示例对比json.dump和pickle.dump的序列的效率和区别。

Python遍历列表并修改元素的值

Sat, 23 Dec 2017 00:00:00 +0000

怎样Python遍历列表并修改元素的值？ Python是一门灵活的语言，这个问题，不同人的习惯写法可能不同。 但有时不同的写法效率可以相差两万倍，甚至更多，这点需要时刻警惕。

计算Python对象的大小

Sat, 23 Dec 2017 00:00:00 +0000

怎样获得Python对象占用内存的大小呢？利用sys模块中getsizeof函数。

豆瓣影视信息的一些简单分析

Sat, 23 Dec 2017 00:00:00 +0000

之前把豆瓣电影下的影视信息抓取了一遍，现在可以进行一些简单的分析。

Python3中的格式化

Fri, 22 Dec 2017 00:00:00 +0000

Python3和Python2的格式化是不同的，Python3中主要使用内置的format和str.format函数。

Python中@classmethod和@staticmethod

Fri, 22 Dec 2017 00:00:00 +0000

Python中classmethod 、staticmethod 、abstract method 类的方法类型有：普通方法、类方法、静态方法、抽象方法等

Scrapy抓取日本乐天的前五大品牌洗衣机的评论

Thu, 21 Dec 2017 00:00:00 +0000

rakuten.co.jp是日本比较老牌的电商网站，跟日本亚马逊差不多，是日本用得比较多的电商购物网站。不过跟中国的京东和淘宝天猫比起来就是小巫见大巫了。

Scrapy断点续爬

Thu, 21 Dec 2017 00:00:00 +0000

有的爬虫程序跑完花费的时间特别长，可能几个月甚至更久。暂停然后继续爬的需求油然而生。 Scrapy已经自带了这个功能。

两本爬虫相关的书籍

Thu, 21 Dec 2017 00:00:00 +0000

今年想看的书单越积累越长，优先级也处于不断调整的状态。最近业余时间阅读了两本爬虫的书籍，也写了一些爬虫代码。

查看端口占用进程并kill掉

Sun, 17 Dec 2017 00:00:00 +0000

Linux和Mac下查看端口占用、kill掉占用进程

用nload查看实时网络流量和带宽使用

Sun, 17 Dec 2017 00:00:00 +0000

Linux查看网络流量和带宽使用情况的工具和命令很多，nload是其中一种方式。

Scrapy抓取结果汇总分析

Sat, 16 Dec 2017 00:00:00 +0000

Scrapy是一个功能非常强大的爬虫框架，功能上基本是应有尽有。 Scrapy抓取完之后会有一个汇总结果。以抓取豆瓣电影TOP250简单解读一下汇总结果分析。

抓取瓣所有电影详情页并统计豆瓣收录的电影的数量

Sat, 16 Dec 2017 00:00:00 +0000

豆瓣是中国的imdb，国内最权威的电影信息收录和影评平台之一。豆瓣总共收录了多少部电影呢？以抓取豆瓣所有的电影详情为例，回答这个问题。

用builtwith识别网站使用的相关技术

Sat, 16 Dec 2017 00:00:00 +0000

怎么判断一个网站使用了哪些技术哪些框架呢？ Python有个工具builtwith可以用来识别部分网站所采用的相关技术。

用robotparser解析网站的robots.txt

Sat, 16 Dec 2017 00:00:00 +0000

robotparser是Python2中的自带模块，Python3中则是集成在urllib自带模块中。可以用来解析网站的robots.txt，判断要抓取的url和user-agent是否被网站所建议禁用。

MongoDB常用语法和命令

Fri, 15 Dec 2017 00:00:00 +0000

MongoDB常用语法和命令记录集合

Scrapy将抓取结果写入MongoDB数据库

Fri, 15 Dec 2017 00:00:00 +0000

爬虫抓取网页数据，一般字段很多，而且经常更新和变动，用非关系数据库会舒畅很多。 Scrapy写入MongoDB示例代码，并对比MySQL的方式。

MySQL replace into

Thu, 07 Dec 2017 00:00:00 +0000

Mysql提供了replace into，是insert into增强版

MySQLdb报错解决

Thu, 07 Dec 2017 00:00:00 +0000

Library not loaded: libmysqlclient.18.dylib _mysql.so image not found

Python使用traceback获取详细的异常信息

Thu, 07 Dec 2017 00:00:00 +0000

使用traceback可以获取详细的异常信息，是很有用的工具

Scrapy将抓取结果写入MySQL数据库

Thu, 07 Dec 2017 00:00:00 +0000

Scrapy中pipelines.py是用来处理Item存储的，可以写入文件或数据库。以代码示例Scrapy写入MySQL数据库。

Python模拟登录CSDN

Wed, 06 Dec 2017 00:00:00 +0000

用Scrapy模拟登录CSDN，并进入个人中心抓取数据

Mac配置MongoDB开发测试环境

Tue, 05 Dec 2017 00:00:00 +0000

Mac下MongoDB配置记录

Mac配置Redis开发测试环境

Tue, 05 Dec 2017 00:00:00 +0000

Mac下Redis配置记录

Python抓取IMDB电影Top250排行

Tue, 05 Dec 2017 00:00:00 +0000

用Scrapy抓取IMDB电影Top250排行

Python抓取豆瓣电影Top250排行

Tue, 05 Dec 2017 00:00:00 +0000

用Scrapy抓取豆瓣电影Top250排行

Python中的引用与复制简单示例

Sat, 02 Dec 2017 00:00:00 +0000

Python中的赋值=和函数传参用的是引用。 Python中的复制默认是浅复制，以示例表明浅复制与深复制之间的区别。

Tmux常用命令

Sat, 02 Dec 2017 00:00:00 +0000

tmux是一个非常实用的终端工具，用于在一个终端窗口中运行多个终端会话。由于 tmux 允许随时随地断开或重新接入会话（Session），所以最大的作用就是在远程服务器上持久地保存工作状态。由于网络的不稳定会经常造成远程连接断开，这个工具保存会话状态的功能非常实用！

Python实现简单的装饰器

Fri, 01 Dec 2017 00:00:00 +0000

Python的装饰器是一种嵌套函数，一种闭包。是很好用的工具，利用得好，让代码锦上添花、如虎添翼。本文介绍简单的装饰器的实现，以及三个好用的Python自带装饰器：functools.wraps、functools.lru_cache、functools.singledispatch

Linux安全防火墙iptables

Thu, 30 Nov 2017 00:00:00 +0000

Centos为例，iptables命令相关

Linux开机启动服务

Thu, 30 Nov 2017 00:00:00 +0000

Linux服务器重启后，有些服务是不会自动重启的，可以设置为开机自启。

Python中策略模式的应用：以电商购物车的打折策略为例

Thu, 30 Nov 2017 00:00:00 +0000

策略模式是常见的设计模式之一。本文探讨Python中关于策略模式的应用，以电商购物车的不同打折策略的实现为例，并示范怎么逐步优化代码的实现。

Python的virtualenv使用

Thu, 30 Nov 2017 00:00:00 +0000

virtualenv是Python中用来创建隔离的Python环境，用来解决一台机器下不同的项目不同的Python版本依赖问题。很好用的工具。

Python的作用域与闭包浅析

Thu, 30 Nov 2017 00:00:00 +0000

以示例阐述Python中的作用域和闭包

命令行下的接口调试工具httpie

Thu, 30 Nov 2017 00:00:00 +0000

常用的开发接口调试工具有postman等。命令行下可以用curl、wget，以及更好用的httpie。

Python中map、filter和reduce的替代品

Wed, 29 Nov 2017 00:00:00 +0000

支持函数式的语言通常会提供 map、filter 和 reduce 三个高阶函数。在Python 中，能不用就不用它们！

查看Python帮助文档的几种方式

Wed, 29 Nov 2017 00:00:00 +0000

查看Python帮助文档，可以用官方自带的：dir、help、__doc__。查看对象属性，最佳方案不是dir，是一个开源替代工具pdir。

NumPy和SciPy简介