最近的项目突然发现一个bug，就是当服务器系统时区是utc时区，而服务器pgsql的时区是+8时区时候，通过python的datetime.now()插入的timestampz值有问题。所以特意做了一个测试。 1 测试前提 1.1 pyth…
midi文件解析 by python mido
首先要记住，midi文件并不存储声音，只存储指示合成器（电子乐器）如何发声的动作，比如某个时刻以什么力度按下某个音符。 音符note 狭义的音符指C、D、E、F、G、A、B七个(即Do–Re–Mi–Fa–Sol–La–Si)。广义的应该是包…
pip离线打包与安装python库
1、从本机导出第三方库列表 pip freeze > requirements.txt 2、根据列表从网络下载第三方库安装包 pip download -d packages -r requirements.txt 理论上pip do…
pyqt5
这两个礼拜做一个报文发送的后台守护程序，用到了pyqt5做用户界面。 1.简单窗口 import sys from PyQt5.QtWidgets import QApplication, QMainWindow def main(): #…
windows下部署django项目
一、iis+wfastcgi 1. 安装wfastcgi pip install wfastcgi 2. 启用wfastcgi 使用管理员权限打开cmd，输入如下命令： wfastcgi-enable 该命令会输出如下信息： …
pymssql 2.1.4 ImportError: DLL load failed
最近有个工作需要用python读写sqlserver数据库，就用到了pymssql库。结果在离线的生产环境部署脚本的时候，发现报错： ImportError: DLL load failed: The specified module co…
破解geetest的拖动验证码
最近有个项目需要爬取“国家企业信用信息公示系统”的数据，在该网站点击搜索按钮时，会弹出极验（geetest）的拖动式验证码。 遂一番google之，发现果然有哥们已经破解了这套验证码系统，甚至放出源码来了。学以致用。 原理很简单，首先定位缺…
用装饰器写一个single instance
一、关于python的装饰器 python装饰器的形式有点像java的注解、用处有点像java的切面。可以简单的理解为一个函数如果被装饰器注解了，那么在运行该函数之前，会先调用装饰器函数。 具体的参考如下两篇文章： https://www.…
pytesseract识别验证码
验证码破解是做爬虫经常要面对的问题。对于一般字符串或者算式的验证码，可以使用网页截图，然后OCR识别的方式来识别出验证码字符串来。 网页截图可以使用selenium的save_screenshot()方法； 用PIL图像处理库来截取验证码图…
爬虫遭遇http error 521
最近做了个爬虫需要用到代理ip，然后想去快代理上爬点代理ip下来用。 结果使用urllib2访问http://www.kuaidaili.com/proxylist/1时候发现总是返回521错误。 使用HTTPError的read方法可以打…