分类 python articles

批量提取公众号文章的python脚本

如何获取?http://xingyue.artizen.me coding:utf-8 import json import pprint links_array = [] with open('msg.txt',encoding='utf-8') as file: for line in file: s = json.loads(line) [links_array.append(i['link']) for i in s['app_msg_list']] with open('link.txt','w') as f : [f.write(l + '\n') for l in links_array]……

Continue reading

Online.net 服务器监控脚本

今天的kimsufi 4C没抢到。不过这个垃圾网还不如oline的。就找了个脚本改改 部署方便些 脚本 脚本使用python3.6编写,下面是脚本 需要更改的是价格。这个脚本是根据价格判断需要的服务器是否有货的 地址的话 这个是官网默认的地址,如果有活动的话 如果活动的界面跟这个地址的界面一样的……

Continue reading

Python 多版本共存之pyenv

经常遇到这样的情况: 系统自带的 Python 是 2.6,自己需要 Python 2.7 中的某些特性; 系统自带的 Python 是 2.x,自己需要 Python 3.x; 此时需要在系统中安装多个 Python,但又不能影响系统自带的 Python,即需要实现 Python 的多版本共存。pyenv 就是这样一个 Python 版本管理器。 安装 pyenv 在终端执行如下命令以安装 pyenv 以及……

Continue reading

python异步多线程超高性能爬虫爬取又拍云图片

前言 最近有个奇葩需求: 要把又拍云所有的图片全都下载下来 大约10T 3亿张左右 联系又拍云 能否邮寄硬盘直接拷贝,答曰不行。。但是给了个下载的python脚本 download_file_with_iter.py 我怀着感激的心情下载下来,结果一秒不到3张。。实在是慢,于是乎打算自己写一个 版本1 这是刚做的时候的版本,直接使用aio的队列, 环……

Continue reading

Python读取指定目录下指定后缀文件并保存为docx

最近有个奇葩要求 要项目中的N行代码 申请专利啥的 然后作为程序员当然不能复制粘贴 用代码解决。。 使用python-docx读写docx文件 环境使用python3.6.0 首先pip安装python-docx pip install python-docx 然后下面是脚本 修改目录,这里默认取脚本运行目录下的src文件夹 取.cs后缀的……

Continue reading

Python打包上传

你可以用pip导出你的dependency: $ pip freeze > requirements.txt 然后在通过以下命令安装dependency: pip install -r requirements.txt 使用 setuptools 来安装 使用 buildout 进行构建 下面具体说下这两点 setuptools 的官方文档在这 setuptools – The PEAK Developers’ Center, 当然这份文档有点长,主要是用来参考。许多 python 项目里面的 setup.py 就是用的 setuptools,你在 setup.py……

Continue reading

Python虚拟环境设置

Python2环境 首先,我们用pip安装virtualenv: pip3 install virtualenv 然后,假定我们要开发一个新的项目,需要一套独立的Python运行环境,可以这么做: 第一步,创建目录: Mac:~ michael$ mkdir myproject Mac:~ michael$ cd myproject/ Mac:myproject michael$ 第二步,创建一个独立的Python运行环境,命名为venv: Mac:myproject michael$ virtualenv --no-site-packages venv Using base prefix "/usr/local/.../Python.framework/Versions/3.4" New python executable in venv/bin/python3.4 Also creating……

Continue reading