图片处理

1. pip install pillow
2. from PIL import Image
3. import numpy as np
4. a = np.array(Image.open('test.jpg'))
5. b = [255,255,255] - a
6. im = Image.fromarray(b.astype('uint8'))
7. im.save('new.jpg')

youtube-dl下载国外视频

1. pip install youtube-dl #直接安装youtube-dl
2. pip install -U youtube-dl #安装youtube-dl并更新
3. youtube-dl "http://www.youtube.com/watch?v=-wNyEUrxzFU"

查看对象的全部属性和方法

1. pip install pdir2
2. >>> import pdir,requests
3. >>> pdir(requests)
4. module attribute:
5. __cached__, __file__, __loader__, __name__, __package__, __path__, __spec__
6. other:
7. __author__, __build__, __builtins__, __copyright__, __license__, __title__,
8. __version__, _internal_utils, adapters, api, auth, certs, codes, compat, cookies
9. , exceptions, hooks, logging, models, packages, pyopenssl, sessions, status_code
10. s, structures, utils, warnings
11. special attribute:
12. __doc__
13. class:
14. NullHandler: This handler does nothing. It's intended to be used to avoid th
15. e
16. PreparedRequest: The fully mutable :class:`PreparedRequest <PreparedRequest>
17. ` object,
18. Request: A user-created :class:`Request <Request>` object.
19. Response: The :class:`Response <Response>` object, which contains a
20. Session: A Requests session.
21. exception:
22. ConnectTimeout: The request timed out while trying to connect to the remote
23. server.
24. ConnectionError: A Connection error occurred.
25. DependencyWarning: Warned when an attempt is made to import a module with mi
26. ssing optional
27. FileModeWarning: A file was opened in text mode, but Requests determined its
28. binary length.
29. HTTPError: An HTTP error occurred.
30. ReadTimeout: The server did not send any data in the allotted amount of time
31. .
32. RequestException: There was an ambiguous exception that occurred while handl
33. ing your
34. Timeout: The request timed out.
35. TooManyRedirects: Too many redirects.
36. URLRequired: A valid URL is required to make a request.
37. function:
38. delete: Sends a DELETE request.
39. get: Sends a GET request.
40. head: Sends a HEAD request.
41. options: Sends a OPTIONS request.
42. patch: Sends a PATCH request.
43. post: Sends a POST request.
44. put: Sends a PUT request.
45. request: Constructs and sends a :class:`Request <Request>`.
46. session: Returns a :class:`Session` for context-management.

Python 玩转网易云音乐

1. pip install ncmbot
2. import ncmbot
3. #登录
4. bot = ncmbot.login(phone='xxx', password='yyy')
5. bot.content # bot.json()
6. #获取用户歌单
7. ncmbot.user_play_list(uid='36554272')

下载视频字幕

1. pip install getsub

Python 财经数据接口包

1. pip install tushare
2. import tushare as ts
3. #一次性获取最近一个日交易日所有股票的交易数据
4. ts.get_today_all()
5. 代码，名称，涨跌幅，现价，开盘价，最高价，最低价，最日收盘价，成交量，换手率
6. code    name     changepercent  trade   open   high    low  settlement \
7. 0     002738  中矿资源         10.023  19.32  19.32  19.32  19.32       17.56
8. 1     300410  正业科技         10.022  25.03  25.03  25.03  25.03       22.75
9. 2     002736  国信证券         10.013  16.37  16.37  16.37  16.37       14.88
10. 3     300412  迦南科技         10.010  31.54  31.54  31.54  31.54       28.67
11. 4     300411  金盾股份         10.007  29.68  29.68  29.68  29.68       26.98
12. 5     603636  南威软件         10.006  38.15  38.15  38.15  38.15       34.68
13. 6     002664  信质电机         10.004  30.68  29.00  30.68  28.30       27.89
14. 7     300367  东方网力         10.004  86.76  78.00  86.76  77.87       78.87
15. 8     601299  中国北车         10.000  11.44  11.44  11.44  11.29       10.40
16. 9     601880   大连港         10.000   5.72   5.34   5.72   5.22        5.20
17. 10    000856  冀东装备         10.000   8.91   8.18   8.91   8.18        8.10

开源漏洞靶场

1. # 安装pip
2. curl -s https://bootstrap.pypa.io/get-pip.py | python3
3. # 安装docker
4. apt-get update && apt-get install docker.io
5. # 启动docker服务
6. service docker start
7. # 安装compose
8. pip install docker-compose
9. # 拉取项目
10. git clone git@github.com:phith0n/vulhub.git
11. cd vulhub
12. # 进入某一个漏洞/环境的目录
13. cd nginx_php5_mysql
14. # 自动化编译环境
15. docker-compose build
16. # 启动整个环境
17. docker-compose up -d
18. #测试完成后，删除整个环境
19. docker-compose down

北京实时公交

1. pip install -r requirements.txt 安装依赖
2. python manage.py build_cache 获取离线数据，建立本地缓存
3. #项目自带了一个终端中的查询工具作为例子，运行： python manage.py cli
4. >>> from beijing_bus import BeijingBus
5. >>> lines = BeijingBus.get_all_lines()
6. >>> lines
7. [<Line: 运通122(农业展览馆-华纺易城公交场站)>, <Line: 运通101(广顺南大街北口-蓝龙家园)>, ...]
8. >>> lines = BeijingBus.search_lines('847')
9. >>> lines
10. [<Line: 847(马甸桥西-雷庄村)>, <Line: 847(雷庄村-马甸桥西)>]
11. >>> line = lines[0]
12. >>> print line.id, line.name
13. 541 847(马甸桥西-雷庄村)
14. >>> line.stations
15. [<Station 马甸桥西>, <Station 马甸桥东>, <Station 安华桥西>, ...]
16. >>> station = line.stations[0]
17. >>> print station.name, station.lat, station.lon
18. 马甸桥西 39.967721 116.372921
19. >>> line.get_realtime_data(1) # 参数为站点的序号，从1开始
20. [
21. {
22. 'id': 公交车id,
23. 'lat': 公交车的位置,
24. 'lon': 公交车位置,
25. 'next_station_name': 下一站的名字,
26. 'next_station_num': 下一站的序号,
27. 'next_station_distance': 离下一站的距离,
28. 'next_station_arriving_time': 预计到达下一站的时间,
29. 'station_distance': 离本站的距离,
30. 'station_arriving_time': 预计到达本站的时间,
31. },
32. ...
33. ]

文章提取器

1. git clone https://github.com/grangier/python-goose.git
2. cd python-goose
3. pip install -r requirements.txt
4. python setup.py install
5. >>> from goose import Goose
6. >>> from goose.text import StopWordsChinese
7. >>> url  = 'http://www.bbc.co.uk/zhongwen/simp/chinese_news/2012/12/121210_hongkong_politics.shtml'
8. >>> g = Goose({'stopwords_class': StopWordsChinese})
9. >>> article = g.extract(url=url)
10. >>> print article.cleaned_text[:150]

香港行政长官梁振英在各方压力下就其大宅的违章建筑(僭建)问题到立法会接受质询，并向香港民众道歉。

梁振英在星期二(12月10日)的答问大会开始之际在其演说中道歉，但强调他在违章建筑问题上没有隐瞒的意图和动机。

一些亲北京阵营议员欢迎梁振英道歉，且认为应能获得香港民众接受，但这些议员也质问梁振英有

Python 艺术二维码生成器

1. pip install MyQR
2. myqr https://github.com
3. myqr https://github.com -v 10 -l Q

伪装浏览器身份

1. pip install fake-useragent
2. from fake_useragent import UserAgent
3. ua = UserAgent()
4. ua.ie
5. # Mozilla/5.0 (Windows; U; MSIE 9.0; Windows NT 9.0; en-US);
6. ua.msie
7. # Mozilla/5.0 (compatible; MSIE 10.0; Macintosh; Intel Mac OS X 10_7_3; Trident/6.0)'
8. ua['Internet Explorer']
9. # Mozilla/5.0 (compatible; MSIE 8.0; Windows NT 6.1; Trident/4.0; GTB7.4; InfoPath.2; SV1; .NET CLR 3.3.69573; WOW64; en-US)
10. ua.opera
11. # Opera/9.80 (X11; Linux i686; U; ru) Presto/2.8.131 Version/11.11
12. ua.chrome
13. # Mozilla/5.0 (Windows NT 6.1) AppleWebKit/537.2 (KHTML, like Gecko) Chrome/22.0.1216.0 Safari/537.2'

美化 curl

1. pip install httpstat
2. httpstat httpbin.org/get

1. python shell
2. pip install sh
3. from sh import ifconfig
4. print ifconfig("eth0")

处理中文文本内容

1. pip install -U textblob#英文文本的情感分析
2. pip install snownlp#中文文本的情感分析
3. from snownlp import SnowNLP
4. text = "I am happy today. I feel sad today."
5. from textblob import TextBlob
6. blob = TextBlob(text)
7. TextBlob("I am happy today. I feel sad today.")
8. blob.sentiment
9. Sentiment(polarity=0.15000000000000002, subjectivity=1.0)
10. s = SnowNLP(u'这个东西真心很赞')
11. s.words         # [u'这个', u'东西', u'真心',
12. #  u'很', u'赞']
13. s.tags          # [(u'这个', u'r'), (u'东西', u'n'),
14. #  (u'真心', u'd'), (u'很', u'd'),
15. #  (u'赞', u'Vg')]
16. s.sentiments    # 0.9769663402895832 positive的概率
17. s.pinyin        # [u'zhe', u'ge', u'dong', u'xi',
18. #  u'zhen', u'xin', u'hen', u'zan']
19. s = SnowNLP(u'「繁體字」「繁體中文」的叫法在臺灣亦很常見。')
20. s.han           # u'「繁体字」「繁体中文」的叫法
21. # 在台湾亦很常见。

抓取发放代理

1. pip install -U getproxy
2. ~ getproxy --help
3. Usage: getproxy [OPTIONS]
4. Options:
5. --in-proxy TEXT Input proxy file
6. --out-proxy TEXT Output proxy file
7. --help Show this message and exit.

• --in-proxy 可选参数，待验证的 proxies 列表文件
• --out-proxy 可选参数，输出已验证的 proxies 列表文件，如果为空，则直接输出到终端
• --in-proxy 文件格式和 --out-proxy 文件格式一致

zhihu api

1. pip install git+git://github.com/lzjun567/zhihu-api --upgrade
2. from zhihu import Zhihu
3. zhihu = Zhihu()
4. zhihu.user(user_slug="xiaoxiaodouzi")
5. {'avatar_url_template': 'https://pic1.zhimg.com/v2-ca13758626bd7367febde704c66249ec_{size}.jpg',
6. 'badge': [],
7. 'name': '我是小号',
8. 'headline': '程序员',
9. 'gender': -1,
10. 'user_type': 'people',
11. 'is_advertiser': False,
12. 'avatar_url': 'https://pic1.zhimg.com/v2-ca13758626bd7367febde704c66249ec_is.jpg',
13. 'url': 'http://www.zhihu.com/api/v4/people/1da75b85900e00adb072e91c56fd9149', 'type': 'people',
14. 'url_token': 'xiaoxiaodouzi',
15. 'id': '1da75b85900e00adb072e91c56fd9149',
16. 'is_org': False}

解析 nginx 访问日志并格式化输出

1. pip install ngxtop
2. $ ngxtop
3. running for 411 seconds, 64332 records processed: 156.60 req/sec
4. Summary:
5. |   count |   avg_bytes_sent |   2xx |   3xx |   4xx |   5xx |
6. |---------+------------------+-------+-------+-------+-------|
7. |   64332 |         2775.251 | 61262 |  2994 |    71 |     5 |
8. Detailed:
9. | request_path                             |   count |   avg_bytes_sent |   2xx |   3xx |   4xx |   5xx |
10. |------------------------------------------+---------+------------------+-------+-------+-------+-------|
11. | /abc/xyz/xxxx                            |   20946 |          434.693 | 20935 |     0 |    11 |     0 |
12. | /xxxxx.json                              |    5633 |         1483.723 |  5633 |     0 |     0 |     0 |
13. | /xxxxx/xxx/xxxxxxxxxxxxx                 |    3629 |         6835.499 |  3626 |     0 |     3 |     0 |
14. | /xxxxx/xxx/xxxxxxxx                      |    3627 |        15971.885 |  3623 |     0 |     4 |     0 |
15. | /xxxxx/xxx/xxxxxxx                       |    3624 |         7830.236 |  3621 |     0 |     3 |     0 |
16. | /static/js/minified/utils.min.js         |    3031 |         1781.155 |  2104 |   927 |     0 |     0 |
17. | /static/js/minified/xxxxxxx.min.v1.js    |    2889 |         2210.235 |  2068 |   821 |     0 |     0 |
18. | /static/tracking/js/xxxxxxxx.js          |    2594 |         1325.681 |  1927 |   667 |     0 |     0 |
19. | /xxxxx/xxx.html                          |    2521 |          573.597 |  2520 |     0 |     1 |     0 |
20. | /xxxxx/xxxx.json                         |    1840 |          800.542 |  1839 |     0 |     1 |     0 |

火车余票查询

1. pip install iquery
2. Usage:
3. iquery (-c|彩票)
4. iquery (-m|电影)
5. iquery -p <city>
6. iquery -l song [singer]
7. iquery -p <city> <hospital>
8. iquery <city> <show> [<days>]
9. iquery [-dgktz] <from> <to> <date>
10. Arguments:
11. from             出发站
12. to               到达站
13. date             查询日期
14. city             查询城市
15. show             演出的类型
16. days             查询近(几)天内的演出, 若省略, 默认15
17. city             城市名,加在-p后查询该城市所有莆田医院
18. hospital         医院名,加在city后检查该医院是否是莆田系
19. Options:
20. -h, --help       显示该帮助菜单.
21. -dgktz           动车,高铁,快速,特快,直达
22. -m               热映电影查询
23. -p               莆田系医院查询
24. -l               歌词查询
25. -c               彩票查询
26. Show:
27. 演唱会 音乐会 音乐剧 歌舞剧 儿童剧 话剧
28. 歌剧 比赛 舞蹈 戏曲 相声 杂技 马戏 魔术

作者：佚名

来源：51CTO