wget 下载整个网站,或者特定目录 - DP. - 博客园
windows wget下载地址
wget抓取整站做本地镜像 - kaye0110的博客 - 博客频道 - CSDN.NET
wget -nH -K -E -d -np -L -r http://flatfull.com/themes/scale/
-np 递归下载时不搜索上层目录
-nH, –no-host-directories 不创建主机目录
-d, –debug 打印调试输出
-L 递归时不进入其它主机
-E //将所有text/html文档以.html扩展名保存
-r 递归抓取
-k 抓取之后修正链接,适合本地浏览
Could not find function xmlCheckVersion in library libxml2. Is libxml2 installed?
解决
easy_install pip
easy_install lxml
pip install module_name
py2exe安装
下载地址(下载后py2exe存储在lib目录)
C:\Anaconda2\Lib\site-packages 或者 C:\Users\Administrator\.windows-build-tools\python27\Lib\site-packages
python没有注册问题(仅供参考具体安装的PYTHON,我的windos-build-tools又装了一个PYTHON所以注册的时候不是用anaconda的路径,手动搬迁第三方库)
安装第三方库出现 Python version 2.7 required
python2 print>>file,"string" python3 print(string,file=file)
python windows使用工具
科学计算包 Anaconda Python(包含python基础依赖包,解决windows下依赖包下载问题,无需安装python)
myactivity.google.com/myactivity google爬虫用户所有活动
python字符串格式尿性
python元组格式化成字符串的问题? - SegmentFault
python 工具包
www.runoob.com/python/python-reg-expressions.html re模块提供正则表达式
www.runoob.com/python/ python 基础doc
快速上手 request
python MySQLdb 安装
windows直接下载32位/64位exe
Mac/Linux下载MySQL-python修改site.cfg的mysql-config路径;setup_posix.py的mysql_config.path
conda install mysql-python
socks模块
pip install socksipy-branch
[WEB HACKING] Weevely를 이용하여 Stealth Webshell 만들기(weevely 설치 및 사용)h
gevent安装
gevent 1.1.2 : Python Package Index
mac/Linux安装 sudo pip install xxx.whl(看好自己的python版本和系统版本)
windows安装 exe
Scrapy爬虫反ban的技巧 // Neurohazard
PIL模块安装
pip install Pillow
appium
pip install Appium-Python-Client
chardet
pip install chardet
cv2
下载opencv(用于图像处理)
推荐使用homebrew安装
brew install opencv
参考:OpenCV中文网站-论坛 - Powered by Discuz!
scrapy使用
work list:
dht metadata
博主:
网友评论