Month: April 2018

Scrapy安装方法!

最近学习使用scrapy进行数据采集,这个框架还是不错的,下面简单记录下安装方法: 1、首先安装pip, Python 2 >=2.7.9 or Python 3 >=3.4下需要用这种方法安装pip curl https://bootstrap.pypa.io/get-pip.py -o get-pip.py python get-pip.py 2、安装依赖环境,编译时容易出现gcc错误,首先需要安装gcc,最主要安装libffi debian下安装libffi: apt-get install libffi-dev centos下安装libffi: yum install libffi-devel 3、安装scrapy pip install scrapy 4、测试scrapy是否安装成功! python中测试能否导入scrapy模块: import scrapy scrapy.version_info shell中测试是否执行scrapy命令: scrapy  

Debian 8(jessie)和Debian 9 (stretch )下安装Proxmox VE过程记录及问题

最近手里刚好有几台独立服务器,就想测试下Proxmox实际开小鸡的效率。由于这几台独服后台没有管理,连重启、停机都不支持,也不支持reinstall 操作系统,默认只给安装了centos 或debian,更不要说支持proxmox后台安装了。 由于proxmox建立在debian基础上,就想着不用iso模式启动安装了,直接用系统apt-get方式来安装了!! 由于debian 8 、debian 9安装方式略有差别,所以每一步都分开记录。主要步骤如下: 1、利用网上一键更换Debian系统脚本安装基础debian系统: (1)  wget –no-check-certificate -qO DebianNET.sh ‘https://moeclub.org/attachment/LinuxShell/DebianNET.sh’ && chmod a+x DebianNET.sh (2)  debian 8 x64: bash DebianNET.sh -d jessie -v amd64 debian 9 x64:     bash DebianNET.sh -d stretch -v amd64 2、修改hostname,此步非常关键,这一步导致我安装总是出错,找了两天才找到问题所在: 首先修改/etc/hosts,再修改/etc/hostname文件,修改完成后,切记重新启动。 /etc/hosts 文件格式如下: 127.0.0.1 localhost.localdomain localhost 192.168.15.77 prox4m1.proxmox.com prox4m1 pvelocalhost only need to touch the