老蒋在测试某个爬虫环境,刚巧手上的这台测试机环境是CentOS系统,懒得去再安装Ubuntu,所以对于目前的CentOS7系统需要安装BeautifulSoup和Requests软件,这里将安装过程记录下来。后面有需要的时候也可以参考复制脚本。

第一、安装BeautifulSoup

> wget https://www.crummy.com/software/BeautifulSoup/bs4/download/4.5/beautifulsoup4-4.5.1.tar.gz
> tar -xvzf beautifulsoup4-4.5.1.tar.gz
> cd beautifulsoup4-4.5.1
> python setup.py install

安装BeautifulSoup

第二、安装安装Requests

> wget https://bootstrap.pypa.io/get-pip.py
> python get-pip.py
> pip install requests

安装安装Requests

如果我们还要安装lxml解析网页,可以直接这样安装。

> pip install lxml

就这样简单。