📜  Scrapy-环境

📅  最后修改于: 2020-10-31 14:30:58             🧑  作者: Mango


在本章中,我们将讨论如何安装和设置Scrapy。 Scrapy必须使用Python安装。

可以使用pip安装Scrapy。要安装,请运行以下命令-

pip install Scrapy

视窗

– Windows OS不支持Python 3。

第1步-从Python安装Python 2.7

通过将以下路径添加到PATH来设置环境变量-

C:\Python27\;C:\Python27\Scripts\; 

您可以使用以下命令检查Python版本-

python --version

步骤2-安装OpenSSL

在您的环境变量中添加C:\ OpenSSL-Win32 \ bin。

注意-OpenSSL已预安装在Windows之外的所有操作系统中。

步骤3-安装Visual C++ 2008可再发行组件。

步骤4-安装pywin32

第5步-为低于2.7.9的Python版本安装pip

您可以使用以下命令检查pip版本-

pip --version

步骤6-要安装scrapy,请运行以下命令-

pip install Scrapy

水蟒

如果您的计算机上安装了anacondaminiconda ,请运行以下命令以使用conda安装Scrapy-

conda install -c scrapinghub scrapy 

Scrapinghub公司支持适用于Linux,Windows和OS X的官方conda软件包。

注意-如果您在通过pip安装时遇到问题,建议使用上述命令安装Scrapy。

Ubuntu 9.10或更高版本

最新版本的Python已预装在Ubuntu OS上。使用Scrapinghub提供的aptgettable Ubuntu软件包。使用软件包-

步骤1-您需要将用于对Scrapy软件包签名的GPG密钥导入APT密钥环-

sudo apt-key adv --keyserver hkp://keyserver.ubuntu.com:80 --recv 627220E7

步骤2-接下来,使用以下命令创建/etc/apt/sources.list.d/scrapy.list文件-

echo 'deb http://archive.scrapy.org/ubuntu scrapy main' | sudo tee 
/etc/apt/sources.list.d/scrapy.list

步骤3-更新软件包列表并安装scrapy-

sudo apt-get update && sudo apt-get install scrapy

Archlinux

您可以使用以下命令从AUR Scrapy软件包安装Scrapy-

yaourt -S scrapy

Mac OS X

使用以下命令安装Xcode命令行工具-

xcode-select --install 

不要使用系统Python,而是安装一个与系统其余部分不冲突的新更新版本。

步骤1-安装自制软件

步骤2-设置环境PATH变量以指定应在系统软件包之前使用自制软件包-

echo "export PATH = /usr/local/bin:/usr/local/sbin:$PATH" >> ~/.bashrc

步骤3-要确保更改已完成,请使用以下命令重新加载.bashrc-

source ~/.bashrc 

步骤4-接下来,使用以下命令安装Python

brew install python

步骤5-使用以下命令安装Scrapy-

pip install Scrapy