📜  如何在 MacOS 上安装 Scrapy?

📅  最后修改于: 2022-05-13 01:57:03.665000             🧑  作者: Mango

如何在 MacOS 上安装 Scrapy?

在本文中,我们将学习如何在 MacOS 上使用Python安装 Scrapy。

Scrapy 是一个快速的高级网页抓取和网页抓取框架,用于抓取网站并从其页面中提取结构化数据。它可用于广泛的用途,从数据挖掘到监控和自动化测试。

安装:

方法一:使用pip安装Scrapy

按照以下步骤使用 pip 在 macOS 上安装 SCrapy 包:

第 1 步:在 MacOS 中安装最新的 Python3

第二步:检查 pip3 和 python3 是否安装正确。

python3 --version
pip3 --version

在 macos 中检查 python 和 pip 版本

第 3 步:升级您的 pip 以避免在安装过程中出错。

pip3 install --upgrade pip

在 macOS 中升级 pip

第四步:输入以下命令,使用 pip3 安装 Scrapy。

pip3 install Scrapy

使用 pip 在 macOS 上安装 Scrapy 包

方法二:使用 setup.py 安装 Scrapy

按照以下步骤使用 setup.py 文件在 macOS 上安装 Scrapy 包:

第 1 步:从这里下载 Scrapy for python3 的最新源包。

curl https://files.pythonhosted.org/packages/e9/dc/b2f41d802f548fba35c2d7c443ab0ab3df358eebd261f4d30d19ad39658a/Scrapy-2.5.0.tar.gz > scrapy.tar.gz

在macos中下载Scrapy的源码包

第 2 步:使用以下命令提取下载的包。

tar -xzvf scrapy.tar.gz

在 macOS 中提取 scrapy.tar.gz 文件

第3步:进入文件夹并输入以下命令安装包。

注意:您的系统中必须安装适用于 XCode MacOS 的开发人员工具

cd Scrapy-2.5.0
python3 setup.py install

使用 setup.py 文件在 macOS 上安装 Scrapy

在 macOS 上验证 Scrapy 安装:

在您的Python终端中进行以下导入以验证安装是否已正确完成:

import scrapy

在 macOS 上验证 Scrapy 安装

如果在导入模块时出现任何错误,则说明没有正确安装。