python爬虫 scrapy3_ 安装指南
2024-09-21 11:58:33
安装指南
安装Scrapy
注解
请先阅读 平台安装指南.
下列的安装步骤假定您已经安装好下列程序:
- Python 2.7
- Python Package: pip and setuptools. 现在 pip 依赖 setuptools ,如果未安装,则会自动安装 setuptools 。
- lxml. 大多数Linux发行版自带了lxml。如果缺失,请查看http://lxml.de/installation.html
- OpenSSL. 除了Windows(请查看 平台安装指南)之外的系统都已经提供。
您可以使用pip来安装Scrapy(推荐使用pip来安装Python package).
使用pip安装:
pip install Scrapy
平台安装指南
Windows
从 http://python.org/download/ 上安装Python 2.7.
您需要修改
PATH
环境变量,将Python的可执行程序及额外的脚本添加到系统路径中。将以下路径添加到PATH
中:C:\Python2.7\;C:\Python2.7\Scripts\;
请打开命令行,并且运行以下命令来修改
PATH
:c:\python27\python.exe c:\python27\tools\scripts\win_add2path.py
关闭并重新打开命令行窗口,使之生效。运行接下来的命令来确认其输出所期望的Python版本:
python --version
从 http://sourceforge.net/projects/pywin32/ 安装 pywin32
请确认下载符合您系统的版本(win32或者amd64)
从 https://pip.pypa.io/en/latest/installing.html 安装 pip
打开命令行窗口,确认
pip
被正确安装:pip --version
到目前为止Python 2.7 及
pip
已经可以正确运行了。接下来安装Scrapy:pip install Scrapy
Ubuntu 9.10及以上版本
不要 使用Ubuntu提供的 python-scrapy
,相较于最新版的Scrapy,该包版本太旧,并且运行速度也较为缓慢。
您可以使用官方提供的 Ubuntu Packages 。该包解决了全部依赖问题,并且与最新的bug修复保持持续更新。
Archlinux
您可以依照通用的方式或者从 AUR Scrapy package 来安装Scrapy:
yaourt -S scrapy
最新文章
- <;转+改>;Web测试中关于登录的测试
- centos 6.3 搭建git/gitosis/gitweb
- HW3.18
- git 取消追踪
- c++ ifstream ofstream 文件流
- 调色板QPalette类用法详解(附实例、源码)(很清楚:窗口背景色 前景色 按钮的颜色 按钮文本的颜色 )
- C++中的内存对齐
- maven无法加载本地jar包以及maven项目打包后本地jar包没有打进项目的问题解决办法
- servlet之重写
- 关于jQuery实现CheckBox全选只能生效一次的问题
- logging日志文件配置
- 震惊!1MB == 1000KB??
- 怎样从外网访问内网Django?
- BZOJ2956: 模积和
- 【xsy2506】 bipartite 并查集+线段树
- MATLAB下数组随机打乱顺序的方法
- [移动] Xamarin install
- git 代码上传至远程仓库&;从远程库克隆到本地
- 洛谷P3809 后缀排序【后缀数组】【模板】
- 学习笔记之PHP
热门文章
- 【ORACLE】oracle数据库用户密码复杂度配置
- JavaScript快速入门-ECMAScript本地对象(Number)
- 设计模式 笔记 生成器(建造者)模式 Builder
- leetcode之有序数组的平方
- Invalid AABB inAABB UnityEngine.Canvas:SendWillRenderCanvases()的解决办法
- B. Lost Array
- 《Linux内核分析》第三周学习小结 构造一个简单的Linux系统OS
- Java的起源和发展
- 第一个spring冲刺总结及后诸葛亮报告(附团队贡献分)
- Visual Studio 2013安装及简单的单元测试