Scrapy学习之路（一）————环境配置
2024-08-26 03:38:47
一、问题环境安装
首先scrapy这个爬虫框架是基于twisted完成的因此，在安装scrapy之前需要安装twisted。
否则直接安装scrapy就会直接出错：Failed building wheel for twisted。
二、解决
首先下载twisted的.whl文件，也包括其他的包可以下载，下载完成后 pip install 【下载路径】，就可以看到环境安装成功，再来安装scrapy：pip install scrapy。
三、总结
安装成功后比较简单，开始总以为会自己安装scrapy的所有包，但是不是这样的，直接安装会发现wheel无法创建twisted的环境，一直在失败所以需要自己安装twisted的.whl文件在来安装scrapy
最新文章
- MongoDB学习笔记七：管理
- 字典树的C++实现
- Linux启动与登陆环境
- JDK BIO编程
- @font-face制作Web Icon
- 转：this的用法
- spring mvc的excel报表文件下载时流的冲突解决
- 《Genesis-3D开源游戏引擎完整实例教程-跑酷游戏篇05：二段跳》
- Boost.Asio c++ 网络编程翻译（20）
- 解析Xcode把应用程序打包成ipa---解决打包完新版本itunes提示不是有效应用程序的问题
- thinkphp3.2之模型（M层）
- 《Linux命令行与shell脚本编程大全》 第十八章 学习笔记
- VBS基础篇 - 对象(5) - File对象
- SendMessageUpwards定义简单按钮（Unity3D开发之十）
- C# 时钟控件
- java对象与map对象相互转换
- JavaScript笔记 #08# 用Regex辅助生成文章目录 V2.0
- n以内的1的个数
- label技巧
- nginx中在超全局变量$_SERVER中增加变量