Scrapy的安装:

当前环境win10,python_3.6.4,64bit。在命令提示符窗口运行pip install Scrapy,出现以下结果:

building 'twisted.test.raiser' extension
error: Microsoft Visual C++ 14.0 is required. Get it with "Microsoft Visual C++ Build Tools": http://landinghub.visualstudio.com/visual-cpp-build-tools

按报错提示安装之后错误依旧存在;

http://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted> 下载Twisted对应版本的whl文件,cp后面是python版本,amd64代表64位,重新运行pip install命令:

pip install C:\Users\E5-573G\Desktop\2018寒假\Python\爬虫\scrapy\Twisted-17.5.0-cp36-cp36m-win_amd64.whl1 

其中install后面为下载的whl文件的完整路径名 。

然后再次运行 pip install scrapy 命令即可安装成功。

Scrapy命令行格式:

应用Scrapy爬虫框架主要是编写配置型代码。

Scrapy的第一个实例:演示HTML地址。

演示HTML页面地址:http://python123.io/ws/demo.html

最新文章

  1. jvm内存默认大小,及如何调整大小
  2. 夺命雷公狗-----React_native---2---sdk的安装
  3. linux和mac下的nginx和php的安装
  4. Shader的自定义特性使用
  5. ubuntu 命令收集
  6. HDU-1241Oil Deposits
  7. 利用T4模版生成EF实体
  8. std::function 测试
  9. JavaScript 学习笔记 - Web Workers
  10. Android输入事件详解
  11. Gradle 1.12用户指南翻译——第三十六章. Sonar Runner 插件
  12. ASP.NET MVC 网页应用 action 传递的Model
  13. 防止sql注入(简单)
  14. Spring Boot+Spring Security:获取用户信息和session并发控制
  15. SAP HANA S4 FI TABLE表结构
  16. Pyenv 安装部署
  17. 关于质能等效的两个思想实验 Two Ideological Experiments on Mass-Energy Equivalence
  18. RESTful API入门
  19. asp.net 定时执行任务代码 定时采集数据
  20. ZH奶酪:Python按行读取文件

热门文章

  1. Vue路由编程式导航以及hash模式
  2. Dart接口
  3. openresty开发系列16--lua中的控制结构if-else/repeat/for/while
  4. 关于[StructLayout(LayoutKind.Sequential, CharSet=CharSet.Ansi)] 的解释
  5. linux普通用户添加root权限
  6. MySQL数据库双机热备------主-主备份配置
  7. 使用mysqlslap测试MySQL性能
  8. swift 修改 Navigationbar Tabbar 字体颜色背景等属性
  9. AWS 监控服务(六)
  10. 最新 苏州朗动java校招面经 (含整理过的面试题大全)