• 欢迎访问小杰博客网站
  • 欢迎访问小杰博客网站哦

mac下scrapy环境搭建

未分类 小杰 7年前 (2016-10-08) 1236次浏览 已收录 0个评论

安装很简单,分以下3步

  1. 检测并安装python
  2. 用python 安装pip
  3. 用pip安装 scrapy

pip源修改

注意,这一步非常重要,很多人在安装Scrapy不成功的第二大原因(稍后再说第一大)就是这个,一定要改啊。博主一想起这个就是泪牛满面啊,折腾的时间大部分都浪费在这里了。

安装完成pip之后,默认的时官方源可能会被我大天朝的长城K.O.掉,我们需要对pip源进行修改,使用咱们国内的源。

首先创建配置文件,默认情况下Mac端好像是没有pip的配置文件的,我们需要自行创建。打开终端,在HOME下创建.pip目录:

接下来创建配置文件pip.conf:

接下来编辑配置文件,随便使用什么编辑器打开刚刚新建的pip.conf文件,输入以下两行:

输入完成后保存退出即可,至此,pip源就修改完了,可以进行下一步了。

有一点要说明一下,就是pip源的问题,国内目前的pipy镜像主要有以下几个:

http://pypi.douban.com/ 豆瓣

http://pypi.hustunique.com/ 华中理工大学

http://pypi.sdutlinux.org/ 山东理工大学

http://pypi.mirrors.ustc.edu.cn/ 中国科学技术大学

http://pypi.v2ex.com/ V2EX社区

大家可以看自己需要选择,用法都一样,只需要替换配置文件当中index-url的值即可。但不要忘记后面的/simple目录!

这里楼主用了豆瓣的源

然后 

原因是变量需要改变


小杰博客 , 版权所有丨如未注明 , 均为原创丨本网站采用BY-NC-SA协议进行授权
转载请注明原文链接:mac下scrapy环境搭建
喜欢 (0)
发表我的评论
取消评论
表情 贴图 加粗 删除线 居中 斜体 签到

Hi,您需要填写昵称和邮箱!

  • 昵称 (必填)
  • 邮箱 (必填)
  • 网址