首页 > Python爬虫1-Scrapy环境的安装

Python爬虫1-Scrapy环境的安装



一.  Scrapy环境的安装

1.      Scrapy各平台支持情况

除了python3在Windows下不支持外,其余(Linux,Mac)均支持



2.      安装miniconda

(1)建议使用Python2,用miniconda安装scrapy

(2)miniconda时Python环境管理工具,是Anaconda的子集



(3)安装miniconda(必须要求已经安装了Python)

查看是否已经安装miniconda:进入终端,命令conda–version,查看是否安装miniconda,如果显示版本号,则已经安装成功了

首先下载自己对应操作系统的安装包,进入到miniconda所在文件夹,命令:chmod+x Miniconda….(名称)   (给予miniconda执行权限)

命令:ls,如果Miniconda的安装包变成绿色则表示具有安装权限了。

命令:ls –lh,查看所有权限。

  命令:./Miniconda…,执行Miniconda,然后回车,一直回车,最后跳转,yes,然后会询问安装位置,直接回车就好,然后继续yes

  然后重启终端,命令:conda –version,就可以查看到当前的Miniconda的版本

(4) 使用Miniconda

   创建一个Python环境,命令:condacreat –n Name python=2,说明-n是n是名字的意思,Name是自己取的一个名字,python=2是你想要创建的版本型号

   安装依赖软件,命令:condainstall –n env_name BeautifulSoup4 scrapy pymongo flask

   激活环境,命令:sourceactivate env_name,每次使用自己创建的Python环境时,都需要使用该条指令

   查看Miniconda管理的所有Python环境,命令:condaenv list

 

 

 

更多相关:

  • 如果你想在自己的IPhone上安装一个ipa文件,你的手机是无法正常安装的,(越狱,企业证书分发除外)但是我们可以通过以下步骤来实现,前提要有自己的开发者账号。接下来就看一下具体的步骤:第一步:用Xcode新建一个工程Bundle identifier不要和手机中已有的的APP重复,然后用自己的证书打包出ipa文件。第二步:获取mob...

  • 刚接触,啥子都不会,按着教程走需求:识别图片中的文字信息环境:windows系统开发语言:python3.5使用工具类:1.pyocr2.PIL3.tesseract-ocr步骤:1.pyocr网络通直接使用命令:pip install pyocr网络不通,转至https://pypi.python.org/pypi/pyocr/0....

  • 1、前言程序设计好以后会生成若干可执行文件和依赖文件。为了方便程序被更好地使用,需要将程序封装为一个安装程序。2、平台和环境Windows系统安装NSIS下载地址:https://nsis.sourceforge.io/DownloadNSIS(Nullsoft Scriptable Install System)是一个开源的 Win...

  • 展开全部 f=open('xxx','r',encoding='utf-8') file=f.readlines() f.close() f=open('xxx','w',encoding='utf-8') for i in len(file): ----file[i]=file[i].split(',') ----file[i][1...

  • PIL(Python Imaging Library)是Python中一个强大的图像处理库,但目前其只支持到Python2.7 pillow是PIL的一个分支,虽是分支但是其与PIL同样也具有很强的图像处理库。 Python3.7.0 如何安装pillow 此安装方法在windows7环境下完成: >>>win+r调出运行窗口,键入c...

  • 在DOS窗口执行了一些列命令完成某项工作后,如果要查看都执行了那些命令,该如何办呢?(前提:DOS窗口未关闭的情况下)     一、方法一:使用↑↓箭头上下翻看执行过的命令,此方式适宜执行命令较少的情况; 二、方法二:使用快捷键; F7快捷键查看所有执行过的命令 F3:调出上一条执行过的命令,调出后直接回车即可执行; F...

  • 在windows的DOS操作界面里面,清屏的命令是cls,那么在linux 里面的清屏命令是什么呢?下面笔者分享几种在linux下用过的清屏方法。 1、clear命令、这个命令将会刷新屏幕,本质上只是让终端显示页向后翻了一页,如果向上滚动屏幕还可以看到之前的操作信息。 2、Ctrl+l(小写的L)、这是一个清屏的快捷键,这个是笔者...

  • LINUX下用CTRL+R快速搜索HISTORY历史命令,快速索引到之前使用过的命令行语句 前提是,搜索已经使用的命令,否则是查不出来结果的。 ctrl+r 用途:反向搜索执行过的命令。(reverse-i-search) 1、任何目录下按住ctrl + r 2、输入历史命令中的字符串 ,比如 输入shut 会检索...

  • 刚开始接触linux,总有些简单的问题不知道怎么搞定,先将目前汇总的解决方法叫做"linux入门-1",后续在使用过程中逐步总结。   1. 连接 ADSL : sudo pon dsl-provider 断开 ADSL: sudo poff 查看 ADSL 状态: plog 2. dpkg 命令 dpkg 是 Debia...

  • 文章目录NVME 和 AHCI 性能比较NVME-CLI nvme工具使用1. 安装2. 命令综述3. 基本命令演示4. NVME 固件设备升级...