python3.5以及scrapy,selenium,等 安装
一、python3.5安装和配置
在安装的时候无意间发现了,python3.6没有给我自定义安装的机会,直接就C盘见;因此我选择了python3.5。<安装部分跳过,至于一条吃过痛苦的建议:不要放C和磁盘一定要标明标注分类有序放置>。
接下来,安装pip,这个东西对日后加载其他库非常方便,因此优先安装。当然python3.5是自带pip的,根本不需要安装;但为了不给日后带来麻烦,我们还是要先看下pip的版本,打开 cmd 输入 pip -V , 额 ,,然后就会报错 ;哈哈哈。python的环境都没有配置,直接在cmd中打开这是不行滴。所以我们先来配置环境,找到系统变量中的path ,
然后点击编辑 ,在其中把python的安装路径和python文件下的scripts路径放到path中,最终就像这样
python的环境配置完了,不过刚才我们不是还要在cmd中运行pip嘛,所以还要去python\scripts中找到这个东西并将其路径也配置到环境变量,这也是为了方便在cmd中直接打开嘛。好咯,现在再回到查pip版本 ,依然输入 pip -V ,蹬一下,cmd提醒你要升级了,所以又输入命令pip install -upgrade pip3 不一会功夫,pip就不是原来的那个pip了,他是pip three;回到...\python\scripts\中看看,发现多了个pip3.exe ,没错,这就是你刚才升级的three,既然我们有了新的pip3,那么就无情地删了原来那个pip.exe吧,让它随风而去。
至此python王朝已经建立完成,并且找到一员猛将(pip:没错,这么帅肯定就是我了。)下面要开始开疆拓(KU)库,扩大我们python。
二、selenium从安装到装B
selenium是一个很神奇的东西,那么他究竟是什么呢?有什么作用呢?哎~ ,以上我们都不讲,这里我们只告诉怎么去完成装B,至于为什么装B和装B有什么用,这些东西,,python长路漫漫,你们将上下求索,每个人的答案都不一样自己去思考吧。
现在我们来安装,其实这个很简单,输入 python -m pip install selenium ,binggo,不一会功夫完成了。
1、下载chrome或者firefox的driver,这是两个地址:chrome >>http://npm.taobao.org/mirrors/chromedriver/ ; firefox >>https://github.com/mozilla/geckodriver/releases 。
2、下载之后,一定要把内容 放到python文件夹根目录 ;
3、将firefox 或者chrome 的 .exe 文件路径添加到环境变量 ; 小三:欸~ 为什么呢? 我:因为添加到环境变量 方便调取啊 小三:额 ~还是不明白它方便在哪儿啊? 我:嗯,想把你说明白看样子要下点血本了,请看这里 ,当当当 !!!
driver = webdriver.Firefox() 这是配置到环境的使用方法 !!!
driver = webdriver.Firefox('这里是firefox.exe的路径') 看,不添加到环境变量,多麻烦啊,每次都要写这这这么多的东西!!!
我: 小三你明白了吗 (得意脸,呵 呵 呵 ~ 哒) 小三满脸拜服。
ok ,言归正传。在下面就是,额~ 在下面好像就 就就没有了。 到这(er),我要轻轻地问一句 :你 ! 做好装BBB准备了嘛 ~·`~``~`·`
三、srapy的安装和配置
可能看到这里,你心里可能有点疑惑:切,说好的装B 呢 ? 就没了吗
嗯 对的,这就没了 ,欸~不要问我为什么(不好意思,你可能觉得没有多少,然而我已经 倾我所有),哈哈哈(请注意停顿)。
咳~咳 ,scrapy的安装说复杂又不复杂,说容易也不容易。然而如果自己贸然相信强大的搜索引擎,你可能会受伤(不似开玩笑的,似真滴哟),不过还好我完美地避开了所有正确答案,所有的坑,我一一踩过。下面我给大家演示如何正确的跳过各各坑:
1、请把下面的东西全部下载,存储在新建文件夹 scrapy中: lxml-4.2.3-cp35-cp35m-win_amd64.whl
Twisted-18.4.0-cp35-cp35m-win_amd64.whl ; Scrapy-1.5.0-py2.py3-none-any.whl
上面的下载地址: http://www.lfd.uci.edu/~gohlke/pythonlibs/#lxml ,进去以后 ctrl +F ,直接搜索你想要的,搞定!
另外你可能认为还要这个东西 pyOpenSSL-18.0.0-py2.py3-none-any.whl ,额 ,这个东西,已经被包含在上面 三个中最后一个里面了 。
可能还要这个东西 pywin32-220.win-amd64-py3.5.exe ,额,这个东西,我们也不用单独下载,直接 python -m pip install xxx xxx 是刚才那个东西。
好了 ,上面讲的全部下载之后,现在开始安装 ; 打开cmd ,切换目录到新建的scrapy文件(这个就是存放刚才下载的几个小东西),然后按这个顺序来 :
1、python -m pip install pywin32-220.win-amd64-py3.5.exe 2、python -m pip install lxml-4.2.3-cp35-cp35m-win_amd64.whl 3、python -m pip install Twisted-18.4.0-cp35-cp35m-win_amd64.whl 4 、python -m pip install Scrapy-1.5.0-py2.py3-none-any.whl
大约几百秒后,全部搞定!!!
然后 重新打开 cmd ,输入 scapy 回车:
显示这样,表示你可以开始对scrapy为所欲为了(嘿 嘿 嘿 ), else ,看错误提示,重来!!!
四、sqlite、mongodb的安装
sqlite :
它本身在python3.5中 已经是内置模块了,这里的安装指>>在电脑上<<
下载页面 : https://sqlite.org/2017/sqlite-autoconf-3190300.tar.gz
下载的是压缩包 ,对其解压到指定文件夹 ,然后将其路径配置到环境变量中,🆗 !! 这里,我下载的是sqlite3
所以 在命令中 调用 sqlite3 ,弹到sqlite shell ,然后 为所欲为 (嘿 嘿 嘿)。
mongodb:
分为两部分: 在电脑上安装 和 python上 ,因此要装两次。 首先,我们
在电脑上安装;
下载页面:http://www.mongodb.org/downloads
1、安装最好不要默认路径(保护C盘),假如我安装在:D:\mongodb\ 中 ,在安装完mongodb后,将 mongodb下的 bin 目录添加到环境变量中(这里前面已经使用这么多次,应该搞得定了吧)。
2、配置mongodb的存储路径 ,在D:\mongodb\data\ 中 新建一个db文件夹,形成这样的文件目录结构 D:\mongodb\data\db 。
3、为了能够方便使用(就是指在cmd中 直接输入mongo 就能使用的这种),还需要这一步:首先 将 命令行以管理员权限启动,先将mongo 、data\db 做成一个批处理文件,方便使用,命令如下 mongod --bind_ip yourIpadress --logpath <插入logpath> --logappend --dbpath <dbpath> --port yourPortNumber --serviceName "YourServiceName" --serviceDisplayName "YourServiceName" --install ;接着进行注册,输入命令 mongod --logpath "D:\mongodb\log.txt" --dbpath "D:\mongodb\data\db" --install ;然后启动服务,输入命令 net start mongodb ,这时候就会启动mongodb服务 。于是乎,电脑上安装 结束!! 测试一下 ,直接输入 mongo 有没有反应 :
哟 ,阔以了哦,红箭头所指就是已进入 mongo 的 shell 标志 。
在python上安装;
在cmd中输入: python -m pip install pymongo ,搞定!!!
什么? 这就没有了?!! 是的 ,python就是这么舒服, 啊~ (呻吟) 人生苦短,我用python
总结:
我: ok ,全部到此结束!!!(撒花~~)
小三:从 python安装 >>> selenium + scrapy >>> 数据库 , 这是什么? 天呐 !!! 这不是,不是,不是不可描述的一条龙服务吗? 哇撒 ,真是太贴心了 ,遇见你真是太开心了,我忍不住想多点几个赞,赞,赞,赞,赞,赞,赞.......
欸(ai 第三声)~
但是!!
作为风度翩翩的美男纸,我,不能忍受似同上面这位这样滴饱含泪水,丝毫不拘束、不做作的大实话
因此,特地献上一支王小波先生的名作,洗洗风尘 :我是个俗气至顶的人,见山是山,见海是海,见花便是花,唯独见了你,云海开始翻涌,江潮开始澎湃,昆虫的小触须挠着全世界的痒,你无需开口,我和天地万物便通通奔向你 (温馨提示:请使用刮刮乐方式查看)