宥宁

摘要： 今天做spark实验2和实验3的内容 阅读全文

摘要： BeautifulSoup库通俗来说是【解析、遍历、维护“标签树”(例如html、xml等格式的数据对象)的功能库 】一个简单的使用BeautifulSoup库的demo： # coding:utf-8 from bs4 import BeautifulSoup import requests ur 阅读全文

摘要： 今天准备安装了pyecharts，官网下载速度太慢了，下了半天还没有下载完成，简单了解了一下用pyecharts库画图的方法，继续配置eclipse的环境，因为停电的原因进度太慢了，明天继续努力。 阅读全文

摘要： 今天安装并简单了解了scrapy框架，并且安装了scrapy及其所依靠的pywin32,lxml等等，相关教程链接：https://blog.csdn.net/lwx356481/article/details/81224667 安装scrapy速度较慢时，可以将pip install scrapy 阅读全文

摘要： 利用pc编写python爬取大学排名的数据，如图： import requests from bs4 import BeautifulSoup import bs4 def getHTMLText(url): try: r = requests.get(url, timeout=30) r.rais 阅读全文

摘要： 今天本来想把昨天安装的intellij配置好，但是一直显示没有网络，网上查了相关资料也没有查出来解决办法。 然后暂停了intellij的配置，开始做了几个Python爬取简单数据的实例，先做了几个最简单的，以后再加大难度（用idle编码）： （1）京东商品页面爬取： 链接：https://item. 阅读全文

摘要： 安装好了IntelliJ IDEA，但是很多东西还没有配置好，明天再更新。 下载IntelliJ IDEA并解压； 运行bin目录下的idea.sh文件； 勾选同意； 勾选不发送； 勾选免费试用版； 阅读全文

摘要： 在官网下载Scala的时候，下载了很多次都下载失败，后来发现在浏览器种输入http://downloads.typesafe.com/scala/2.11.7/scala-2.11.7.msi就可以很快的下载下来了。版本号都可以更改。 阅读全文

摘要： 今天安装好了Scala和eclipse，并在eclipse中安装了maven和Scala的插件，完成了一部分的实验2的内容，明天继续做实验。 阅读全文

摘要： scala中定义变量：（1）var 变量名 = 初始化值（2）var 变量名：数据类型 = 初始化值如：var a = 1注意：（1）定义变量的时候需要初始化（2）定义变量的时候可以不指定变量的数据类型，这时系统会根据变量的初始化值推断变量的数据类型 定义常量：（1）val 常量名 = 初始化值（2 阅读全文