摘要： 热词爬取中,爬取网页：http://www.itrb.cn/ 阅读全文

摘要： 休养生息 阅读全文

摘要： 爬取新型冠状病毒疫情信息。并生成echarts疫情分布地图 主要爬取代码如下： package type; import java.io.BufferedReader; import java.io.IOException; import java.io.InputStream; import ja 阅读全文

摘要： 参考windows安装sbt的网址：https://www.kutu66.com//GitHub/article_54026和https://blog.csdn.net/dkl12/article/details/80224035 今天配置了sbt和sbteclipse 实验：完成了构建北京市政百姓 阅读全文

摘要： 今天我炸了，配置了一天eclipse的scala环境，然而没有成功。 实验：https://www.cnblogs.com/halone/p/12285402.html 阅读全文

摘要： 一、实验目的 （1）通过实验掌握 Spark SQL 的基本编程方法； （2）熟悉 RDD 到 DataFrame 的转化方法； （3）熟悉利用 Spark SQL 管理来自不同数据源的数据。 二、实验平台 操作系统： centos6.4 Spark 版本：1.5.0 数据库：MySQL 三、实验内 阅读全文

摘要： 对eclipse中的scala编程环境进行了配置 同时对scala编程中可能出现的问题进行了简单的了解（因为遇到了在eclipse中编程中报的错误的问题），最终通过这篇博客搞定：https://www.cnblogs.com/K-artorias/p/7234260.html 阅读全文

摘要： 完成了spark实验(3)--RDD编程的实验一部分：https://www.cnblogs.com/halone/p/12270968.html 对于spark-shell中基本的统计有了初步了解，对简单的统计命令能够大体记住并较为生涩地使用 阅读全文

摘要： 一、实验目的 （1）熟悉 Spark 的 RDD 基本操作及键值对操作； （2）熟悉使用 RDD 编程解决实际具体问题的方法。 二、实验平台 操作系统：centos6.4 Spark 版本：1.5.0 三、实验内容 实验一： 1．spark-shell 交互式编程 请到本教程官网的“下载专区”的“数 阅读全文

摘要： 完成了spark实验（三）--spark和hadoop的安装：https://www.cnblogs.com/halone/p/12266462.html 对spark-shell中基础命令有了初步掌握，学习地址： http://www.manongjc.com/article/72167.html 阅读全文