spark学习进度2
摘要：
今天先安装好了spark，利用spark里自带的Scala运行了几个简单的Scala程序，看教学视频了解了点儿简单的语法，截图如下： 接着安装scala ide for eclipse，安装在了usr/local目录下，本以为他会正常的替代原来的eclipse，因为我之前有这样直接解压到里面直接就替 阅读全文
posted @ 2020-02-02 23:22 宥宁 阅读(103) 评论(0) 推荐(0) 编辑
spark学习进度1
摘要：
简单了解了spark，scala语言等，并尝试配置相关环境，安装Scala，spark和支持Scala语言的eclipse：scala ide for eclipse（安装scala ide for eclipse可以省下很多工夫去不用安装maven和scala类似的相关插件） Spark最初的设计 阅读全文
posted @ 2020-02-01 22:11 宥宁 阅读(156) 评论(0) 推荐(0) 编辑
后台得到jsp提交name属性相同的内容
摘要：
直接上代码： req.setCharacterEncoding("utf-8");String [] node = req.getParameterValues("node"); 阅读全文
posted @ 2019-11-26 15:11 宥宁 阅读(333) 评论(0) 推荐(0) 编辑
课堂测试-数据清洗2
摘要：
题目： Result文件数据说明： Ip：106.39.41.166,（城市） Date：10/Nov/2016:00:01:02 +0800,（日期） Day：10,（天数） Traffic: 54 ,（流量） Type: video,（类型：视频video或文章article） Id: 8701 阅读全文
posted @ 2019-11-14 18:06 宥宁 阅读(188) 评论(0) 推荐(0) 编辑
hive数据库导入与导出
摘要：
原文连接：https://www.cnblogs.com/654wangzai321/p/9970321.html 把Hive表数据导入到本地 table->local file insert overwrite local directory '/root/hive_test/1.txt' sel 阅读全文
posted @ 2019-11-14 08:18 宥宁 阅读(1269) 评论(0) 推荐(0) 编辑
数据存入hive数据表之前对.csv（数据集）文件的预处理以及数据的上传
摘要：
对于数据集文件，在将其中的数据存入hive之前，需要将数据进行预处理。 1.删除文件第一行记录，即字段名称 sed -i '1d' raw_user //1d表示删除第1行，同理，3d表示删除第3行，nd表示删除第n行 2.对字段进行预处理 主要是通过sh文件对csv文件进行字段的逐行处理，然后将处 阅读全文
posted @ 2019-11-13 19:12 宥宁 阅读(1344) 评论(0) 推荐(0) 编辑
课堂测试-数据清洗1
摘要：
题目： Result文件数据说明： Ip：106.39.41.166,（城市） Date：10/Nov/2016:00:01:02 +0800,（日期） Day：10,（天数） Traffic: 54 ,（流量） Type: video,（类型：视频video或文章article） Id: 8701 阅读全文
posted @ 2019-11-13 18:20 宥宁 阅读(256) 评论(0) 推荐(0) 编辑
面向对象程序设计中类与类的关系
摘要：
一、关联关系 关联关系是类与类中较为常见的关系，其中又包含了以下六种子关联关系： （一）双向关系：默认情况下，关联是双向的，例如，顾客与商品、父母与子女。双向关联关系用实线表示。 （二）单向关联关系 表示一个类与另一个类单方面关联关系，例如居民拥有地址。单向关联用带箭头的实线表示。 （三）自关联关系 阅读全文
posted @ 2019-09-23 17:27 宥宁 阅读(935) 评论(0) 推荐(0) 编辑
