hive向mysql导入数据sqoop命令出错
摘要：报错信息： java.lang.Exception: java.io.IOException: java.lang.ClassNotFoundException: info at org.apache.hadoop.mapred.LocalJobRunner$Job.runTasks(LocalJo
阅读全文
posted @
2021-10-29 12:29
风中明月
阅读(1666)
推荐(0) 编辑
Docker服务安装
摘要：https://www.bilibili.com/video/BV11L411g7U1?p=2&spm_id_from=pageDriver 参考教程 Docker 支持以下的 Ubuntu、Centos 版本： Ubuntu Precise 12.04 (LTS) Ubuntu Trusty 14
阅读全文
posted @
2021-10-25 16:07
风中明月
阅读(188)
推荐(0) 编辑
Mapreduce词频统计
摘要：maven建立quick-start工程。 pom.xml <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocat
阅读全文
posted @
2021-10-23 17:04
风中明月
阅读(108)
推荐(0) 编辑
2021下半年阅读笔记之Hadoop分布式文件系统
摘要：hadoop分布式文件系统 HDFS是Apache Software Foundation项目和Apache Hadoop项目的子项目（请参阅参考资料 ）。 Hadoop是存储诸如TB和PB之类的大量数据的理想选择，并且使用HDFS作为其存储系统。 HDFS使您可以连接包含在其上分布数据文件的群集中
阅读全文
posted @
2021-10-22 20:20
风中明月
阅读(63)
推荐(0) 编辑
HDFS文件操作
摘要：hadoop fs [genericOpitions] [-ls <path>] //显示目标路径当前目录下的所有文件 [-lsr <path>] //递归显示目标路径下的所有目录及文件（深度优先） [-du <path>] //以字节为单位显示目录中所有文件的大小，或该文件的大小（如果path为文
阅读全文
posted @
2021-10-22 16:03
风中明月
阅读(150)
推荐(0) 编辑
虚拟机集群搭建部署hadoop
摘要：利用VMware、centOS-7、Xshell(secureCrt)等软件搭建集群部署hadoop，具体操作参照 https://www.bilibili.com/video/BV1Kf4y1z7Nw?p=1
阅读全文
posted @
2021-10-21 18:15
风中明月
阅读(60)
推荐(0) 编辑
JavaScript获取html表单值验证后跳转网页中的关键点
摘要：关键代码： 1.表单部分 <form action="Depart.jsp" name="myform" method="post" onsubmit="return check()"> <div> <h1>登陆</h1> <input type="text" name="id" id="id" r
阅读全文
posted @
2021-10-19 22:15
风中明月
阅读(694)
推荐(0) 编辑
MongoDB数据库操作
摘要：Student文档如下: { “name”: “zhangsan”, “score”: { “English”: 69, “Math”: 86, “Computer”: 77 } } { “name”: “lisi”, “score”: { “English”: 55, “Math”: 100, “
阅读全文
posted @
2021-10-19 20:54
风中明月
阅读(352)
推荐(0) 编辑
2021年10月阅读笔记之交互设计沉思录
摘要：2021年10月阅读笔记之交互设计沉思录 本书由交互设计领域的思想领袖Jon Kolko所著，是交互设计领域的里程碑之作。本书完美地将当代设计理论和研究成果融入交互设计实践中，将对交互设计的阐释和分析推向了新的高度。本书重点阐释了对交互设计领域的最新理解和洞察，以及人与科技之间的联系。作者通过引人入
阅读全文
posted @
2021-10-15 08:50
风中明月
阅读(123)
推荐(0) 编辑
MySQL数据库操作
摘要：学生表Student Name English Math Computer zhangsan 69 86 77 lisi 55 100 88 根据上面给出的Student表，在MySQL数据库中完成如下操作： （1）在MySQL中创建Student表，并录入数据； （2）用SQL语句输出Studen
阅读全文
posted @
2021-10-12 17:16
风中明月
阅读(258)
推荐(0) 编辑
接口类名与实际类名大小写相近报错
摘要：错误信息：Multiple markers at this line - Class file collision: A resource exists with a different case: '/Chapter 04 Simple Factory/bin/Lab8_Adapter/Cat_D
阅读全文
posted @
2021-10-09 21:12
风中明月
阅读(37)
推荐(0) 编辑
异常企业数据清洗
摘要：一、数据导入（1）增值税发票数据，文件名zzsfp （2）发票对应货物明细数据，文件名zzsfp_hwmx （3）企业信息，文件名nsrxx 建表语句： CREATE EXTERNAL TABLE hive.zzsfp( fp_nid STRING, xf_id STRING, gf_id STRI
阅读全文
posted @
2021-10-09 16:21
风中明月
阅读(96)
推荐(0) 编辑
软件需求与分析课堂测试六—业务建模分析
摘要：某大学为进一步推进无纸化考试，欲开发一考试系统。系统管理员能够创建专业方向、课程编号、任课教师等相关考试基础信息。教师和考生进行考试相关工作。系统与考试有关的主要功能如下： （1）考试设置：教师制定试题（题目和答案），制定考试说明、考试时间和提醒时间等考试信息，录入参加考试的学生信息，并分别进行存储
阅读全文
posted @
2021-10-07 12:57
风中明月
阅读(97)
推荐(0) 编辑
Navicat连接Linux系统下的Mysql数据库
摘要：1 . 进入Linux机器 , 登录并进入mysql如果没有安装mysql,参照 https://blog.csdn.net/weixin_35353187/article/details/81712096启动mysql服务 : service mysqld start或者设置开机自启 : chkc
阅读全文
posted @
2021-10-04 10:33
风中明月
阅读(1312)
推荐(0) 编辑
错误: 在类中找不到 main 方法, 请将 main 方法定义为:public static void main(String[] args)否则 JavaFX 应用程序类必须扩展javafx.ap
摘要：今天在用eclipse写java程序时遇到此报错，我开始创建类时候没有选择自动生成main方法，之后在类中自己写的main方法，并且格式一致。 解决方法：在eclipse上面菜单栏中点击 window preferance Run/Debug Launching 第一个选项选择Always后appl
阅读全文
posted @
2021-10-03 16:12
风中明月
阅读(1601)
推荐(0) 编辑
hive数据库建表语句
摘要：1.数据清洗建表语句create table hive.yuanbiao ( ID string,QA04 string,QA05 string,QA07 string,QA15 string,QA19 string,HYWD string,QB03ONE string,QB03ONEONE str
阅读全文
posted @
2021-10-03 15:06
风中明月
阅读(1207)
推荐(0) 编辑
Echart显示后端mysql数据
摘要：一、基本思想 1.将数据存储在mysql数据库中 2.后端链接数据库，将数据库中的数据保存为json格式 3.将json格式数据使用ajax传到前端JSP页面中的Echarts 二、实现的关键点 1.导入必要的包 echart.js（或者是echart.min.js包等等）、jquery.min.j
阅读全文
posted @
2021-10-03 09:40
风中明月
阅读(1132)
推荐(0) 编辑
hive数据清洗
摘要：操作步骤1.将.csv文件导入hive数据库。（1）把.csv文件上传到HDFS中 （2）在hive中建立对应的table （3）将数据导入hive仓库2.将hive数据库中的数据表进行查询操作，然后把清洗后的结果存入新建的hive表。（1）建立新样表 （2）将清洗后的数据导入 （3）查看导入成功后
阅读全文
posted @
2021-10-01 16:22
风中明月
阅读(1207)
推荐(0) 编辑
