摘要: 显示hadoop目录hadoop fs -ls 新建hadoop目录hadoop fs -mkdir /upload 将文件上传到hadoop的指定目录hadoop fs -put /usr/tools/u.data /upload 查看文件的前10行hadoop fs -cat /upload/u 阅读全文
posted @ 2019-05-30 16:32 爬山虎hu 阅读(103) 评论(0) 推荐(0) 编辑
摘要: 1.解压缩tar -zxvf /usr/tools/sqoop-1.99.7-bin-hadoop200.tar.gzmv sqoop-1.99.7-bin-hadoop200.tar.gz sqoop-1.99.7 2.环境变量vim /etc/profileexport SQOOP_HOME=/ 阅读全文
posted @ 2019-05-30 16:31 爬山虎hu 阅读(1029) 评论(0) 推荐(0) 编辑
摘要: sqoop 1.4.7tar -zxvf /usr/tools/sqoop-1.4.7.tar.gz 环境变量配置vim /etc/profileexport JAVA_HOME=/usr/java/jdk1.8.0_211-amd64export PATH=$PATH:JAVA_HOME/bine 阅读全文
posted @ 2019-05-30 16:26 爬山虎hu 阅读(2453) 评论(0) 推荐(0) 编辑
摘要: Hive的连接方式:1.cli方式在bin目录下执行hive,相当于执行的hive --service cli2.通过客户端beeline访问hive3.还有一种是通过web ui访问这里记录的是通过beeline客户端访问 1.修改hadoop配置文件hdfs-site.xml,表示启用webhd 阅读全文
posted @ 2019-05-30 16:25 爬山虎hu 阅读(9666) 评论(0) 推荐(1) 编辑
摘要: create database testdb; 自定义UDF1.把程序打包放到目标机器上:hiveserver(hive使用端)2.进入hive客户端,添加jar包 hive>add jar /usr/jar/hivetest.jar3.创建临时函数hive>create temporary fun 阅读全文
posted @ 2019-05-30 16:19 爬山虎hu 阅读(565) 评论(0) 推荐(0) 编辑
摘要: CentOS 7 安装Hive 3.2 Hadoop版本3.2 1.下载并解压Hive(安装在/usr/local下)tar zxvf apache-hive-3.1.1-bin.tar.gzmv apache-hive-3.1.1-bin hive-3.1.1 2.环境变量配置vim /etc/p 阅读全文
posted @ 2019-05-30 16:16 爬山虎hu 阅读(621) 评论(0) 推荐(0) 编辑
摘要: CentOS 7上安装MySQL-8.0.16 mysql8 安装https://dev.mysql.com/get/Downloads/MySQL-8.0/mysql-8.0.16-linux-glibc2.12-x86_64.tar 1.卸载mariadb[root@node2 ~]# rpm 阅读全文
posted @ 2019-05-30 16:13 爬山虎hu 阅读(350) 评论(0) 推荐(0) 编辑
摘要: 三台虚拟机:node1是master节点,node2和node3是数据节点,也可选择将node1也作为数据节点 需要的基本设置1.时间同步(时间服务器),网络,hosts时间同步设置(时间服务器,ntp服务器)yum install ntpdatentpdate -u 3.tw.pool.ntp.o 阅读全文
posted @ 2019-05-30 16:03 爬山虎hu 阅读(794) 评论(1) 推荐(0) 编辑
摘要: 最近在试着写IOrderedQueryable的扩展排序方法 在获取排序字段是int型时,返回的是Int32,无法与typeof(int)匹配到 然后查了下用TypeCode去比就没问题 阅读全文
posted @ 2018-09-17 15:12 爬山虎hu 阅读(433) 评论(0) 推荐(0) 编辑
摘要: Authentication身份认证方式分为两种:Windows、Forms;Windows认证方式适用于局域网。Forms认证方式既可适用于局域网,也可用于互联网。 在标准ASP.NET认证方式中 1. 如何判断当前请求是一个已登录用户发起的? 如果Request.IsAuthenticated为 阅读全文
posted @ 2018-09-16 22:06 爬山虎hu 阅读(703) 评论(0) 推荐(0) 编辑