会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
守护式等待
Powered by
博客园
博客园
|
首页
|
新随笔
|
联系
|
订阅
|
管理
上一页
1
···
23
24
25
26
27
28
29
30
31
···
67
下一页
2020年5月12日
25 个常用 Matplotlib 图的 Python 代码
摘要: 1. 散点图 Scatteplot是用于研究两个变量之间关系的经典和基本图。如果数据中有多个组,则可能需要以不同颜色可视化每个组。在Matplotlib,你可以方便地使用。 import numpy as np import pandas as pd import matplotlib as mpl
阅读全文
posted @ 2020-05-12 14:04 守护式等待
阅读(900)
评论(0)
推荐(0)
编辑
2020年5月9日
hadoop 集群搭建
摘要: 1.Hadoop集群规划 HDFS: NN DN YARN: RM NM 192.168.107.216 NN RM DN NM 192.168.107.215 DN NM 192.168.107.214 DN NM 2.(每台)ssh免密码登陆 https://www.cnblogs.com/yo
阅读全文
posted @ 2020-05-09 10:03 守护式等待
阅读(140)
评论(0)
推荐(0)
编辑
2020年5月8日
Hive 基本使用
摘要: 1.hive 创建内部表 CREATE TABLE emp( empno int, ename string, job string, mgr int, hiredate string, sal double, comm double, deptno int ) ROW FORMAT DELIMIT
阅读全文
posted @ 2020-05-08 17:17 守护式等待
阅读(170)
评论(0)
推荐(0)
编辑
关于hdfs中的core-site.xml,hdfs-site.xml,mapred-site.xml文件配置详解
摘要: 配置hadoop,主要是配置core-site.xml,hdfs-site.xml,mapred-site.xml三个配置文件,默认下来,这些配置文件都是空的,所以很难知道这些配置文件有哪些配置可以生效,上网找的配置可能因为各个hadoop版本不同,导致无法生效。浏览更多的配置,有两个方法: /us
阅读全文
posted @ 2020-05-08 10:21 守护式等待
阅读(5371)
评论(0)
推荐(1)
编辑
2020年5月7日
hive sql
摘要: 1.DDL Hive Data Definition Language create、delete、alter... 2.Hive数据抽象/结构 database HDFS一个目录 table HDFS一个目录 data 文件 partition 分区表 HDFS一个目录 data 文件 bucke
阅读全文
posted @ 2020-05-07 20:47 守护式等待
阅读(85)
评论(0)
推荐(0)
编辑
hadoop hive
摘要: 1.Hive底层执行引擎支持: MR/Tez/Spark 2.统一元数据管理: Hive数据是存放在HDFS 元数据信息(记录数据的数据)是存放在MySQL中 SQL on Hadoop: Hive、Spark SQL、impala.... 3.Hive体系架构 client: shell、thri
阅读全文
posted @ 2020-05-07 20:41 守护式等待
阅读(185)
评论(0)
推荐(0)
编辑
2020年5月6日
java 正则表达式
摘要: java 正则表达式 package com.project.utils; import org.apache.commons.lang.StringUtils; import java.util.regex.Matcher; import java.util.regex.Pattern; publ
阅读全文
posted @ 2020-05-06 16:21 守护式等待
阅读(183)
评论(0)
推荐(0)
编辑
hadoop yarn
摘要: 1 YARN产生背景 MapReduce1.x ==> MapReduce2.x master/slave : JobTracker/TaskTracker JobTracker:单点、压力大 仅仅只能够支持mapreduce作业 资源利用率 所有的计算框架运行在一个集群中,共享一个集群的资源,按需
阅读全文
posted @ 2020-05-06 15:55 守护式等待
阅读(168)
评论(0)
推荐(0)
编辑
clickhouse 新建用户和密码
摘要: 1.创建用户用户名和密码 PASSWORD=$(base64 < /dev/urandom | head -c8); echo "mypassword"; echo -n "mypassword" | sha256sum | tr -d '-' # 在服务器执行 mypassword:为你要设置的密
阅读全文
posted @ 2020-05-06 13:51 守护式等待
阅读(729)
评论(0)
推荐(0)
编辑
2020年5月5日
hadoop 自定义数据类型和reduce个数
摘要: 1.Access.java // 定义hadoop用的数据类型 package com.mr.access; import org.apache.hadoop.io.Writable; import java.io.DataInput; import java.io.DataOutput; impo
阅读全文
posted @ 2020-05-05 11:02 守护式等待
阅读(32)
评论(0)
推荐(0)
编辑
上一页
1
···
23
24
25
26
27
28
29
30
31
···
67
下一页