PEAR2020

2020年11月18日

摘要：一、认识B、B+树 B树：叶节点不构成有序链表树的高度很高时，磁盘访问的次数增加，访问磁盘的速度慢 B+树：非叶结点仅具有索引作用，跟记录有关的信息均存放在叶结点中；树的所有叶结点构成一个有序链表，可以按照关键码排序的次序遍历全部记录；遍历整棵树可以一次性遍历所有叶子节点(B树只能进行中序阅读全文

posted @ 2020-11-18 17:55 PEAR2020 阅读(828) 评论(0) 推荐(0) 编辑

hbase（四）Java操作 hbase（工厂模式）& 调优方法

摘要：一、第一版本二、第二版本（一）优化架构（二）优化运行时间 1. 测算运行时间，推算什么流程耗时间，有问题。时间戳相减，测算运行时间创建对象慢，考虑连接池 2. 优化流程 1）只有一个连接：把Connection对象放在static代码块中创建（静态变量和静态代码块按照写的顺序执行）想在静阅读全文

posted @ 2020-11-18 17:52 PEAR2020 阅读(363) 评论(0) 推荐(0) 编辑

hbase（三）Java操作 hbase（基础版本）

摘要：一、导入数据 create_namespace 'exam' create 'exam:mytest','info' hdfs dfs -put /opt/data/quizz/UserBehaviorTestHbase.csv /quizz/data hbase org.apache.hadoop 阅读全文

posted @ 2020-11-18 15:21 PEAR2020 阅读(344) 评论(0) 推荐(0) 编辑

Typora之如何改变字体颜色？

摘要： 1.开启使用内联公式 2.使用方法 $\textcolor{red}{这里输入你要改变颜色的文字} $ 3.颜色大全 $\textcolor{GreenYellow}{GreenYellow} $ $\textcolor{Yellow}{Yellow}$ $\textcolor{Goldenrod} 阅读全文

posted @ 2020-11-18 11:01 PEAR2020 阅读(10562) 评论(0) 推荐(3) 编辑

2020年11月17日

hive 之解决csv中有英文逗号问题

摘要：原来： CREATE EXTERNAL TABLE csvtable2( symbol string, tickSequence string, timeStamp string, tickdata STRUCT< BID3_SIZE: string, ASK10_SIZE: string> ) R 阅读全文

posted @ 2020-11-17 11:09 PEAR2020 阅读(916) 评论(0) 推荐(0) 编辑

HDFS之上传csv文件发现中文是乱码！

摘要： csv 文件拖进 notepad++ 然后全选剪切 => “编码” => UTF8编码 => 粘贴 => 保存 hdfs dfs -rm /app/data/exam/meituan_waimai_meishi.csv hdfs dfs -put /opt/data/quizz/meituan_w 阅读全文

posted @ 2020-11-17 10:27 PEAR2020 阅读(964) 评论(0) 推荐(0) 编辑

2020年11月15日

Mysql之基础语句：CASE WHEN THEN ELSE END AS [COLUMN_NAME]

摘要：见：https://blog.csdn.net/weixin_42446602/article/details/99226752 阅读全文

posted @ 2020-11-15 13:58 PEAR2020 阅读(112) 评论(0) 推荐(0) 编辑

2020年11月13日

hive之动态分区

摘要：一、静态分区和动态分区的区别二、动态分区的设置必须开启： set hive.exec.dynamic.partition=true; ## 是开启动态分区 set hive.exec.dynamic.partition.mode=nonstrict; ## 这个属性默认值是strict,就是要求阅读全文

posted @ 2020-11-13 16:13 PEAR2020 阅读(279) 评论(0) 推荐(0) 编辑

hive报错之 FAILED: ParseException line 1:50 mismatched input '-' expecting ) near '2018' in add partition statement

摘要： hive -e "use ods_sales_source;alter table ods_start_order add partition(ymd=‘2018-10-10’)" 解决办法：add partition(ymd=‘ 20181010 ’) 阅读全文

posted @ 2020-11-13 16:03 PEAR2020 阅读(3607) 评论(0) 推荐(0) 编辑

hive 之 Hive中怎样强制删除数据库

摘要：若使用drop [database] if exists [database Name]语句删除数据库，若数据库中有表，则无法删除；如果想强制删除，则可以使用语句： drop database dbname cascade; 阅读全文

posted @ 2020-11-13 14:55 PEAR2020 阅读(1119) 评论(0) 推荐(0) 编辑

公告