随笔分类 - 每天总结
2021年11月2号
摘要：昨天完成了guns平台开发的demo配置和使用
阅读全文
hadoop数据可视化成果图（时间轴折线图 柱状图）
摘要：数据导入 2. 数据清洗 数据分析处理 1. 2.insert overwrite table hahive hahive02_result02 select day_id，sale_nbr,sum(cnt),sum(money) where sale_nbr like ‘O%’ from hahi
阅读全文
2021年10月14日
摘要：截至今天，完成了2个G数据表的导入，数据分析要用到机器学习尚未能完成，下周努力
阅读全文
2021年10月5日
摘要：最近完成了数据的可视化展示 样表（sales_sample_20170310）字段说明： day_id 日期编号； sale_nbr 卖出方代码； buy_nbr 买入方代码； cnt 数量 round 金额 卖出方和买入方又分为 3 种类型： 以'C'开头的表示类型为 C，代表“航空公司”，只可以
阅读全文
2021年9月18日（zookeeper）
摘要：今天实现了javaapi操作hbase 1.遇到的问题：java连接hbase超时且不报错 原因：没有配置外部zookeeper 配置方法：https://blog.csdn.net/weixin_39762856/article/details/113076325 https://blog.csd
阅读全文
2021年9月17日（hdfs）
摘要：今天通过javaapi来操作hdfs 遇到的问题：java.io.FileNotFoundException: HADOOP_HOME and hadoop.home.dir are unset 解决方案：https://github.com/steveloughran/winutils 下载就近版
阅读全文
2021秋9月15（hadoop+hbase的安装）
摘要：1.今天遇到的问题：hadoop的namenode启动不了，hbase的master启动不了（全部重装了） 整理一下hadoop和hbase的安装 1.hadoop安装 https://blog.csdn.net/weixin_44898710/article/details/109832031 2
阅读全文
2021秋9月14日
摘要：今天完成了hadoop的搭建 以前一周遇到的问题 1.关于hadoop-env.sh和yarn-env.sh的配置 遇到的问题：找不到java路径，需要重新配置，javahome=。。。。。。。。。。/jre-1.8.0 yarn配置文件 报格式错误 解决办法：重新配置
阅读全文
