2019年8月5日

CDH目录

摘要: 配置文件都在:/etc/服务名, 看hadoop的classpath |grep conf /etc/hadoop/conf log都在: /var/log/服务名 看scm的log: tail -1000 /var/log/cloudera-scm-server/cloudera-scm-serv 阅读全文

posted @ 2019-08-05 12:02 锋锋2019 阅读(837) 评论(0) 推荐(0) 编辑

2019年8月4日

针对yarn的8088端口攻击

摘要: 参考: https://www.wangbokun.com/%E8%BF%90%E7%BB%B4/2019/09/02/%E6%8C%96%E7%9F%BF%E7%97%85%E6%AF%92.html GG https://www.cnblogs.com/qcloud1001/p/9173253. 阅读全文

posted @ 2019-08-04 14:05 锋锋2019 阅读(573) 评论(0) 推荐(0) 编辑

2019年8月1日

用ufile和S3代替hdfs存储数据

摘要: 一,添加ufile需在配置中添加: core-site.xml添加如下配置:<property><name>fs.ufile.impl</name><value>org.apache.hadoop.fs.UFileFileSystem</value></property><property><nam 阅读全文

posted @ 2019-08-01 19:00 锋锋2019 阅读(625) 评论(0) 推荐(0) 编辑

2019年7月31日

CDH的mysql主从准备

摘要: 参考: https://www.cnblogs.com/yinzhengjie/p/10371899.html https://www.sysit.cn/blog/post/sysit/CDH6.2.0%E7%B3%BB%E7%BB%9F%E9%83%A8%E7%BD%B2%E6%89%8B%E5% 阅读全文

posted @ 2019-07-31 22:14 锋锋2019 阅读(711) 评论(0) 推荐(0) 编辑

superset连接sqlite频繁断开

摘要: 出现上述现象的原因是SQLite只支持库级锁,不支持并发执行写操作,即使是不同的表,同一时刻也只能进行一个写操作。例如,事务T1在表A新插入一条数据,事务T2在表B中更新一条已存在的数据,这两个操作是不能同时进行的,只能顺序进行。这会导致superset在运行一段时间后报上面的错误. 解决方法: 用 阅读全文

posted @ 2019-07-31 21:20 锋锋2019 阅读(369) 评论(0) 推荐(0) 编辑

linux添加用户

摘要: #跳板机添加用户 useradd leixiaolong #install home Dir auto cd /home/leixiaolong mkdir .ssh cd .ssh touch authorized_keys chmod 600 authorized_keys chown -R l 阅读全文

posted @ 2019-07-31 21:11 锋锋2019 阅读(139) 评论(0) 推荐(0) 编辑

2019年7月30日

CDH安装前系统优化准备

摘要: 参考: https://www.cnblogs.com/yinzhengjie/p/10367447.html https://www.sysit.cn/blog/post/sysit/CDH6.2.0%E7%B3%BB%E7%BB%9F%E9%83%A8%E7%BD%B2%E6%89%8B%E5% 阅读全文

posted @ 2019-07-30 18:27 锋锋2019 阅读(235) 评论(0) 推荐(0) 编辑

CDH6.2安装之YUM方式

摘要: 参考: https://www.sysit.cn/blog/post/sysit/CDH6.2.0%E7%B3%BB%E7%BB%9F%E9%83%A8%E7%BD%B2%E6%89%8B%E5%86%8C https://www.cnblogs.com/yinzhengjie/articles/1 阅读全文

posted @ 2019-07-30 15:02 锋锋2019 阅读(648) 评论(0) 推荐(0) 编辑

2019年7月29日

CDH6.2安装之离线方式

摘要: 参考: https://www.cnblogs.com/swordfall/p/10816797.html 下载parcels: https://archive.cloudera.com/cdh6/6.2.0/parcels/ 现在这三个包: 下载CM: https://archive.cloude 阅读全文

posted @ 2019-07-29 17:08 锋锋2019 阅读(730) 评论(0) 推荐(0) 编辑

impala

摘要: 参考: 架构原理: https://www.cnblogs.com/Rainbow-G/articles/4282444.html 使用: https://www.w3cschool.cn/impala/impala_architecture.html 官网: https://impala.apac 阅读全文

posted @ 2019-07-29 14:34 锋锋2019 阅读(344) 评论(0) 推荐(0) 编辑

导航