qq:3262641915,如有问题,欢迎讨论.

2022年11月21日

摘要：虚拟号段 ["1705","1700","1701","1702","171","1707","1708","1709","1440","1410","17400","17401","17402","17403","17404","17405","147",& 阅读全文

posted @ 2022-11-21 15:40 大醉和尚阅读(18) 评论(0) 推荐(0) 编辑

2022年8月8日

hdfs

摘要： hadoop 删除文件流程当通过cli执行删除文件操作时，具体namenode与datanode工作详解如下： namenode端： 1.cli提交删除文件 command； 2.FileSystem会调用具体delete操作； 3.delete操作会由DFSClient通过RPC将delete 阅读全文

posted @ 2022-08-08 09:18 大醉和尚阅读(87) 评论(0) 推荐(0) 编辑

2021年11月26日

yarn

摘要： cat /etc/hadoop/3.1.4.0-315/0/fair-scheduler.xml fair-scheduler.xml <?xml version="1.0"?> <allocations> <userMaxAppsDefault>20</userMaxAppsDefault> <q 阅读全文

posted @ 2021-11-26 13:45 大醉和尚阅读(13) 评论(0) 推荐(0) 编辑

2021年9月28日

hive

摘要： spark 连接 hive 把hive-site.xml复制到spark conf下，文件所属spark:spark /usr/bin/cp -f /usr/hdp/3.1.4.0-315/hive/conf/hive-site.xml /etc/spark2/conf/ hive sql http 阅读全文

posted @ 2021-09-28 14:38 大醉和尚阅读(20) 评论(0) 推荐(0) 编辑

2021年9月22日

atlas

摘要： pom build <dependency> <groupId>org.apache.atlas</groupId> <artifactId>atlas-buildtools</artifactId> <version>0.8.1</version> </dependency> 替换为elastic 阅读全文

posted @ 2021-09-22 20:27 大醉和尚阅读(40) 评论(0) 推荐(0) 编辑

2021年3月31日

jupyter

摘要：查看token jupyter notebook list ascii 报错 LANG=zn jupyter notebook --ip spark004 --port 8123 pip 安装复杂的lib pip install --ignore-installed imageio 禁用下载密码阅读全文

posted @ 2021-03-31 20:18 大醉和尚阅读(185) 评论(0) 推荐(0) 编辑

2021年2月25日

jenkins

摘要： ##docker-compose file version: '3' services: jenkins: image: jenkins/jenkins:2.263.4-lts-slim network_mode: "host" environment: - TZ=Asia/Shanghai - A 阅读全文

posted @ 2021-02-25 17:16 大醉和尚阅读(55) 评论(0) 推荐(0) 编辑

2021年2月9日

ambari

摘要：找资源 hdp3.1.6 https://docs.cloudera.com/HDPDocuments/HDPforCloud/HDPforCloud-3.1/hdp-release-notes/content/relnotes.html #安装ambari 2.7.5 参考：文档：https:/ 阅读全文

posted @ 2021-02-09 11:30 大醉和尚阅读(101) 评论(0) 推荐(0) 编辑

2021年1月28日

js基础

摘要： array l1 = [1, 2, 3, 9] l1.forEach(function(v, i, array){console.log(v, i, array)}) 阅读全文

posted @ 2021-01-28 15:37 大醉和尚阅读(45) 评论(0) 推荐(0) 编辑

2021年1月8日

pandas

摘要：删除列/行 df.drop('总收入', axis=1) # 列 df = df.drop([223, 224, 225]) # 行日期做索引 df.index = pd.DatetimeIndex(df['日期']) 层次化索引 df_1 = pd.DataFrame(df.drop('日期', 阅读全文

posted @ 2021-01-08 14:06 大醉和尚阅读(94) 评论(0) 推荐(0) 编辑


Copyright © 2024 大醉和尚 Powered by .NET 9.0 on Kubernetes 博客园

导航