jsqup

2022年7月21日

摘要：作用统一管理引入项目所需要的第三方依赖引入的jar包没有依赖别的包引入的jar包的版本和依赖的其他的jar包的版本是否适配帮助我们管理项目的生命周期 1.清除以前的编译的class文件 2.重新编译项目代码 3.测试项目能不能通过 4.将项目打成一个jar包 5.部署运行 maven下载 m 阅读全文

posted @ 2022-07-21 11:46 jsqup 阅读(12) 评论(0) 推荐(0) 编辑

hdfs-javaAPI操作

摘要：创建一个普通的java项目导入jar包附：jar包如何来的代码阶段上传下载文件 package com.sxuek; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.FileSystem; im 阅读全文

posted @ 2022-07-21 09:49 jsqup 阅读(91) 评论(0) 推荐(0) 编辑

hdfs连接、上传文件、下载文件的操作

摘要： package com.sxuek; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.FileSystem; import org.apache.hadoop.fs.Path; import java. 阅读全文

posted @ 2022-07-21 07:37 jsqup 阅读(1436) 评论(0) 推荐(0) 编辑

2022年7月20日

idea中添加jar包

摘要： ![](https://img2022.cnblogs.com/blog/2487693/202207/2487693-20220720223343584-527441647.png) ![](https://img2022.cnblogs.com/blog/2487693/202207/2487693-20220720223336771-399494239.png) 阅读全文

posted @ 2022-07-20 22:49 jsqup 阅读(30) 评论(0) 推荐(0) 编辑

关于本地hadoop的配置

摘要：由于实训需要，把之前配置的都删掉了阅读全文

posted @ 2022-07-20 18:30 jsqup 阅读(16) 评论(0) 推荐(0) 编辑

idea中的ctrl+鼠标滚轮进行设置+开机不自启上一次

摘要： ![](https://img2022.cnblogs.com/blog/2487693/202207/2487693-20220720180626651-1648233261.png) ![](https://img2022.cnblogs.com/blog/2487693/202207/2487693-20220720180539544-1747432365.png) ![](https:// 阅读全文

posted @ 2022-07-20 18:11 jsqup 阅读(42) 评论(0) 推荐(0) 编辑

hadoop操作命令

摘要：两种操作 hadoop fs hdfs dfs 具体的命令查看hdfs dfs --help hdfs和linux本地的命令的操作不同 [root@node1 ~]# hdfs dfs -tail -f /a.txt * ** *** ***** [root@node1 ~]# tail -n 10 阅读全文

posted @ 2022-07-20 18:01 jsqup 阅读(16) 评论(0) 推荐(0) 编辑

关于block大小的修改

摘要：在/opt/app/hadoop-2.8.5/etc/hadoop目录下，修改hdfs-site.xml文件 <property> <name>dfs.block.size</name> <value>26214400</value> </property> # 如果设置块的大小为250M，则设置2 阅读全文

posted @ 2022-07-20 17:44 jsqup 阅读(112) 评论(0) 推荐(0) 编辑

为什么hadoop2.x以后block大小为128M？

摘要：注意：寻址时间不能变，寻址时间为传输时间的1%也不能变。阅读全文

posted @ 2022-07-20 16:54 jsqup 阅读(36) 评论(0) 推荐(0) 编辑

hadoop文档查看

摘要： ![](https://img2022.cnblogs.com/blog/2487693/202207/2487693-20220720160533551-1023057744.png) ![](https://img2022.cnblogs.com/blog/2487693/202207/2487693-20220720160541336-808159821.png) ![](https://i 阅读全文

posted @ 2022-07-20 16:31 jsqup 阅读(16) 评论(0) 推荐(0) 编辑

公告