09 2023 档案

9月28日总结
摘要：HDFS文件上传（测试参数优先级） 1）编写源代码 @Test public void testCopyFromLocalFile() throws IOException, InterruptedException, URISyntaxException { // 1 获取文件系统 Configu 阅读全文
posted @ 2023-09-28 19:59 lcz111 阅读(7) 评论(0) 推荐(0) 编辑
9月27日总结
摘要：1）-copyToLocal：从HDFS拷贝到本地 [atguigu@hadoop102 hadoop-3.1.3]$ hadoop fs -copyToLocal /sanguo/shuguo.txt ./ 2）-get：等同于copyToLocal，生产环境更习惯用get [atguigu@ha 阅读全文
posted @ 2023-09-27 23:30 lcz111 阅读(4) 评论(0) 推荐(0) 编辑
9月26日总结
摘要：1）启动Hadoop集群（方便后续的测试） [atguigu@hadoop102 hadoop-3.1.3]$ sbin/start-dfs.sh [atguigu@hadoop103 hadoop-3.1.3]$ sbin/start-yarn.sh 2）-help：输出这个命令参数 [atgui 阅读全文
posted @ 2023-09-26 19:49 lcz111 阅读(3) 评论(0) 推荐(0) 编辑
9月25日总结
摘要：1）HDFS产生背景 随着数据量越来越大，在一个操作系统存不下所有的数据，那么就分配到更多的操作系统管理的磁盘中，但是不方便管理和维护，迫切需要一种系统来管理多台机器上的文件，这就是分布式文件管理系统。HDFS只是分布式文件管理系统中的一种。 2）HDFS定义 HDFS（Hadoop Distrib 阅读全文
posted @ 2023-09-25 20:43 lcz111 阅读(3) 评论(0) 推荐(0) 编辑
9月24日总结
摘要：Hadoop Distributed File System，简称HDFS，是一个分布式文件系统。 Yet Another Resource Negotiator简称YARN ，另一种资源协调者，是Hadoop的资源管理器。 MapReduce将计算过程分为两个阶段：Map和Reduce 1）Map 阅读全文
posted @ 2023-09-24 20:59 lcz111 阅读(3) 评论(0) 推荐(0) 编辑
9月23日总结
摘要：Hadoop三大发行版本：Apache、Cloudera、Hortonworks。 Apache版本最原始（最基础）的版本，对于入门学习最好。2006 Cloudera内部集成了很多大数据框架，对应产品CDH。2008 Hortonworks文档较好，对应产品HDP。2011 Hortonworks 阅读全文
posted @ 2023-09-23 22:07 lcz111 阅读(5) 评论(0) 推荐(0) 编辑
9月15日总结
摘要：今天进行了Hbase数据库应用的测试，对Hbase的使用还不熟练，只能实现部分功能。 阅读全文
posted @ 2023-09-15 19:34 lcz111 阅读(1) 评论(0) 推荐(0) 编辑
暑假总结8
摘要：在安装好SQL SERVER后，系统会自动安装5个用于维护系统正常运行的系统数据库：（1）master：记录了SQL SERVER实例的所有系统级消息，包括实例范围的元数据（如登录帐号）、端点、链接服务器和系统配置设置。（2）msdb：供SQL SERVER 代理服务调度报警和作业以及记录操作员的使 阅读全文
posted @ 2023-09-03 22:23 lcz111 阅读(6) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示