2022年9月9日

Redis使用

摘要: ##一、安装Redis ####1.下载redis-6.2.5.tar.gz,上传到/opt/software,解压 tar -zxvf redis-6.2.5.tar.gz -C /opt/module ####2.进入/opt/module/redis-6.25 ####3.编译 make && 阅读全文

posted @ 2022-09-09 16:20 L先森请坐下 阅读(19) 评论(0) 推荐(0) 编辑

2022年9月7日

Flink学习

摘要: ##一、Flink部署 ####1.集群角色:hadoop102:JobManager; hadoop103:TaskManager; hadoop104:TaskManager ####2.集群启动 $ bin/start-cluster.sh ####3.查看flink状态:jps ####4. 阅读全文

posted @ 2022-09-07 13:10 L先森请坐下 阅读(29) 评论(0) 推荐(0) 编辑

2022年9月2日

Hadoop_生产调优

摘要: ##一、HDFS核心参数 ####1、NameNode内存生产配置 #####(1)查看内存jmap -heap 进程号 #####(2)修改hadoop-env.sh配置文件: export HDFS_NAMENODE_OPTS="-Dhadoop.security.logger=INFO,RFA 阅读全文

posted @ 2022-09-02 17:05 L先森请坐下 阅读(53) 评论(0) 推荐(0) 编辑

2022年9月1日

Hadoop-yarn学习

摘要: ##一、常用命令 ####1.yarn application -list列出所有Application ####2.yarn application -list -appStates 状态(ALL,NEW,NEW_SAVING,SUBMITTED,ACCEPTED,RUNNING,FINISHED 阅读全文

posted @ 2022-09-01 00:03 L先森请坐下 阅读(214) 评论(0) 推荐(0) 编辑

2022年8月31日

Hadoop-MapReducer学习

摘要: ##一、InputFormat ####1.默认的是TextInputFormat,key偏移量,value一行内容。 ####2.处理小文件CombineTextInputFormat把多个文件合并到一起统一切片。 ##二、Mapper ####setup()初始化;map()用户的业务逻辑;cl 阅读全文

posted @ 2022-08-31 19:02 L先森请坐下 阅读(21) 评论(0) 推荐(0) 编辑

2022年8月23日

hadoop-HDFS学习

摘要: ##一、HDFS的shell操作: ####1.语法:hadoop fs 具体命令或者hdfs dfs 具体命令 ####2.上传: #####(1)剪切hadoop fs -moveFromLocal 本地文件路径 HDFS文件路径 #####(2)复制hadoop fs -copyFromLoc 阅读全文

posted @ 2022-08-23 16:52 L先森请坐下 阅读(75) 评论(0) 推荐(0) 编辑

2022年8月4日

hadoop学习-入门

摘要: ##一、克隆虚拟机 ####1.使用vim /etc/sudoers进去修改用户权限 ####2.设置虚拟机ip:vim /etc/sysconfig/network-scripts/ifcfg-ens33 ####3.设置虚拟机名称:vim /etc/hostname ####4.压缩jdk文件: 阅读全文

posted @ 2022-08-04 17:42 L先森请坐下 阅读(48) 评论(0) 推荐(0) 编辑

2020年5月5日

机器学习第二次作业

摘要: 第一章 模式识别基本概念 预习部分 首先了解了这门课涉及到了高等数学、线性代数、概率论等数学知识,所以我有稍微去粗略的回顾了一下这几门课的知识点。 复习部分 模式识别的应用领域有:字符识别(计算机视觉领域)、交通及标志识别(计算机视觉领域)、动作识别(计算机视觉领域)、语音识别(人机交互领域)、模式 阅读全文

posted @ 2020-05-05 23:25 L先森请坐下 阅读(463) 评论(0) 推荐(0) 编辑

2020年4月22日

机器学习第一次作业

摘要: 生物特征识别技术 基本概念 生物特征识别技术是指通过个体生理特征或行为特征对个体身份进行识别认证的技术。 应用流程 从应用流程看,生物特征识别通常分为注册和识别两个阶段。 注册阶段通过传感器对人体的生物表征信息进行采集,如利用图像传感器对指纹和人脸等光学信息、麦克风对说话声等声学信息进行采集,利用数 阅读全文

posted @ 2020-04-22 13:34 L先森请坐下 阅读(292) 评论(0) 推荐(0) 编辑

2020年3月20日

机器学习作业一

摘要: 作业part1 1、对课程的学习心得做一个小结,也可以是学习笔记。 不知不觉机器学习这门课已经过了一半了,而如今我却还待在家里。(用闽南语的话来说就是,我快要生菇了) 说实话虽然说现在第三章都学完了,但实际上我掌握的估计不到一半,感觉这门课可以说成是一门数学课,运用到了高数、线性代数、概率论等数学知 阅读全文

posted @ 2020-03-20 19:12 L先森请坐下 阅读(397) 评论(0) 推荐(0) 编辑

导航