07 2021 档案

摘要:冷启动推荐介绍 冷启动又分用户冷启动、物品冷启动、文章冷启动等,本文主要是以在没有用户行为数据的情况下进行物品的推荐;即实现基于区域物品推荐 案例数据 用户ID 物品ID 经度 纬度 1,WP1,116.676381,23.36102 如何进行新注册用户物品推荐,主要以kmeans聚类算法进行实现, 阅读全文
posted @ 2021-07-29 11:31 sjkzy 阅读(93) 评论(0) 推荐(0) 编辑
摘要:目录 回顾上节内容 Mapreduce介绍 Mapreduce工作流程图 Mapreduce案例,共9个 回顾上节内容 Hadoop组成部分 由hdfs和Mapreduce组成,hdfs是分布式文件存储,由nameNode和dataNode组成,nameNode是存储和管理元数据信息;datanod 阅读全文
posted @ 2021-07-29 09:42 sjkzy 阅读(116) 评论(0) 推荐(0) 编辑
摘要:http://blog.javachen.com/2014/06/24/tuning-in-mapreduce/ 本文主要记录Hadoop 2.x版本中MapReduce参数调优,不涉及Yarn的调优。 Hadoop的默认配置文件(以cdh5.0.1为例): core-default.xml hdf 阅读全文
posted @ 2021-07-26 16:20 sjkzy 阅读(246) 评论(0) 推荐(1) 编辑
摘要:算法简介 二分查找也称折半查找(Binary Search),多数的人喜欢叫他二分查找。它是一种效率较高的查找方法。但是,折半查找要求线性表必须采用顺序存储结构,而且表中元素按关键字有序排列,注意必须要是有序排列。 具体计算 二分查找的基本思想是将n个元素分成大致相等的两部分,取a[n/2]与x做比 阅读全文
posted @ 2021-07-19 17:07 sjkzy 阅读(567) 评论(0) 推荐(0) 编辑
摘要:目录 大数据Hadoop组成部分 HDFS中NameNode介绍 HDFS中DataNode介绍 HDFS中NameNode和DataNode工作原理 大数据Hadoop1.0与Hadoop2.0区别 1.Hadoop1.0版本两个核心:HDFS+MapReduce 2.Hadoop2.0版本,引入 阅读全文
posted @ 2021-07-16 23:51 sjkzy 阅读(38) 评论(0) 推荐(0) 编辑
摘要:目录 大数据特性 大数据带来的问题和解决方案 大数据都能做什么 大数据相关组件 大数据特性 数据量大 一切皆数据,所能看到的一切基本都可以转化为数据。海量数据呈指数级别上升。 数据多样 视频、图片、语音、文本、格式化数据、xml、各式各样数据…. 数据告诉传播 2g、3g、4g、5g每秒几GB的传输 阅读全文
posted @ 2021-07-15 22:23 sjkzy 阅读(62) 评论(0) 推荐(0) 编辑
摘要:检查节点中是否自带mysql: rpm -qa | grep mysql rpm -qa | grep mariadb 如果有安装,需要卸载系统自带: rpm -e mysql【一般删除,如果提示以来的其他文件,则不能删除】 rpm -e --nodeps mysql【强制删除,包含各种依赖包】 y 阅读全文
posted @ 2021-07-12 12:04 sjkzy 阅读(58) 评论(0) 推荐(0) 编辑
摘要:常用命令 重启机器 立即马上重启机器,操作命令 reboot -h now 通过yum文件安装vim 按照vim,操作命令 yum -y install vim rm 删除文件 删除文件 参数: -i 删除前逐一询问确认。 -f 即使原档案属性设为唯读,亦直接删除,无需逐一确认。 -r 将目录及以下 阅读全文
posted @ 2021-07-08 21:02 sjkzy 阅读(20) 评论(0) 推荐(0) 编辑
摘要:常用命令 hadoop格式化 格式化命令 hadoop namenode -format 在那个节点执行,该节点就是主节点,其它节点为slave节点 hadoop启动命令 进入hadoop目录,hadoop启动命令 sbin/start-all.sh hadoop 线程监控 jps命令 jps 显示 阅读全文
posted @ 2021-07-08 21:01 sjkzy 阅读(204) 评论(0) 推荐(0) 编辑
摘要:前期准备 需要把hadoop-2.7.3.tar.gz拷贝到/usr/local/src/目录下,并进行解压 进入到/usr/local/src/目录下进行解压命令 tar -zxvf hadoop-2.7.3.tar.gz 进入到/usr/local/src/hadoop-2.7.3/etc/ha 阅读全文
posted @ 2021-07-07 22:29 sjkzy 阅读(35) 评论(0) 推荐(0) 编辑
摘要:linux压缩和解压缩命令大全 tar命令 解包:tar zxvf FileName.tar 打包:tar czvf FileName.tar DirName gz命令 解压1:gunzip FileName.gz 解压2:gzip -d FileName.gz 压缩:gzip FileName . 阅读全文
posted @ 2021-07-07 14:54 sjkzy 阅读(52) 评论(0) 推荐(0) 编辑
摘要:vi简介 vi是“Visual interface”的简称,它在Linux上的地位就仿佛Edit程序在DOS上一样。它可以执行输出、删除、查找、 替换、块操作等众多文本操作,而且用户可以根据自己的需要对其进行定制。 Vi不是一个排版程序,它不象Word或WPS那样可以对字体、格式、段落等其他属性进行 阅读全文
posted @ 2021-07-07 14:52 sjkzy 阅读(67) 评论(0) 推荐(0) 编辑
摘要:学习目的 本文内容主要是为了方便通过远程终端维护服务器时,查看服务器上当前 系统日期和时间/磁盘空间占用情况/程序执行情况 学习的终端命令基本都是查询命令,通过这些命令对系统资源的使用情况有个了解 目标 时间和日期 -date cal 磁盘和目录空间 df du 进程信息 ps top kill 时 阅读全文
posted @ 2021-07-07 14:51 sjkzy 阅读(41) 评论(0) 推荐(0) 编辑
摘要:Linux 下文件和目录的特点 Linux 文件 或者 目录 名称最长可以有 256 个字符 以 . 开头的文件为隐藏文件,需要用 -a 参数才能显示 . 代表当前目录 .. 代表上一级目录 目标: 理解学习linux终端命令的原因 常用linux命令实践 原因 Linux 刚面世时并没有图形界面, 阅读全文
posted @ 2021-07-07 14:49 sjkzy 阅读(81) 评论(0) 推荐(0) 编辑
摘要:目标 了解终端命令格式 知道如何查阅终端命令帮助信息 01. 终端命令格式 command [-options] [parameter] 说明: command :命令名,相应功能的英文单词或单词的缩写 [-options] :选项,可用来对命令进行控制,也可以省略 parameter :传给命令的 阅读全文
posted @ 2021-07-07 14:42 sjkzy 阅读(45) 评论(0) 推荐(0) 编辑
摘要:用户目录:/home/usr,称之为用户工作目录或家目录,表示方式: /home/usr ~ Linux 主要目录速查表 /:根目录,一般根目录下只存放目录,在 linux 下有且只有一个根目录,所有的东西都是从这里开始 当在终端里输入/home ,其实是在告诉电脑,先从 / (根目录)开始,再进入 阅读全文
posted @ 2021-07-07 14:38 sjkzy 阅读(190) 评论(0) 推荐(0) 编辑
摘要:介绍 Xshell 是一款功能强大的远程终端连接管理软件,支持多种远程协议,可以在多端进行高效安全的远程连接,是用户远程连接的优秀软件; 链接: https://pan.baidu.com/s/1wq-qLrSXhyn-PdYYuiYbeA 提取码: 1gd9 上传文件 通过lrzsz进行上传 在l 阅读全文
posted @ 2021-07-06 18:52 sjkzy 阅读(69) 评论(0) 推荐(0) 编辑
摘要:一、centos7版本对防火墙进行加强,不再使用原来的iptables,启用firewalld 1.firewalld的基本使用 启动: systemctl start firewalld 查状态:systemctl status firewalld 停止: systemctl disable fi 阅读全文
posted @ 2021-07-06 09:58 sjkzy 阅读(257) 评论(0) 推荐(0) 编辑
摘要:开篇 最近好久没有更新博客了,在19年公司部门调整,处于迷茫的我,想进行学习,在长达一段时间决定选择机构进行学习, 在报名之后,学习了一段时间,由于工作的原因自己就选择了暂时停课(自己给自己找理由),到现在又看到奈学课程, 推荐大家可以学习,依然决定把之前的课程从新开始学习,今天就开始重新开始之前的 阅读全文
posted @ 2021-07-05 13:17 sjkzy 阅读(33) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示