梦玄庭

2021年8月26日

摘要：摘要本文以MySQL数据库为研究对象，讨论与数据库索引相关的一些话题。特别需要说明的是，MySQL支持诸多存储引擎，而各种存储引擎对索引的支持也各不相同，因此MySQL数据库支持多种索引类型，如BTree索引，哈希索引，全文索引等等。为了避免混乱，本文将只关注于BTree索引，因为这是平常使用My 阅读全文

posted @ 2021-08-26 14:07 梦玄庭阅读(98) 评论(0) 推荐(0) 编辑

Log4J日志简单配置

摘要： #log4j file info log4j.rootLogger=DEBUG,stdout,std log4j.appender.stdout=org.apache.log4j.ConsoleAppender log4j.appender.stdout.layout=org.apache.log4 阅读全文

posted @ 2021-08-26 14:06 梦玄庭阅读(72) 评论(0) 推荐(0) 编辑

Docker入门

摘要： Docker基本组成镜像 -》run -》容器容器 = 镜像 + 可读层安装Docker 环境查看 # 系统内核是3.10以上的[root@mengxt ~]# uname -r3.10.0-1062.18.1.el7.x86_64 # 系统版本[root@mengxt ~]# cat /et 阅读全文

posted @ 2021-08-26 14:04 梦玄庭阅读(929) 评论(0) 推荐(0) 编辑

这是一条分割线~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~

摘要：今天突然之前搭建的博客网站崩溃了，搞了半天才把数据恢复了一部分，先把部分博客备份到园子里吧！阅读全文

posted @ 2021-08-26 14:01 梦玄庭阅读(33) 评论(0) 推荐(0) 编辑

2019年7月23日

yarn命令删除job

摘要： yarn application -kill jobId 阅读全文

posted @ 2019-07-23 10:24 梦玄庭阅读(1069) 评论(0) 推荐(0) 编辑

2019年7月19日

mr自定义排序和分类

摘要：一、上文的补充 1、setup方法一般是用来初始化和加载资源的，主要也是因为编写mr程序所使用jvm和跑mr所使用的jvm并不是同一个，它们之间数据也不能共享，所以需要在setup里进行load。 2、上文提到了可以自定义类型，当你需要使用这个自定义类型来做key时，你可以指定一个Comparato 阅读全文

posted @ 2019-07-19 14:51 梦玄庭阅读(618) 评论(0) 推荐(0) 编辑

2019年7月18日

mr利用shuffle阶段来实现数据去重的功能

摘要：一、需求前提小张同学从别处整来了一批日志，日志内容主要记录了每个用户在运营商中所使用过的手机号，如果没有则为空，数据大概是用户账号、电信手机号、联通手机号、移动手机号、铁通手机号、小灵通等等。当然还有一个关联关系静态文件，主要记录用户所在的省和地市，数据是用户账号，所在省，所在市。日志和静态文件都阅读全文

posted @ 2019-07-18 18:24 梦玄庭阅读(516) 评论(0) 推荐(0) 编辑

2019年7月17日

hadoop如何使用第三方依赖jar包（转载）

摘要：转载：https://blog.csdn.net/zhouyan8603/article/details/46976361 在hadoop环境下，我们经常会遇到执行一些脚本，然后却需要临时依赖一些jar包，比如在查看mahout运行结果的时候，如果用hadoop fs -text xxx就会遇到类似阅读全文

posted @ 2019-07-17 10:33 梦玄庭阅读(2280) 评论(0) 推荐(0) 编辑

2019年7月9日

查看mapreduce log日志（自用）

摘要：查看任务报告：命令：yarn application -status application_1539198654522_1073695 |more查看mapreduce log日志：命令：yarn logs -applicationId application_1539198654522_1073 阅读全文

posted @ 2019-07-09 14:13 梦玄庭阅读(2354) 评论(0) 推荐(0) 编辑

2019年6月28日

OpenID代码示例（自用）

摘要：发送认证到OP 1. //创建消费者对象，它将向认证服务器发出认证请求 2. ConsumerManager manager = new ConsumerManager(); 3. //setAssociations方法设置与OP的关联存放的位置，可以把它存在内存或者数据库或者xml或者文件中，这里将它存放在内存 4. manager.setAssociations(new InMemo... 阅读全文

posted @ 2019-06-28 09:50 梦玄庭阅读(1102) 评论(0) 推荐(0) 编辑

公告