摘要:
具体的官网链接为:https://hadoop.apache.org/docs/r2.10.0/hadoop-project-dist/hadoop-common/SingleCluster.html 官方Grep案例 [root@iZbp1efx14jd8471u20gpaZ hadoop-2.7 阅读全文
摘要:
1、横向流程图源码格式: ```mermaid graph LR A[方形] -->B(圆角) B --> C{条件a} C -->|a=1| D[结果1] C -->|a=2| E[结果2] F[横向流程图] ``` 2、竖向流程图源码格式: ```mermaid graph TD A[方形] - 阅读全文
摘要:
简介 主要记录了Hadoop各个组件的基本原理,处理过程和关键的知识点等,包括HDFS、YARN、MapReduce等。 铺垫 人产生数据的速度越来越快,机器则更加快,more data usually beats better algorithms,所以需要另外的一种处理数据的方法。 硬盘的容量增 阅读全文
摘要:
Python的装饰器和Java的代理差不多,也类似AOP切面,就是在方法的前面做点事情,但是要有Python的闭包基础,返回的是一个函数。 一 先键2个基础函数 # 创建几个函数 def add(a , b): ''' 求任意两个数的和 ''' r = a + b return r def mul( 阅读全文