摘要: functools.partial(Func,p1,p2,…) 偏函数的意思是把一个函数的前几个参数固定下来,然后形成一个封装后的函数 def add(a,b): return a+b add_10 = functools.partial(add,10) print(add_10(4)) #14 把 阅读全文
posted @ 2020-03-05 20:11 星辰戟 阅读(192) 评论(0) 推荐(0) 编辑
摘要: 1、准备虚拟机 克隆3台linux虚拟机,仅安装了centos最小模式的机器 2、配置集群网络 网络分配表 主机名 IP地址 hadoop1 192.168.178.101 hadoop2 192.168.178.102 hadoop3 192.168.178.103 vi /etc/hosts 要 阅读全文
posted @ 2019-07-28 20:56 星辰戟 阅读(201) 评论(0) 推荐(0) 编辑
摘要: cut cut的工作就是“剪”,具体的说就是在文件中负责剪切数据用的。cut命令从文件的每一行剪切字节、字符和字段,并将这些字节、字符和字段暑促。 1、基本用法 cut [选项参数] filename 说明:默认分隔符是制表符 2、选项参数说明 3、实例实操 (0)数据准备 (1)切割cut.txt 阅读全文
posted @ 2019-07-27 12:43 星辰戟 阅读(4920) 评论(0) 推荐(0) 编辑
摘要: 系统函数 1、基本语法 basename [ string / pathname ] [suffix] (功能叙述:basename命令会删掉所有的前缀包括最后一个('/')字符,然后讲字符串显示出来 选项: suffix 为后缀,如果suffix被制定类,basename会将pathname或st 阅读全文
posted @ 2019-07-27 12:41 星辰戟 阅读(646) 评论(0) 推荐(0) 编辑
摘要: if 判断 1、基本语法 if [ 条件表达式 ];then 程序 fi 或者 if [ 条件表达式 ] then 程序 fi 注意:条件表达式左右必须要有空格 ,后面有个分号,if后面必须要有空格 2、案例实操 (1)输入一个数字,如果是1,则输出1111,如果是2,则输出2222,如果是其他,什 阅读全文
posted @ 2019-07-27 12:33 星辰戟 阅读(706) 评论(0) 推荐(0) 编辑
摘要: 运算符 1、基本语法 (1)“$((运算表达式)) ”或 “$[运算表达式]” (2)expr +,-,\*,/,% 注意:expr运算符间要有空格 2、案例实操 (1)计算3+2的值 (2)计算3-2的值 (3)计算(2+3)*4的值 expr: ` `表示括号(esc下面的键) $[] 条件判断 阅读全文
posted @ 2019-07-27 12:22 星辰戟 阅读(546) 评论(0) 推荐(0) 编辑
摘要: 1、常用系统变量 $HOME、$PWD、$SHELL、$USER 家目录、当前目录、默认解释器、当前用户 显示当前Shell中所有变量:set 2、自定义变量 2.1.基本语法 (1)定义变量:变量=值 等号左右没有空格 (2)撤销变量:unset 变量 (3)声明静态变量:readonly 变量, 阅读全文
posted @ 2019-07-27 11:43 星辰戟 阅读(1360) 评论(0) 推荐(1) 编辑
摘要: Shell概述 现在有一个强大的对手Python。 Shell解释器 常见的解释器sh、bash 最常用sh、bash 它们之间的关系 软连接 —> 其实还是调用bash 系统默认解释器 bash 入门案例 1、脚本格式 脚本以 #!/bin/bash开头(指定解释器) helloword 2、第一 阅读全文
posted @ 2019-07-27 11:42 星辰戟 阅读(481) 评论(0) 推荐(0) 编辑
摘要: 伪分布式模式是适合配置较低的,只有一台机器的学习情况,配置和完全分布模式的配置一样,所以是适合一种学习的模式。 注意:配置信息都要用复制,避免标签敲错造成的不良后果 修改配置文件 伪分布式模式配置步骤: 1、配置hadoop-env.sh 修改hadoop的环境为JAVA_HOME,来到etc/ha 阅读全文
posted @ 2019-07-26 11:19 星辰戟 阅读(691) 评论(0) 推荐(0) 编辑
摘要: 网络配置 首先是一台刚刚安装好的虚拟机 然后开始配置静态ip 回到虚拟机,选择图形化设置网络 重启启动网络,更新一下配置 也可以手动修改配置文件 同样别忘记 重新一下网络配置 bash systemctl restart network 宿主机ping虚拟机可以ping通 虚拟机ping百度也可以p 阅读全文
posted @ 2019-07-26 10:19 星辰戟 阅读(409) 评论(0) 推荐(0) 编辑