摘要:
一、第一个Shell脚本 #!/bin/bash echo"Hello World" #! 是一种约定的标记,告诉系统使用什么解释器执行; 执行Shell脚本主要有两种方式: #第一种: #使用chmod命令,给脚本添加可执行权限 chmod +x ./hello.sh #执行脚本 ./hello. 阅读全文
摘要:
报错信息: 原因:改文件夹不属于改登录用户的 或者是权限不够。 解决办法: 1、查看要同步的文件所属 //使用命令查看要同步的文件或文件夹的所属 $ ll//使用 chown命令修改所属用户以及所属组 2、修改要同步的文件权限 // -R:递归 ; 777:最高权限 $ sudo chmod -R 阅读全文
摘要:
HanLP是一款面向生产环境的自然语言处理工具包。具有的功能如下:中文分词 词性标注 命名实体识别 依存句法分析 语义依存分析 新词发现 关键词短语提取 自动摘要 文本分类聚类 拼音简繁 自然语言处理【官方地址】http://hanlp.com【GitHub地址】https://github.com 阅读全文
摘要:
一、flatMap 作用:首先将函数应用于RDD的所有元素,然后将结果展平,返回一个新的RDD。 应用场景:文件中的所有行数据仅返回了一个数组对象。(即:Map映射 + 数据扁平化操作) 二、Map 作用:将处理的数据逐条进行映射转换,这里的转换可以是类型的转换,也可以是值的转换。通过将函数应用于此 阅读全文
摘要:
参考文章: Spark中cache和persist的作用以及存储级别 阅读全文
摘要:
Intellij IDEA一启动就弹出如下: 解决: 1、进入IDEA的安装目录进入bin目录下,找到如下两个文件 2、查看你的IDEA的属性,确定用的是32位还是64位的启动器 3、用记事本打开相应的idea.exe.vmoptions 文件,修改第二行 -Xmx的大小(64位默认是750) 注意 阅读全文
摘要:
k8s的node节点使用kubectl命令时,如kubectl get pods --all-namespaces 出现如下错误: [root@k8s-node239 ~]# kubectl get pods The connection to the server localhost:8080 w 阅读全文
摘要:
kubeadm初始化时报错 error execution phase couldn‘t initialize a Kubernetes cluster 这个问题一般是由虚拟机或软件包配置错误错误引起的,需要修改 Docker Cgroup 的驱动程序: $ vi /etc/docker/daemo 阅读全文
摘要:
Kubernetes主要做Docker的容器化管理,总结一下如何查看k8s对应支持的docker版本的方法。 在GitHub可以查看所有Kubernetets版本信息:https://github.com/kubernetes/kubernetes/releases 阅读全文
摘要:
1、准备两台虚拟机环境(master/node) 192.168.100.215 k8s-master 192.168.100.216 k8s-node1 2、关闭防火墙(master/node) systemctl stop firewalld systemctl disable firewall 阅读全文