01 2021 档案

摘要:众所周知,csv文件默认以逗号“,”分割数据,那么在scala命令行里查询的数据: 可以看见,字段里就包含了逗号“,”,那接下来切割的时候,这本应该作为一个整体的字段会以逗号“,”为界限进行切割为多个字段。 现在来看看这里的_c0字段一共有多少行记录。 记住这个数字:60351行 写scala代码读 阅读全文
posted @ 2021-01-30 00:43 孙晨c 阅读(479) 评论(0) 推荐(0) 编辑
摘要:@ 发现问题 在浏览器输入secondaryNamenode的网址后不能显示,解决: 先按F12,然后选择console,就能看见报错信息了: 解决问题 找到根源 那就通过find命令找到这个dfs-dust.js文件: 根治问题 vim编辑器进入后,在命令模式输入 :se nu 设置行号,找到61 阅读全文
posted @ 2021-01-28 17:00 孙晨c 阅读(402) 评论(0) 推荐(0) 编辑
摘要:别看其他文章了,你就是防火墙没关!不信试试看你的防火墙状态是不是running? firewall-cmd --state 再送上关闭防火墙的命令: systemctl stop firewalld 防火墙开机自启动: systemctl enable firewalld.service 阅读全文
posted @ 2021-01-28 14:57 孙晨c 阅读(1782) 评论(0) 推荐(0) 编辑
摘要:@ 一、 Centos6和Centos7 防火墙命令的区别 Centos6自带的防火墙工具是iptables Centos7自带的防火墙工具是firewall iptables 用于过滤数据包,属于网络层防火墙。 firewall 能够允许哪些服务可用,哪些端口可用,属于更高一层的防火墙。 ipta 阅读全文
posted @ 2021-01-27 17:58 孙晨c 阅读(171) 评论(0) 推荐(0) 编辑
摘要:@ Kafka压测 用Kafka官方自带的脚本,对Kafka进行压测。Kafka压测时,可以查看到哪个地方出现了瓶颈==(CPU,内存,网络IO)。一般都是网络IO达到瓶颈。 == 使用下面两个kafka自带的脚本 kafka-consumer-perf-test.sh kafka-producer 阅读全文
posted @ 2021-01-27 14:09 孙晨c 阅读(2251) 评论(0) 推荐(0) 编辑
摘要:通常控制台在执行某个jar包时,屏幕会刷个不停,直到程序执行完毕,类似这种: 那么就可以编写一个脚本,把输出的内容全部扔进“黑洞”。此脚本模拟在hadoop102和hadoop103两台主机上循环执行jar文件: #!/bin/bash for i in hadoop102 hadoop103 do 阅读全文
posted @ 2021-01-26 00:40 孙晨c 阅读(262) 评论(0) 推荐(0) 编辑
摘要:@ Linux的环境变量可在多个文件中配置,如/etc/profile,/etc/profile.d/*.sh,~/.bashrc等,下面说明上述几个文件之间的关系和区别。 bash的运行模式可分为login shell和non-login shell。 login shell 例如,我们通过终端, 阅读全文
posted @ 2021-01-26 00:00 孙晨c 阅读(324) 评论(0) 推荐(0) 编辑
摘要:@ 在2020版前 通过IDEA.properties文件可知config目录、system目录、插件安装目录都在用户目录下 插件安装目录就在config目录下: 在2020版后 把pycharm和IDEA的config等目录都放在了这个路径下面: 直接进去IDEA的目录,就相当于之前的config 阅读全文
posted @ 2021-01-20 15:30 孙晨c 阅读(6630) 评论(0) 推荐(1) 编辑
摘要:@ 回顾:Java数据类型 Java基本数据类型:char、byte、short、int、long、float、double、boolean Java引用类型:(对象类型) 由于Java有基本类型,而且基本数据类型不是真正意义的对象,于是就有了基本数据类型的包装类: Java基本数据类型的包装类:C 阅读全文
posted @ 2021-01-15 20:40 孙晨c 阅读(152) 评论(0) 推荐(0) 编辑
摘要:@ 说在前面 scala是纯面向对象的语言,C是纯面向过程的语言,Java就是面向过程+面向对象的语言。 在说到伴生对象之前,要先说到java的static关键字,static关键字修饰的变量、方法可以使类对象共享,而非某个对象单独拥有,所以是通过类名.变量名/方法名去调用。而这违背了scala面向 阅读全文
posted @ 2021-01-13 20:41 孙晨c 阅读(400) 评论(0) 推荐(1) 编辑
摘要:@ 集合 Collection-存放单值类型数据 List:有序、可重复 注意:有序指的是集合中的元素有下标,放进去和取出来的顺序一致 ArrayList 底层是数组 优点:查询效率高,因为数组中的元素在内存中是连续的,可以快速的根据下标获取集合中的元素 缺点:增删效率低,因为在对数组中元素进行增删 阅读全文
posted @ 2021-01-12 11:44 孙晨c 阅读(172) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示