摘要: 1. HDFS HDFS是以流式数据访问模式来存储超大文件的分布式文件系统,能忍受节点故障且不丢失任何数据。 1.1 HDFS读写流程 1.1.1 读流程 Open:客户端通过 DistributedFileSystem 调用 open() 来打开它希望读取的文件。 Get Black Locati 阅读全文
posted @ 2022-03-07 16:35 不周客 阅读(359) 评论(0) 推荐(0) 编辑
摘要: 2021年总结 1.校内——社团,竞赛 1.1 服务外包 这个比赛只拿到区域赛三等奖,当时知道结果的时候很难过,到了2022年再来看,彷佛理所应当,作为负责人看错了题,没有很深入地思考预测算法应当做到什么地步;作为负责人没有提前思考材料的准备,拖到最后仓促找淘宝外包,劣质的视频当然无法脱颖而出——尤 阅读全文
posted @ 2022-01-11 00:00 不周客 阅读(158) 评论(1) 推荐(1) 编辑
摘要: 想到未来如果换工作/run出去找工作也需要算法 计划跟着代码随想录开始刷题,但是解题过程中发现代码随想录主要用C++,Java的代码没有特别的友好, 于是记录下自己做不出的题目以及微调过的代码 栈与队列 代码随想录题解 150. 逆波兰表达式求值 class Solution { public in 阅读全文
posted @ 2022-01-10 20:57 不周客 阅读(36) 评论(0) 推荐(0) 编辑
摘要: 获取时间差值(小时差,分钟差,秒) 今天遇到一个需求,要得到两个时间点之前的分钟差值,找了一圈没找到 问了导师说可以先转时间戳,果然可以,记录一下。 select (unix_timestamp(end_time)-unix_timestamp( begin_time))/60 as duratio 阅读全文
posted @ 2021-10-09 16:29 不周客 阅读(4257) 评论(0) 推荐(0) 编辑
摘要: 35个问题如下: \00. Age? 此时年龄? \01. What is your idea of perfect happiness? 你对“最完美的幸福”的看法是什么? \02. What is your greatest fear? 你最大的恐惧是什么? \03. What is the t 阅读全文
posted @ 2021-06-30 22:36 不周客 阅读(138) 评论(0) 推荐(0) 编辑
摘要: 单例模式 设计模式的实现大多建立在Java提供的一些关键字以及面向对象的设计上,通过继承/组合,形成了几种经典的范式。 单例模式是23种设计模式中最为简单的一种,如果拿来暑期集训讲static关键字的时候结合单例模式一起讲,可能效果会不错~ 单例模式用于这样一种场景,一个全局配置的类,或者说一种“管 阅读全文
posted @ 2021-05-16 13:45 不周客 阅读(51) 评论(0) 推荐(0) 编辑
摘要: 当要组织一群人,完成一件事时,首要考虑的是什么? 考虑的是这群人,还是这件事? 昨天晚上,卡着点提交材料,在11点59分发现上传的视频有问题紧急替换,最后成功提交,在刚刚看到材料通过了审核,也就意味着这个项目度过了一个节点。 能不能走到下一个节点我不好说,但能一步步走到这里,已经是非常地庆幸了。 我 阅读全文
posted @ 2021-04-23 16:36 不周客 阅读(114) 评论(0) 推荐(1) 编辑
摘要: java.lang.ClassNotFoundException: org.apache.flink.streaming.connectors.kafka.KafkaSerializationSchema Flink从Kafka中读取数据,本地运行时一切正常,但打包jar提交服务器时一直无法运行,日 阅读全文
posted @ 2021-04-13 21:45 不周客 阅读(3244) 评论(0) 推荐(0) 编辑
摘要: 业务:查询指定月份每天经过指定线路的客流量 SELECT day, count(*) num from `data_set` WHERE MONTH(day) = 03 and (station_in_line = 2 or station_out_line = 2) GROUP BY day OR 阅读全文
posted @ 2021-03-25 21:55 不周客 阅读(110) 评论(0) 推荐(0) 编辑
摘要: 认清w是个小菜鸡但是不放弃~ 阿里 难过是真的很难过,一上来就是心仪的大厂,很厉害的主管的面试。 面试官人很好,很有耐心,问的都是基础知识。 整个面试中,最缺失的是基础知识 栈通常在什么情况下使用,懵的。 为什么备份要三倍,懵的。跑去想zookeeper的原理想了半天 还有就是,不能把最浅显最直接的 阅读全文
posted @ 2021-03-21 10:58 不周客 阅读(116) 评论(0) 推荐(0) 编辑
摘要: Flink读取csv文件遇到中文乱码 今天用了项目的数据集来探索Flink的API,但是发现输出的中文乱码. 因为对Flink不太熟,先确定了Flink默认读取文件的编码就是UTF-8, 但贼心不死又去确认了一遍 System.out.println(env.readCsvFile("E:\\Pro 阅读全文
posted @ 2021-02-23 21:14 不周客 阅读(1218) 评论(0) 推荐(0) 编辑
摘要: 左耳听风专栏:高效学习——笔记与反思 学习的方式 比较高效的三种方式: 小组讨论 动手实践 教给别人 要思辨,要践行,要总结和归纳: 高质量的信息源和第一手知识 我从哪里获取信息?从哪里获取知识? 依赖中文互联网 公众号:Infoq,…… 知乎 书 …… 依赖课程/专栏 B站 极客时间 改变思路-》 阅读全文
posted @ 2021-02-17 11:37 不周客 阅读(204) 评论(0) 推荐(0) 编辑
摘要: 软件包管理 在Linux系统下,软件包管理分为两种类型:二进制包,源码包。 当时想当然地用一台Ubuntu,两台Centos系统的服务器搭建Hadoop集群,结果当然是,很惨烈。跟着教程一步步折腾来折腾去,结果发现jdk路径就是没法弄得一样。想在Ubuntu系统上尝试yum安装但一直提示找不到相应的 阅读全文
posted @ 2021-02-16 18:06 不周客 阅读(474) 评论(0) 推荐(0) 编辑
摘要: OneNote OneNote以笔记本,分区,页,子页的逻辑来整理笔记, 而每一页都可以当作无限延展的白纸, 非常符合传统的记笔记习惯. 本地上安装了两个版本, 分别是OneNote for Windows 10, OneNote 2016,一开始是因为前者死活打不开于是不甘心去找了后者来用, 从大 阅读全文
posted @ 2021-02-10 12:12 不周客 阅读(11024) 评论(3) 推荐(0) 编辑
摘要: Vim 常用命令 插入字符 要记得先回到命令模式, 命令 作用 a 在光标所在字符后插入 A 在光标所在行尾插入 i 在光标所在字符前插入 I 在光标所在行行首插入 o 在光标下插入新行 O 在光标上插入新行 行号跳转 命令 作用 : set nu 设置行号 : set nonu 取消行号 gg 到 阅读全文
posted @ 2021-02-05 17:20 不周客 阅读(83) 评论(0) 推荐(0) 编辑