再见猪小华

摘要： 在BOSS上看到了南京小米的招聘，而且就在建邺新城科技园，离我挺近，就投了。 和人事约好，北京的电话技术面。 首先自我介绍。 开始基于简历，问了一下项目的架构，自己处于什么位置，担任什么角色。 技术问题问了一大堆。涉及大数据，java，以及数据结构，算法。 简要回忆，由于间隔较久，遗漏颇多。 【1】 阅读全文

摘要： 前几日驱车30公里，来到徐庄苏宁总部，参加面试。 随接待上楼，看了眼工作环境，嗯，比中兴多姿多彩一些，有点互联网的样子。 2个面试官与我3人，在休息区的一个角落坐了下来。 进入正题~ 开门见山，自我介绍都不需要。。。直接问技术 1. spark的宽窄依赖？ 老问题了 2. 宽依赖是否一定触发shuf 阅读全文

摘要： 今天接到了KPMG的电话面试。 首先是英文自我介绍，很easy，简单略过。 接下来是技术面。问了一些技术问题。 1. hadoop有没有搭过环境？（我回答搭过）讲下搭建过程？ 答：先是配置网络，关闭防火墙等等，然后下载hadoop安装包，解压，配置core-site.xml，hdfs-site.xm 阅读全文

摘要： 14年在烽火做过Hbase的相关项目。 时隔4年，接触的项目都没有用到Hbase。今天，简单回顾一下hbase的基本概念。 既然是随笔，想到什么就写什么。 【1】首先Hbase是列式的分布式存储系统。把需要经常同时访问的数据，定义在一个列族里。 Hbase Table=Rowkey + Family 阅读全文

摘要： 统计学是一门收集，整理，和分析统计数据的方法学科 目的是探索数据内在的规律，以达到对客观事物的科学认识 统计学研究随机现象，以推断为特征，由部分推及整体 机器学习中数学的重要性，不用多说。 描述统计学和推断统计学 描述统计学：通过图标形式对所收集的数据进行加工处理和显示。进而通过综合概括与分析得出反 阅读全文

摘要： vim vim = vi + improved 新增了： （1）多级撤销 （2）语法加亮和自动补全 （3）支持多种插件 （4）多文件编辑 vimrc高度可定制 :version :h vimrc :e ~/.vimrc vim的4种模式： （1）普通模式：移动，删除 （2）可视模式 （3）插入模式 阅读全文

摘要： 1. flink了解 flink在2014年成为apache顶级项目，可以处理流式数据和批式数据。主要用于流式处理，和spark streaming和storm是同一类别框架。 flink处理数据是事件级别，延迟毫秒级别。 flink是主从架构，一般生产环境，在yarn上运行。 flink默认ui端 阅读全文

摘要： package day20140918;import org.junit.Test;/* * 由于昨天面试问到了单例模式 * 回顾一下 * 单例设计模式 * *///饿汉式，类一加载就存在，线程安全class SingleE{ //定义一个私有成员，便于测试 private int ... 阅读全文

摘要： 今天去烽火星空通信发展有限公司面试大数据工程师。 首先，美女人力拿了一张Java的试卷给我做，当时就纳闷了，大数据岗位，虽说用Java语言，但重点应该是hadoop啊，也没多想，反正Java我也不是很虚，正好考验下这段时间Java的水平。 试卷做完交给人力后，就问她，我面的是不是大数据，她说... 阅读全文

摘要： 好久没写博客了。。今天重温了java基础 （1）java map集合中的元素不能直接由增强for循环得到，但是可以通过它的方法keySet()和entrySet()得到Set集合，再遍历得到。 （2）学习了Junit测试类的使用，在方法前加@Test即可。想测试哪个方法，就右键run as ... 阅读全文