摘要:
Linux 网络配置 配置时需要将用户切换到root用户,或者给当前用户配置root用户的权限。 参考:Linux命令大全 Linux基本命令 1.进入目录 cd /etc #直接切换到指定的目录,绝对路径 cd . #当前目录,后面跟的路径为相对路径 cd .. #返回上一层,相对路径 #带斜杠的 阅读全文
摘要:
前言 从毕业到现在,一直是Java 开发的码农,对大数据方面相关的技术也有点兴趣,一直以来是了解的状态并没有认真的把这一套技术学习实践下。 因为是Java码农,所以对于大数据Hadoop生态圈来说还是比较友好的,毕竟大多数都是Java语言开发的。经过我了解到的大数据相关的技术知识,整理下接下来要好好 阅读全文
摘要:
总览 "官网" 1. 最低要求的Java版本从Java 7增加到Java 8 2. 支持HDFS中的擦除编码 3. YARN时间轴服务v.2 4. Shell脚本重写 6. 支持随机container和分布式计划 7. MapReduce任务级本机优化 8. 支持两个以上的NameNode 9. 多 阅读全文
摘要:
前言 XML作为轻量级的数据存储文件,主要拥有以下优点: 数据内容和机构完全分离。方便作为源数据的后续操作。 互操作性强。大多数纯文本的文件格式都具有这个优点。纯文本文件可以方便地穿越防火墙,在不同操作系统上的不同系统之间通信。 规范统一。XML具有统一的标准语法,任何系统和产品所支持的XML文档, 阅读全文
摘要:
前言 由于在和第三方公司对接的过程中涉及到附件发送及格式等相关的问题,经讨论后采用共享文件夹的方式,在我们这边产生新的数据时将数据打包发送到共享文件夹下,他们再需要的时候自动从文件夹下读取数据,避免了数据传输出现的其他各种奇怪的问题。 实现 引入jar包 实现代码 阅读全文
摘要:
背景(Background) 如果从一开始就将lambda表达式(闭包)作为Java语言的一部分,那么我们的Collections API肯定会与今天的外观有所不同。随着Java语言获得作为JSR 335一部分的lambda表达式,这具有使我们的Collections接口看起来更加过时的副作用。尽管 阅读全文
摘要:
未替换前hadoop上操作会出现如下警告: 解决: 1、下载编译好的native包,解压。 native包:https://files.cnblogs.com/files/yin1361866686/native-2.5.0.tar.gz 2、替换掉/hadoop/lin/native. 3、通过b 阅读全文
摘要:
简介 Java SE 8 增加了新的语言特性(例如 lambda 表达式和默认方法),为此 Java SE 8 的类库也进行了很多改进,本文简要介绍了这些改进。在阅读本文前,你应该先阅读 深入浅出Java 8 Lambda(语言篇),以便对 Java SE 8 的新增特性有一个全面了解。 背景(Ba 阅读全文
摘要:
前言 Java8已经出来很久了,但是现在很多公司并没有急于升级到新的版本,Java8仍然是主流的开发版本。我是带着学习的态度开始了解并学习lambda,这是Java8版本中比较大的一个变化,也是比较吸引我的一个技能。 lambda表达式的介绍 "官网介绍" One issue with anonym 阅读全文
摘要:
js将文件流转为文件 需求: 前端通过ajax请求后端,根据接收前端的参数生成相应的文件,并将文件返回到前端提供下载。 方案1: 通过ajax请求后端,将生成的文件直接通过response.write的方式直接将生成的文返回。 该方案失败,由于ajax请求返回的数据需要在回调函数中获取,返回的dat 阅读全文