2017年11月19日

Linux安装MySQL

摘要: 安装mysql检查是否安装mysql:rpm -qa |grep mysql删除已经安装的mysql:rpm -e mysql-libs-5.1.71-1.el6.x86_64报错:因为mysql有相关依赖,并不能直接删除 rpm -e --nodeps mysql-libs-5.1.71-1.el... 阅读全文

posted @ 2017-11-19 16:47 杨先森的博客 阅读(441) 评论(0) 推荐(0) 编辑

Centos7 安装hive

摘要: 安装hive配置hive在hdfs中新建目录/user/hive/warehouse首先启动hadoop任务hdfs dfs -mkdir /tmphdfs dfs -mkdir /userhdfs dfs -mkdir /user/hivehdfs dfs -mkdir /user/hive/wa... 阅读全文

posted @ 2017-11-19 16:47 杨先森的博客 阅读(187) 评论(0) 推荐(0) 编辑

Centos下安装Hbase

摘要: 安装HBase下载安装下载解压Hbase安装包并移到/usr/share/hbase解压命令:tar -zxvf + 安装包配置在hhbase-env.sh中指定JDK的安装位置export JAVA_HOME=…在hbase-site.xml中添加配置项 ... 阅读全文

posted @ 2017-11-19 16:47 杨先森的博客 阅读(266) 评论(0) 推荐(0) 编辑

Linux下搭建Hadoop集群(Centos7.0)

摘要: Hadoop集群安装概述集群cluster,将很多任务进程分布到多台计算机上;通过联合使用多台计算机的存储、计算能力完成更庞大的任务。为了实现无限量的存储和计算能力,在生产环境中必须使用集群来满足需求。总体步骤基本步骤1) 安装JDK,配置JDK环境变量2) 安装Hadoop,配置Hadoop环境变... 阅读全文

posted @ 2017-11-19 16:47 杨先森的博客 阅读(951) 评论(0) 推荐(1) 编辑

linux Centos下安装jdk

摘要: 1.卸载这一项视情况而定!卸载OpenJDKGnome桌面版自还OpenJDK,OpenJDK是JDK的一个开源实现与Oracle官方JDK相似度近95%,一般情况下可以使用但大数据的Hadoop不支持OpenJDK通过rpm查找jdk和java的安装信息rpm是RedHat包管理器,包管理器能够管... 阅读全文

posted @ 2017-11-19 16:47 杨先森的博客 阅读(134) 评论(0) 推荐(0) 编辑

Linux下 磁盘扩容的两种方式

摘要: Hadoop扩容概述Hadoop存储容量或计算能力不能满足日益增长的需求时,就需要扩容。扩容有两个方案:1) 增加磁盘2) 增加节点方案一:扩大虚拟磁盘扩大容量将虚拟的Linux关闭,扩大磁盘容量 将空间增大20G 建立分区增加空间后Linux并不会识别出新增加的磁盘空间需要为这块新增的空间建... 阅读全文

posted @ 2017-11-19 16:47 杨先森的博客 阅读(30948) 评论(0) 推荐(0) 编辑

js 的基础知识

摘要: 一、弱类型意识js变量是没有类型的var a = 1; //a 就是一个变量 不要提什么类型变量可以赋任何类型的值类型仅仅是值的性质 与变量无关Js的基本类型变量未赋值时,其值为undefined只有一个number类型表示数字 不区分整数还是小数 二、动态语言动态语言针对的不是变量 而是值 尤... 阅读全文

posted @ 2017-11-19 16:47 杨先森的博客 阅读(140) 评论(0) 推荐(0) 编辑

响应式按钮 整合第三方插件 日期时间类型和函数...

摘要: 一、Bootstrap 响应式按钮表现结果:手机上全宽 桌面上2列宽原理;btn-block 会将按钮变成全宽但是在桌面上col-sm-2会失效 按钮被设置在2列宽在手机上 col-sm-2失效(手机的尺寸是xs) 二、在自己的项目中整合第三方插件或功能1.找到所有的依赖项(css 、js、jar、... 阅读全文

posted @ 2017-11-19 16:47 杨先森的博客 阅读(604) 评论(0) 推荐(0) 编辑

源代码的管理与在eclipse中使用maven进行代码测试

摘要: 管理源代码的工具开发历史记录SVN :集中式的源代码管理工具 通常必须连到公司的服务器上才能正常工作(提交代码,查看代码的历史记录 查看代码的分支)在公司中开发项目时 每天必须至少提交(Commit)一次代码。第二天上班时 写代码之前先获取最新(update)的源代码如果出差到外地 则无法直接从公... 阅读全文

posted @ 2017-11-19 16:47 杨先森的博客 阅读(1057) 评论(0) 推荐(0) 编辑

HTML/css之弹性布局

摘要: 1.flex 弹性布局 产生的比较晚 目前在移动网页开发中可以使用而且逐渐成为主流。 在桌面网页开发中,使用的比较少 (主要是桌面浏览器的兼容性问题更加严重) 开启方法: 在容器标签上,加上display:flex; 将对容器内部的标签起到布局作用 开启弹性布局后,内部的标签将会失去行块性... 阅读全文

posted @ 2017-11-19 16:47 杨先森的博客 阅读(354) 评论(0) 推荐(0) 编辑

java 新手入门课程03

摘要: 2017.7.6 java 课堂笔记1.关于分支;if/else 是基于boolean值的双分支Switch 基于数字(包括整数 char byte 枚举, 字符串)类型的多分支 方法 method 方法就是一个子程序Java中方法的命名规范 是驼峰命名法 Int add(int a,int ... 阅读全文

posted @ 2017-11-19 16:47 杨先森的博客 阅读(235) 评论(0) 推荐(0) 编辑

大数据组件服务的启动与关闭命令

摘要: 本文主要整理了大数据组件服务的启动与关闭命令,主要包括Hadoop,Spark,HBase,Hive,Zookeeper,Storm,Kafka,Flume,Solr,ElasticSearch。 1、Hadoop集群(1)启动方式切换到主节点的hadoop安装目录下的sbin目录下a)/start... 阅读全文

posted @ 2017-11-19 15:56 杨先森的博客 阅读(873) 评论(0) 推荐(0) 编辑

IT求职部分网站汇总

摘要: 哪合伙:http://nahehuo.com/过来人:http://www.guolairen.com/智联:www.zhaopin.com前程:www.51job.com中华英才:www.chinahr.com58:www.58.com赶集:www.ganji.com拉勾:www.lagou.co... 阅读全文

posted @ 2017-11-19 15:56 杨先森的博客 阅读(113) 评论(0) 推荐(0) 编辑

Flum入门必备知识

摘要: 1.flume概念flume是分布式的,可靠的,高可用的,用于对不同来源的大量的日志数据进行有效收集、聚集和移动,并以集中式的数据存储的系统。flume目前是apache的一个顶级项目。flume需要java运行环境,要求java1.6以上,推荐java1.7.将下载好的flume安装包解压到指定目... 阅读全文

posted @ 2017-11-19 15:56 杨先森的博客 阅读(1502) 评论(0) 推荐(0) 编辑

安装MySQL与安装Hive

摘要: 安装mysql检查是否安装mysql:rpm -qa |grep mysql删除已经安装的mysql:rpm -e mysql-libs-5.1.71-1.el6.x86_64报错:因为mysql有相关依赖,并不能直接删除 rpm -e --nodeps mysql-libs-5.1.71-1.el... 阅读全文

posted @ 2017-11-19 15:56 杨先森的博客 阅读(1101) 评论(0) 推荐(0) 编辑

Hive优化

摘要: 在一些特定的业务场景下,使用hive默认的配置对数据进行分析,虽然默认的配置能够实现业务需求,但是分析效率可能会很低。Hive有针对性地对不同的查询进行了优化。在Hive里可以通过修改配置的方式进行优化。 以下,几种方式调优的属性。 1、列裁剪 在通过Hive读取数据的时候,并不是所有的需求都... 阅读全文

posted @ 2017-11-19 15:56 杨先森的博客 阅读(518) 评论(0) 推荐(0) 编辑

Spring Boot干货:静态资源和拦截器处理

摘要: 前言本章我们来介绍下SpringBoot对静态资源的支持以及很重要的一个类WebMvcConfigurerAdapter。正文前面章节我们也有简单介绍过SpringBoot中对静态资源的默认支持,今天详细的来介绍下默认的支持,以及自定义扩展如何实现。默认资源映射Spring Boot 默认为我们提供... 阅读全文

posted @ 2017-11-19 15:56 杨先森的博客 阅读(27003) 评论(0) 推荐(3) 编辑

Intellij IDEA快捷键与使用技巧一览表

摘要: Intellij IDEA快捷键Ctrl+Shift + Enter,语句完成“!”,否定完成,输入表达式时按 “!”键Ctrl+E,最近的文件Ctrl+Shift+E,最近更改的文件Shift+Click,可以关闭文件Ctrl+[ OR ],可以跑到大括号的开头与结尾Ctrl+F12,可以显示当前... 阅读全文

posted @ 2017-11-19 15:56 杨先森的博客 阅读(1495) 评论(1) 推荐(1) 编辑

Spring-Boot整合freemarker引入静态资源css、js等

摘要: 一、概述springboot 默认静态资源访问的路径为:/static 或 /public 或 /resources 或 /META-INF/resources 这样的地址都必须定义在src/main/resources目录文件中,这样可以达到在项目启动时候可以自动加载为项目静态地址目录到class... 阅读全文

posted @ 2017-11-19 15:56 杨先森的博客 阅读(10536) 评论(0) 推荐(1) 编辑

Hadoop中正确地添加和移除节点

摘要: 正确地添加和移除节点添加节点克隆克隆一台全新的Linux(如有IP冲突,可右击VMware右下角网络图标断开连接)打开/etc/hostname修改主机名打开/etc/sysconfig/network-script/ifcfg-ens33修改IP重启安装使用安装包+hadoop-install.s... 阅读全文

posted @ 2017-11-19 15:56 杨先森的博客 阅读(3327) 评论(0) 推荐(0) 编辑

导航