会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
代号47
博客园
|
首页
|
新随笔
|
新文章
|
联系
|
订阅
|
管理
2018年11月1日
Hive中binary类型
摘要: Hive中Binary类型于0.8版本以上开始支持。对应Java中的byte[]类型,Java中写入和读取binary类型是通过Hadoop的封装类 BytesWritable来操作的。之前写Hive的自定义UDF时,需要对Binary类型的数据做反序列化,发现一直报方法类型不匹配,之前用的byte
阅读全文
posted @ 2018-11-01 10:16 Code47
阅读(6311)
评论(1)
推荐(1)
编辑
2017年8月31日
linux下安装ffmpeg
摘要: 1、官网下载 : http://ffmpeg.org/download.html 2、解压 .tar.bz2包 tar -jxvf xx.tar.bz2 3、因为官网只提供源码,所以需要进行编译 进入ffmpeg目录下 ./configure --enable-shared --disable-ya
阅读全文
posted @ 2017-08-31 11:46 Code47
阅读(910)
评论(0)
推荐(0)
编辑
2017年2月23日
HBase
摘要: 一、 1. HBase - Hadoop Database是一个高可靠性(数据存在HDFS上,HDFS本身高可靠;依赖zookeeper,服务不会停)、高性能(基于Row Key,大数据量情况下速度快)、面向列(一个个单元格)、可伸缩(集群动态扩展节点)、实时读写的分布式数据库。 2. 利用HDFS
阅读全文
posted @ 2017-02-23 18:42 Code47
阅读(113)
评论(0)
推荐(0)
编辑
2017年2月22日
hadoop
摘要: Hadoop:思想之源来自Google的三篇文章 GFS Map-Reduce Bigtable。 包括:分布式存储系统(HDFS)、分布式计算系统(MapReduce)。 HDFS: 一、优点: 1、高容错性 2、适合批处理 3、适合大数据 4、可构建在廉价机器上 二、缺点: 1、不适合低延时数据
阅读全文
posted @ 2017-02-22 18:26 Code47
阅读(86)
评论(0)
推荐(0)
编辑
Hive
摘要: 基于hadoop的一个数据仓库工具。 所谓数据仓库:是为企业所有级别的决策制定过程,提供所有类型数据支持的战略集合。它是单个数据存储,出于分析性报告和决策支持目的而创建。 为需要业务智能的企业,提供指导业务流程改进、监视时间、成本、质量以及控制。 用来做查询分析的数据库。基本不用做插入、修改、删除。
阅读全文
posted @ 2017-02-22 17:04 Code47
阅读(107)
评论(0)
推荐(0)
编辑
linux常用命令
摘要: 1、系统运行Java jar包: java -classpath *.jar +main函数类 2、chmod -R 777 file R向下递归 ; chmod -R a=rwx file a所有用户权限 g组权限 u用户权限 o不同组其他用户权限 读写操作权限都;chmod -R a+rwx f
阅读全文
posted @ 2017-02-22 15:10 Code47
阅读(103)
评论(0)
推荐(0)
编辑
2016年10月14日
ajax同源策略问题
摘要: ajax请求时,经常出现跨域问题,解决方案一: Tomcat-conf/web.xml添加Access-Control-Allow-Origin <filter> <filter-name>CorsFilter</filter-name> <filter-class>org.apache.catal
阅读全文
posted @ 2016-10-14 10:00 Code47
阅读(188)
评论(0)
推荐(0)
编辑
2016年10月13日
设计模式--代理模式
摘要: 代理模式由三部分组成:委托类,代理类,抽象类。 委托类、代理类都实现了抽象类。 静态代理:点到点 首先,(ProxyTestDaoImpl 实现抽象类) (ProxyTestDaoProxyImpl 实现抽象类) 这样准备工作已完成,只需要委托类委托代理类实现具体方法。 动态代理:面到面 JDK P
阅读全文
posted @ 2016-10-13 15:56 Code47
阅读(130)
评论(0)
推荐(0)
编辑
公告