excel-util

摘要: import java.io.BufferedInputStream;import java.io.BufferedOutputStream;import java.io.File;import java.io.FileInputStream;import java.io.FileNotFoundE 阅读全文
posted @ 2019-01-14 15:32 风有衡 阅读(399) 评论(0) 推荐(0) 编辑

Util-工具类

摘要: import java.text.ParseException;import java.text.SimpleDateFormat;import java.util.Calendar;import java.util.Date;import org.apache.commons.lang3.Stri 阅读全文
posted @ 2019-01-14 15:29 风有衡 阅读(2263) 评论(0) 推荐(0) 编辑

redis页面展示

摘要: 实现效果如下: Java 代码部分 1:基础分页设置 2:controller 使用 JS部分 删除 阅读全文
posted @ 2019-01-14 15:12 风有衡 阅读(167) 评论(0) 推荐(0) 编辑

HSQL

摘要: Hive的数据存储 1、Hive中所有的数据都存储在 HDFS 中,没有专门的数据存储格式(可支持Text,SequenceFile,ParquetFile,RCFILE等) 2、只需要在创建表的时候告诉 Hive 数据中的列分隔符和行分隔符,Hive 就可以解析数据。 3、Hive 中包含以下数据 阅读全文
posted @ 2019-01-14 15:08 风有衡 阅读(3788) 评论(0) 推荐(0) 编辑

Hbase

摘要: 1:Hdfs分布式文件系统存的文件,文件存储。2:Hbase是存储的数据,海量数据存储,作用是缓存的数据,将缓存的数据满后写入到Hdfs中。3:hbase集群中的角色: (1)、一个或者多个主节点,Hmaster; (2)、多个从节点,HregionServer;4、hbase集群的配置是一主多从或 阅读全文
posted @ 2019-01-14 15:06 风有衡 阅读(151) 评论(0) 推荐(0) 编辑

悲观锁_乐观锁

摘要: 悲观锁和乐观锁使用场景乐观锁是在应用层加锁,而悲观锁是在数据库层加锁(for update)乐观锁顾名思义就是在操作时很乐观,这数据只有我在用,我先尽管用,最后发现不行时就回滚。悲观锁在操作时很悲观,生怕数据被其他人更新掉,我就先将其先锁住,让别人用不了,我操作完成后再释放掉。悲观锁需要数据库级别上 阅读全文
posted @ 2019-01-14 15:04 风有衡 阅读(161) 评论(0) 推荐(0) 编辑

5大视频网站数据分析mapreduce

摘要: 一、需求 自定义输入格式 完成统计任务 输出多个文件输入数据:5个网站的 每天电视剧的 播放量 收藏数 评论数 踩数 赞数输出数据:按网站类别 统计每个电视剧的每个指标的总量任务目标:自定义输入格式 完成统计任务 输出多个文件二、数据部分数据这里写图片描述三、思路第一步:定义一个电视剧热度数据的be 阅读全文
posted @ 2019-01-14 15:02 风有衡 阅读(511) 评论(0) 推荐(0) 编辑

sql优化

摘要: 总结如下几项:1、where条件过滤数据多的放在前面,减少产生的临时表的数据量2、在需要当条件的列上加索引,避免全表扫描,首先应考虑在 where 及 order by,不要判断=null或!=,<>,where 子句中使用 or ,in 和 not in 也要慎用,都会导致引擎放弃使用索引而进行全 阅读全文
posted @ 2019-01-14 15:00 风有衡 阅读(154) 评论(0) 推荐(0) 编辑

shell学习

摘要: shell练习准备工作 安装git 打开git bash 工具 / 新建仓库 git init新建一个文件 test.sh 运行./test.sh 或者/bin/sh test.shvi test.sh#!/bin/bashecho "Hello World !" Shell 变量your_name 阅读全文
posted @ 2019-01-14 14:59 风有衡 阅读(211) 评论(0) 推荐(0) 编辑

PGSQL下的常用函数

摘要: 1、COALESCE — 空值替换函数。ExportDocumenttaskMapper.xml.listBusiInfos4Export coalesce(cbi.valid_month, '999999') IntegrationPointConfigMapper.xml.getIntegrat 阅读全文
posted @ 2019-01-14 14:58 风有衡 阅读(4858) 评论(0) 推荐(0) 编辑