随笔- 649
文章- 0
评论- 144
阅读-
851万
06 2017 档案
Hive的JDBC
摘要:Hive 的JDBC 包含例子 https://cwiki.apache.org/confluence/display/Hive/HiveClient#HiveClient-JDBC HiveServer2的JDBC 说明 https://cwiki.apache.org/confluence/di
阅读全文
Mac 安装md5sum等
摘要:一、安装md5sum 方案1、使用brew 安装 方案2、使用源码编译安装 源码下载地址:http://www.microbrew.org/tools/md5sha1sum/md5sha1sum-0.9.5.tar.gz # tar xvfz md5sha1sum-0.9.5.tar.gz # cd
阅读全文
Hive分区
摘要:1、查看分区 Hive> show partitions table_name; dt=20101101 dt=20101102 .... Time taken: 0.140 seconds, Fetched: 10 row(s) 2、 hive>desc tb partition(dt=20170
阅读全文
Git冲突:commit your changes or stash them before you can merge.
摘要:用git pull来更新代码的时候,遇到了下面的问题: 出现这个问题的原因是其他人修改了xxx.php并提交到版本库中去了,而你本地也修改了xxx.php,这时候你进行git pull操作就好出现冲突了,解决方法,在上面的提示中也说的很明确了。 1、保留本地的修改 的改法 1)直接commit本地的
阅读全文
Maven管理jar包依赖常出现的不能实例化类的问题
摘要:you'ji 在maven管理jar包依赖时,存在一种常见的问题。 pom.xml文件配置没问题,通过eclipse里中的maven dependencies查看,也确实有这个jar 包,或者这个类。但是在Java文件中却报 The org.** cannot be resolved . 这样的一般
阅读全文
HIVE json格式数据的处理
摘要:在hive 避免不了Jason格式的话,可以使用如下两个函数 HIVE直接读入json的函数有两个: (1)get_json_object(string json_string, string path) 返回值: string 说明:解析json的字符串json_string,返回path指定的内
阅读全文
Hadoop设置任务执行队列及优先级
摘要:Hive设置方法: SET mapreduce.job.queuename=root.up; SET mapreduce.job.priority=HIGH; set tez.queue.name=cmbi; 设置引擎 set hive.execution.engine=mr; set hive.e
阅读全文
mysql命令行各个参数解释
摘要:mysql命令行各个参数解释 http://blog.51yip.com/mysql/1056.html Usage: mysql [OPTIONS] [database] //命令方式 -?, --help //显示帮助信息并退出 -I, --help //显示帮助信息并退出 --auto-reh
阅读全文
推荐系统评测指标—准确率(Precision)、召回率(Recall)、F值(F-Measure)
摘要:下面简单列举几种常用的推荐系统评测指标: 1、准确率与召回率(Precision & Recall) 准确率和召回率是广泛用于信息检索和统计学分类领域的两个度量值,用来评价结果的质量。其中精度是检索出相关文档数与检索出的文档总数的比率,衡量的是检索系统的查准率;召回率是指检索出的相关文档数和文档库中
阅读全文
upsource初探
摘要:在JetBrains 的官网上,看到codereview的工具 upsource ,https://www.jetbrains.com/upsource/ 官方的英文文档 来看下博客园上有博主简单的中文介绍 upsource的来源 upsource是JetBrains公司在2014年推出的一款通过浏
阅读全文
程序员的工作、学习与绩效
摘要:博客园上看到了一篇关于程序员职业发展的一篇文章,很赞同和受教。转到这里来 工作中,碰到一些这样的例子,总有人提出疑问,为什么一个同事工作勤勉,完成了很多事情,季度绩效评定很高,但晋升却碰壁了。之前已经写过一篇《技术晋升的评定与博弈》,基本就能解答这个问题。但隐藏在背后的更深层次的本质却是:工作、学习
阅读全文
Homebrew 安装mysql
摘要:在mac上安装软件,无疑安装一个brew是个很好的选择,关于brew是什么,怎么安装建议去brew官网查看, 附上地址:brew官网 还有一篇博文 http://www.cnblogs.com/xd502djj/p/6923690.html 安装完成之后,安装其他的软件就很方便了。 先搜索下
阅读全文
大数据分析引擎Apache Flink
摘要:Apache Flink是一个高效、分布式、基于Java实现的通用大数据分析引擎,它具有分布式 MapReduce一类平台的高效性、灵活性和扩展性以及并行数据库查询优化方案,它支持批量和基于流的数据分析,且提供了基于Java和Scala的API。从Apache官方博客中得知,Flink已于近日升级成
阅读全文