随笔 - 31  文章 - 15 评论 - 8 阅读 - 97161
< 2025年4月 >
30 31 1 2 3 4 5
6 7 8 9 10 11 12
13 14 15 16 17 18 19
20 21 22 23 24 25 26
27 28 29 30 1 2 3
4 5 6 7 8 9 10

11 2015 档案
Hive安装(三)之奇怪的错误
摘要:启动hive命令报错 “Metastore contains multiple versions”解决方案:因为hivemetastore存储在mysql中,所以登录mysql,usehive所使用的DB,然后查询下VERSION表 1 mysql> select * from VERSION;... 阅读全文
posted @ 2015-11-29 21:39 成都笨笨 阅读(276) 评论(0) 推荐(0) 编辑
Hive安装(二)之表不见了
摘要:重启一下电脑,发现表不见了,原来我用的derby存储hive的meta,网上找了一下资料,说是要用mysql,于是安装mysql1 sudo apt-get install mysql-server 首先用root登陆给root用户赋予权限1 $mysql -u root -p hive2 my... 阅读全文
posted @ 2015-11-29 21:35 成都笨笨 阅读(502) 评论(0) 推荐(0) 编辑
Hive安装(一)之环境配置
摘要:HiveWebInterface(HWI)简介:Hive自带了一个Web-GUI,功能不多,可用于效果展示,如果没有安装Hue的话,是个不错的选择。由于hive-bin包中没有包含HWI的页面,只有Java代码编译好的jar包:hive-hwi-1.0.1.jar因此需要下载源码从中提取jsp文... 阅读全文
posted @ 2015-11-29 21:09 成都笨笨 阅读(489) 评论(0) 推荐(0) 编辑
Java锁(一)之内存模型
摘要:想要了解Java锁机制、引发的线程安全问题以及数据一致性问题,有必要了解内存模型,机理机制了解清楚了,这些问题也就应声而解了。一、主内存和工作内存 Java内存模型分为主内存和工作内存,所有的变量都存储在主内存中。每条线程还有自己的工作内存,线程的工作内存中保存了被该线程使用到变量的主内存副本... 阅读全文
posted @ 2015-11-28 14:03 成都笨笨 阅读(592) 评论(0) 推荐(0) 编辑
遗传算法(二)之组卷算法
摘要:组卷算法主要用于编制科学、公正的试卷的一种算法,具体大家可以百度看一下。我这篇文章主要是讲解如何通过遗传算法来实现组卷,遗传算法大家不清楚的地方仍然可以查看百度,不是这篇文章的重点。一、遗传算法的表示基本遗传算法(SGA)可以定义为一个8元数组:。其中:C:个体的编码,SGA种一般采用固定长度的... 阅读全文
posted @ 2015-11-28 12:08 成都笨笨 阅读(2613) 评论(0) 推荐(0) 编辑
Ubuntu 14 Trusty安装hue
摘要:想开始学习一下hive,需要一个使用起来方便的客户端,网上搜了一下发现hue是个很常用的工具。于是,就在自己的ubuntu14系统里,尝试安装hue。下面就是自己的安装步骤,记录如下:1、先查看自己的ubuntu的版本号2、安装git sudoapt-getinstallgit3、下载hue的... 阅读全文
posted @ 2015-11-28 01:19 成都笨笨 阅读(451) 评论(0) 推荐(0) 编辑
算法(三)粒子群算法之算法分类
摘要:粒子群算法主要分为4个大的分支:(1)标准粒子群算法的变形在这个分支中,主要是对标准粒子群算法的惯性因子、收敛因子(约束因子)、“认知”部分的c1,“社会”部分的c2进行变化与调节,希望获得好的效果。惯性因子的原始版本是保持不变的,后来有人提出随着算法迭代的进行,惯性因子需要逐渐减小的思想。算法开始... 阅读全文
posted @ 2015-11-26 20:54 成都笨笨 阅读(1246) 评论(0) 推荐(0) 编辑
算法(三)粒子群算法之局部粒子
摘要:在全局版的标准粒子群算法中,每个粒子的速度的更新是根据两个因素来变化的,这两个因素是:1.粒子自己历史最优值pi。2.粒子群体的全局最优值pg。如果改变粒子速度更新公式,让每个粒子的速度的更新根据以下两个因素更新,A.粒子自己历史最优值pi。B.粒子邻域内粒子的最优值pnk。其余保持跟全局版的标... 阅读全文
posted @ 2015-11-26 20:52 成都笨笨 阅读(2098) 评论(0) 推荐(0) 编辑
算法(三)粒子群算法PSO的介绍
摘要:一、引言在讲算法之前,先看两个例子:例子一:背包问题,一个书包,一堆物品,每个物品都有自己的价值和体积,装满书包,使得装的物品价值最大。例子二:投资问题,n个项目,第i个项目投资为ci收益为pi,总投资不得超过C,如何选择项目总收益最大。如前所述,PSO模拟鸟群的捕食行为。设想这样一个场景:一群鸟在... 阅读全文
posted @ 2015-11-26 20:16 成都笨笨 阅读(12172) 评论(0) 推荐(0) 编辑
算法(二)之遗传算法(SGA)
摘要:算法(二)之遗传算法(SGA)遗传算法(GeneticAlgorithm)又叫基因进化算法或进化算法,是模拟达尔文的遗传选择和自然淘汰的生物进化过程的计算模型,属于启发式搜索算法一种。下面通过下面例子的求解,来逐步认识遗传算法的操作过程。我参考了博客(http://blog.csdn.net/b2b... 阅读全文
posted @ 2015-11-25 22:04 成都笨笨 阅读(2479) 评论(0) 推荐(0) 编辑
算法(一)之洗牌算法
摘要:洗牌算法是我们常见的随机问题,在玩游戏、随机排序时经常会碰到,一个最常用的地方就是组卷。它可以抽象成这样:M以内的所有自然数的随机顺序数组。package com.math;import java.util.Random;/** * @author summer * */public class... 阅读全文
posted @ 2015-11-24 22:39 成都笨笨 阅读(323) 评论(0) 推荐(0) 编辑
你真的说的清楚ArrayList和LinkedList的区别吗
摘要:参见java面试的程序员,十有八九会遇到ArrayList和LinkedList的区别?相信很多看到这个问题的人,都能回答个一二。但是,真正搞清楚的话,还得花费一番功夫。 下面我从4个方面来谈谈这个问题一、结构上的区别从UML图来看,我们很容易看出ArrayList和LinkedLIst最大区别是... 阅读全文
posted @ 2015-11-24 21:09 成都笨笨 阅读(1060) 评论(3) 推荐(1) 编辑
Solr5.0源码分析-SolrDispatchFilter
摘要:年初,公司开发法律行业的搜索引擎。当时,我作为整个系统的核心成员,选择solr,并在solr根据我们的要求做了相应的二次开发。但是,对solr的还没有进行认真仔细的研究。最近,事情比较清闲,翻翻solr的源码,加深对solr的认识。在博客园上看到Ryan的Solr4.8.0源码分析(http:... 阅读全文
posted @ 2015-11-24 19:31 成都笨笨 阅读(966) 评论(0) 推荐(1) 编辑
搜索引擎-一种提示词推荐算法
摘要:搜索引擎可以说目前所有互联网应用里技术含量最高的一种。尽管应用形式比较简单:用户输入查询词,搜索引擎返回搜索结果。但是,搜索引擎需要达到的目标:更全、更快、更准。如何让搜索结果更准确始终是搜索引擎的一大难题。 公司最近在开发某行业的垂直搜索引擎,我作为该项目组的核心成员主要是负责核心算法的研... 阅读全文
posted @ 2015-11-23 17:17 成都笨笨 阅读(3123) 评论(1) 推荐(1) 编辑
我面试电商行业的经历-负载均衡
摘要:一、发发牢骚 转眼之间,在IT行业的道路上已经走过了8载,虽然每天没日没夜的辛苦的工作,辛苦的学习,加上年龄越大,学习越吃力,但是仍然跟不上新技术涌现的脚步,有种被技术抛弃的感觉,这是一个技术更新换代日新月异的时代。知识的积累很重要,从事了很久的编程,但是仔细想起来,没有那一项技术真正很透彻的了解... 阅读全文
posted @ 2015-11-23 11:14 成都笨笨 阅读(2252) 评论(0) 推荐(1) 编辑

点击右上角即可分享
微信分享提示