手握太阳

摘要： Hadoop自带HDFS，即 Hadoop Distributed FileSystem（不是HaDoop FileSystem 的简称） 适用范围 超大文件：最新的容量达到PB级 流式数据访问：HDFS的构建思路：一次写入、多次读取时最高效的访问模式 低时间延迟的数据访问不适用HDFS 大量的小文 阅读全文

摘要： 术语： job（作业）：客户端需要执行的一个工作单元，包括输入数据、MP程序、配置信息 Hadoop将job分成若干task（任务）来执行，其中包括两类任务：map任务、reduce任务。这些任务在集群的节点上，并通过YARN进行调度 Hadoop将MP输入数据划分成等长的小数据块，成为“输入分片（input split）。Hadoop为每个分片构建一个map任务 多余大多数作业来说，一个合理... 阅读全文

摘要： export HADOOP_CLASSPATH=hadoop-examples.jar hadoop MaxTemperature（类名） input/ncdc/sample.txt（参数一，输入文件路径，本地文件系统） output（参数二，输出文件路径，本地文件系统） 阅读全文

摘要： 有句话说的好“大数据胜于好算法” 硬盘存储容量在不断提升的同时，访问速度（硬盘数据读取速度）却没有同步增长；1990年，访问全盘需要5分钟，20年后，需要2.5小时 不同的业务大数据，存储在一套HDFS上，但常常分析工作是在不同时间点进行的，所以彼此之间干扰并不太大 MP每次查询数据需要处理整个数据集，看是采用了一种蛮力方法，但却反映了它的能力 MP更适合那种没有用户在现场等待查询结果的离线使... 阅读全文

摘要： 1、市场营销学定义的产品生命周期为：导入、成长、成熟、 衰退。这个已经不能概括产品生命周期的全过程。就像人的生命周期也绝对不会是从出生着地到死亡的过程。我们把这个四个阶段定义为：产品市场生命周期。 2、随着PLM软件的兴起，产品生命周期开始包含需求收集、概念确定、产品设计、产品上市和产品市场生命周期 阅读全文

摘要： 转：http://www.woshipm.com/operate/47940.html 简单来总结一下“需求”和“产品生命周期”之间的关系。 在产品生命周期的引入期，消费者出现的需求是“初级需求”； 在产品生命周期的成长期，消费者出现的需求是“选择性需求”； 在产品生命周期的成熟期，消费者出现的需求 阅读全文

摘要： Spring MVC 之 json格式的输入和输出 Spring定时器简单使用 Spring mvc 拦截器的简单使用 Spring MVC文件上传 阅读全文

摘要： 1、标准查询 query match _all query:"搜索字符串" operator:or 2、多匹配查询+区分权重 query multi_match "query":"搜索字符串" fields:["title^100","text^10","-all"] 针对字段进行加权 3、引入短语 阅读全文

摘要： 1、使用“建议”的方法：在query body的json结构体中，增加suggest节点；或者使用特殊的REST端点 2、es自带有多个不同的suggest实现，用来纠正用户的拼写错误及创建自动补全等功能 3、如果索引中文档较少，则可能找不到合适建议的结果 4、有三种那个suggester：term 阅读全文

摘要： 1、多节点监控 2、类似war功能部署，tomcat即可使用 3、免费 4、ElasticHQ supports all major version of Elasticsearch from version 2.x, 5.x, 6.x 阅读全文