摘要:
目录: 第一步:准备相关材料 第二步:虚拟机环境搭建 第三步:用户信息 第四步 安装、配置Java环境 第五步 Zookeeper安装配置 第六步 Hadoop安装、配置 第七步:HBase安装部署 第八步:Sqoop安装部署(sqoop1) 第九步:Hive安装部署 第二步:虚拟机环境搭建 第三步 阅读全文
摘要:
ambari版本 :2.4.2 (不过各版本安装过程没啥差异) 目录: 为什么要用Ambari Ambari 是 Apache Software Foundation 中的一个顶级项目。就 Ambari 的作用来说,就是创建、管理、监视 Hadoop 的整个生态圈产品(例如 Hive,Hbase,S 阅读全文
摘要:
Coercing to be of type string. This may not even be a scalar type in actuality 阅读全文
摘要:
做SAP开发,感觉最难的莫过于前期的环境了,也就是说让程序能跑起来。。 最重要的有三个文件(较新版本,jco lib版本721.800) 下载libsapjco3.so、sapjco3.dll、sapjco3.jar sapjco3.jar是sap通用类库,sapjco3.dll和libsapjco 阅读全文
摘要:
1.优点 1.1 快! 主节点生成执行计划树并分发执行计划至各节点并行执行的拉式获取数据(MR:推式获取数据) 计算的中间结果不写入磁盘 1.2 便利 提供SQL语义,可以方便的进行复杂的数据分析任务 2.缺点 2.1 啃内存 对于内存的依赖过于严重,内存溢出直接导致技术任务的失败 2.2 SQL支 阅读全文
摘要:
1.重新分片 当出现Unassigned分片时,我们可以通过分片重分配解决这个问题 2.重新设定副本数量 ES可以随时变更副本数量,例如在初期向ES中导入数据的时候,设定副本数为0,导入结束后再提升副本数,可大大提升导入效率 3.资源占用情况 ES内存那点事 阅读全文
摘要:
Elasticsearch版本:6.3.2 Kibana版本:6.3.2 1.es安装 按照官方提示操作即可。 通过yum安装或者下载tar包解压。 安装完成之后,需要修改一些配置 ①修改文件 /etc/sysctl.conf 执行命令: 这一步可以解决问题:max virtual memory a 阅读全文
摘要:
lombok提供@Data、@Slf4j等注解,通过这些注解可以提供实体类的getter、setter,service的log(即不需要单独声明log就可以直接使用log对象)等 安装过程: 阅读全文
摘要:
工欲善其事必先利其器 首先给服务器配上强力的软件,用于安全防护和监控。 公司服务器用的阿里云的ECS,已经有防护和监控了,之后又选择额外加了一个安全狗 为了监控服务器上系统的各项运行指标,又买了听云平台的听云Server服务。 1.队列长度 网站对应的应用程序池->高级设置->常规 即可进入队列的最 阅读全文
摘要:
结合Autowired和Service注解 如果要在构造函数中就需要访问注入的变量,那么Autowired的位置就要放到构造函数上 自定义注入的扫描范围 要注意Springboot扫描包的时候默认是从启动类(一般是Application)目录开始往下扫描,也就意味着如果Bean不在Applicati 阅读全文
摘要:
使用Eclipse的时候发现有些格式的文件会乱码单个文件设置了没问题,但是在项目上设置却不起作用。 解决方法如下:Windows -> Preferences -> General -> Content Types 在右侧视图中选择乱码的文件类型,例如 Text->Java Source File, 阅读全文
摘要:
引自 https://blog.csdn.net/georgeshaw1/article/details/74943089 阅读全文