摘要:
很明显应该是HADOOP_HOME的问题。如果HADOOP_HOME为空,必然fullExeName为null\bin\winutils.exe。解决方法很简单,配置环境变量,不想重启电脑可以在程序里加上: 1 System.setProperty("hadoop.home.dir", "E:\\P 阅读全文
摘要:
我在启动Flume对hdfs写入时报如下错误: 该错误不但对于Flume,对于Hbase,Spark等需要对hdfs读写的都有可能报错.首先需要检查lib包中是否包含如下文件.commons-configuration-1.6.jar、hadoop-auth-2.7.2.jar、hadoop-com 阅读全文
摘要:
一.理论 FIFO:先进先出调度算法 LRU:最近最久未使用调度算法 两者都是缓存调度算法,经常用作内存的页面置换算法。 打一个比方,帮助你理解。你有很多的书,比如说10000本。由于你的书实在太多了,你只能放在地下室里面。你看书的时候不会在地下室看书,而是在书房看书。每次,你想看书都必须跑到地下室 阅读全文
摘要:
hadoop的集群先搞二台机器,一台管理机,一台node机,为什么呢。因为钱,机子也要钱。数据量是逐步增长起来的。如果一台node不能满足需求了,在增加node节点到集群。 在开始安装配置前,最好把该篇文章看上几遍,理顺了,在开始。特别是我踩过的坑。 一,服务器说明 查看复制打印? 10.0.0.2 阅读全文
摘要:
运行环境:在自己笔记本电脑(win10)上安装测试 操作系统版本:64位win10 Oracle版本:64位 oracle 11g 安装oracle 成功后//以管理员身份登录oracle 在cmd里输入命令 sqlplus / as sysdba 然后 报错 ERROR: ORA-01031 in 阅读全文
摘要:
最近,我在学习搭建hadoop集群,可是搭建完成后当使用start-all.sh启动hadoop的时候,会发现用jps测试的时候一切均显示正常,但通过Hadoop指令向hdfs上传输文件的时候,会报错表示datanode没有正常启动, 在网上找了一些博客讲述是可能防火墙没关,还有就是删除hadoop 阅读全文
摘要:
前几日在使用VMware虚拟机的时候,虚拟机突然出现了卡顿,然后就把电脑关机了重启,结果再次打开虚拟机的时候提示异常“以独占方式锁定此配置文件失败”,查阅网上的多种说法,是之前虚拟机未被正常关机,有进程仍然在后台运行占用了配置文件,导致再次开启机器时提示异常: 网友给出的解决方法1:通过任务管理器杀 阅读全文
摘要:
第一步:引入分页插件 <!--引入pageHelper分页插件 --> <dependency> <groupId>com.github.pagehelper</groupId> <artifactId>pagehelper</artifactId> <version>4.1.5</version> 阅读全文
摘要:
idea搭建简单ssm框架的最详细教程(新) idea搭建简单ssm框架的最详细教程(新) 为开发一个测试程序,特搭建一个简单的ssm框架,因为网上看到很多都是比较老旧的教程,很多包都不能用了,eclipes搭建并且其中还附带了很多的其他东西,所以特此记录一下mac中idea搭建过程。 另:平常开发 阅读全文
摘要:
前面几篇博客我们通过实例讲解了用mybatis对一张表进行的CRUD操作,但是我们发现写的 SQL 语句都比较简单,如果有比较复杂的业务,我们需要写复杂的 SQL 语句,往往需要拼接,而拼接 SQL ,稍微不注意,由于引号,空格等缺失可能都会导致错误。 那么怎么去解决这个问题呢?这就是本篇所讲的使用 阅读全文