摘要:
sudo vim .bash_profileadd : export PATH=/usr/local/bin:$PATHsave : source .bash_profile to make change work。 /usr/bin/ruby -e "$(curl -fsSL https://ra 阅读全文
摘要:
下载 :restclient.jar 启动命令 : java -jar restclient.jar 界面如图所示: 阅读全文
摘要:
在Linux文件系统中,我们可以使用下面的Shell脚本判断某个文件是否存在:# 这里的-f参数判断$file是否存在 if [ ! -f "$file" ]; thenecho "文件不存在!"fi但是我们想判断HDFS上某个文件是否存在咋办呢?别急,Hadoop内置提供了判断某个文件是否存在的命 阅读全文
摘要:
#!/bin/bash #sourceFolder = /home/bigdatagfts/pl62716/refdata #targetFolder = /home/bigdatagfts/pl62716/refdata_target sourceFolder=$1 targetFolder=$2 if [ $# != 2 ] ; then echo "USAGE: $0 s... 阅读全文
摘要:
<property name="net.sf.jasperreports.export.xls.sheet.tab.color" value="#00FF00"/> 阅读全文
摘要:
hive-site.xml # vi hive-site.xml <configuration> <property> <name>javax.jdo.option.ConnectionURL</name> <value>jdbc:mysql://sd-9c1f-2eac:3306/hive?cre 阅读全文
摘要:
[Dev root @ sd-9c1f-2eac /usr/local/src/apache-hive-2.1.1-bin/scripts/metastore/upgrade/mysql]# ls001-HIVE-972.mysql.sql 027-HIVE-12819.mysql.sql hive 阅读全文
摘要:
# cd $HIVE_HOME/scripts/metastore/upgrade/mysql [Dev root @ sd-9c1f-2eac /usr/local/src/apache-hive-2.1.1-bin/scripts/metastore/upgrade/mysql]# ls001- 阅读全文
摘要:
以下异常说明mysql已经启动。 应先关掉先前启动的mysql.再执行初始化schema操作。 $service mysql stop; # $HIVE_HOME/bin/schematool -dbType mysql -initSchemawhich: no hbase in (/usr/lib 阅读全文
摘要:
解决方案汇总: 错误及操作详情: 1 启动hive报错 # hive which: no hbase in (/usr/lib64/qt-3.3/bin:/usr/local/sbin:/bin:/usr/bin:/sbin:/usr/sbin:/usr/local/bin:/usr/X11R6/b 阅读全文
摘要:
prepare CSV data create CSV file scala test code spark test 阅读全文
摘要:
prepare csv: scala code: spark submit: 阅读全文
摘要:
code: spark submit: 阅读全文
摘要:
通常我们可以用Eclipse作为Hadoop程序的开发平台。 1) 下载Eclipse 下载地址:http://www.eclipse.org/downloads/ 根据操作系统类型,选择合适的版本下载并安装。 2) 下载并编译Hadoop的Eclipse插件 网上可直接下载到Hadoop 1.x 阅读全文
摘要:
error: Caused by: javax.jdo.JDOFatalDataStoreException: Unable to open a test connection to the given database. JDBC url = jdbc:mysql://sd-9c1f-2eac:3 阅读全文
摘要:
//prepare csv //Processing and inserting data in hive without schema //permission issues as user hive // org.apache.hadoop.hive.ql.metadata.HiveExcept 阅读全文
摘要:
1 环境 hadoop2.7.3 apache-hive-2.1.1-bin spark-2.1.0-bin-hadoop2.6 jdk1.8 2 配置文件 在hive-site.xml中配置mysql数据库连接。 cp apache-hive-2.1.1-bin/conf/hive-site.xm 阅读全文
摘要:
1 create csv file.student.csv 2 put it to hdfs. 3 create table in hive. 4 load hdfs file to hive. 5 verify. 阅读全文
摘要:
C:\pl62716\LibRepostity true --> false --> com.your.plugins --> optional true http webproxy.ssmb.com ... 阅读全文