大数据测试之日志分析2

由于还不会使用mangoDB，因此，先使用mysql。

将清洗后的数据导入hive:

建表

将本地文件上传

查看

将hive中表结构导出至mysql

数据库中建表

建表语句:

create table result1(ip VARCHAR(255),
    date1 VARCHAR(255),
    day VARCHAR(255),
    traffic VARCHAR(255),
    type VARCHAR(255),
    id VARCHAR(255));
    ROW format delimited fields terminated by ',' STORED AS TEXTFILE;

导出

bin/sqoop export \
--connect jdbc:mysql://node01:3306/mongotest \
--username root \
--password 20194023 \
--table result1 \
--num-mappers 1 \
--export-dir /user/hive/warehouse/result1 \
--input-fields-terminated-by ","