摘要:
#!/usr/bin/env python # -*- coding: utf-8 -*- # @Time : 2018/12/27 9:52 # @Author : gylhaut # @Site : "http://www.cnblogs.com/gylhaut/" # @File : generate_table_struct.py # @Software: PyCha... 阅读全文
摘要:
# -*- coding: utf-8 -*-import re"""建立相关表的字段从源表创建指定的MySQL建表脚本"""# 目标表名称 lzb_decoration_houseinfotable_name = 'lzb_decoration_audit'# 原表名称original_table_name="DecorationAudit"print("#DROP TABLE IF EXIS... 阅读全文
摘要:
1.首先安装NTP [root@hadoop102 桌面]# vi /etc/ntp.conf修改内容如下a) 修改 1#restrict 192.168.1.0 mask 255.255.255.0 nomodify notrap 为restrict 192.168.1.0 mask 255.25 阅读全文
摘要:
package com.gylhaut.hadoop.senior.mapreduce; import java.io.IOException; import java.util.StringTokenizer; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.Path; import org.... 阅读全文
摘要:
hadoop2.x学习笔记 df -hl 查看磁盘剩余空间 hdfs 数据默认存储路径 data/tmp/dfs data/ └── tmp ├── dfs │ ├── data │ ├── name │ └── namesecondary 文件切分成块(默认为128M) 默认块的副本数是3 bin 阅读全文
摘要:
Hadoop 2.x * common * HDFS 存储数据 NameNode 主从结构 * 存储文件系统的元数据,命名空间namespace DataNode * 存储数据 SecondaryNameNode * 辅助NameNode工作,合并两个文件(定时周期性) * YRAN Hadoop 操作系统 Data 操作系统 Con... 阅读全文
摘要:
1.hadoop 环境搭建 https://www.cnblogs.com/Hootin-Pang/p/6328382.html 2.基础 (1)SQL 功底 (2)LInux 基础命令 (3)Java SE 3. Cloudera 阅读全文