12 2018 档案
摘要:package com.gylhaut.picture;import java.io.*;import java.net.MalformedURLException;import java.net.URL;public class PictureDownload { public static vo
阅读全文
摘要:DROP TABLE IF EXISTS `table_name`; CREATE TABLE `table_name` ( `id` bigint(20) UNSIGNED NOT NULL AUTO_INCREMENT , `datadate` datetime NOT NULL COMMENT '日期', `already` int NOT NULL COMMENT '三更',...
阅读全文
摘要:#!/usr/bin/env python # -*- coding: utf-8 -*- # @Time : 2018/12/27 9:52 # @Author : gylhaut # @Site : "http://www.cnblogs.com/gylhaut/" # @File : generate_table_struct.py # @Software: PyCha...
阅读全文
摘要:# -*- coding: utf-8 -*-import re"""建立相关表的字段从源表创建指定的MySQL建表脚本"""# 目标表名称 lzb_decoration_houseinfotable_name = 'lzb_decoration_audit'# 原表名称original_table_name="DecorationAudit"print("#DROP TABLE IF EXIS...
阅读全文
摘要:1.首先安装NTP [root@hadoop102 桌面]# vi /etc/ntp.conf修改内容如下a) 修改 1#restrict 192.168.1.0 mask 255.255.255.0 nomodify notrap 为restrict 192.168.1.0 mask 255.25
阅读全文
摘要:package com.gylhaut.hadoop.senior.mapreduce; import java.io.IOException; import java.util.StringTokenizer; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.Path; import org....
阅读全文
摘要:hadoop2.x学习笔记 df -hl 查看磁盘剩余空间 hdfs 数据默认存储路径 data/tmp/dfs data/ └── tmp ├── dfs │ ├── data │ ├── name │ └── namesecondary 文件切分成块(默认为128M) 默认块的副本数是3 bin
阅读全文
摘要:Hadoop 2.x * common * HDFS 存储数据 NameNode 主从结构 * 存储文件系统的元数据,命名空间namespace DataNode * 存储数据 SecondaryNameNode * 辅助NameNode工作,合并两个文件(定时周期性) * YRAN Hadoop 操作系统 Data 操作系统 Con...
阅读全文