07 2019 档案
摘要：一 修改settings里面的配置文件 二 报错 百度之后发现 找到对应项目的 django\db\backends\mysql\base.py文件 注释 启动后又报错 django.db.utils.InternalError: (1049, "Unknown database 'mysite2'
阅读全文
摘要：在CDH 6.1.0 上增加主机 一 客户端配置 1.1 JAVA 配置 1.2 关闭selinux以及防火墙 1.3 将服务端的agent包打包然后拷贝到客户端 然后解压 启动（也可以rpm安装） 二 服务器端配置 如上图 如果正常那么上图会有已管理的主机的列表 如果没有 检查客户端 看报错 te
阅读全文
摘要：nginx 文件服务配置，MIME和 default_type https://blog.csdn.net/qq_26711103/article/details/81116900 nginx 静态页面 wet http://dlib.net/files/dlib 19.17.tar.bz2 将加载
阅读全文
摘要：nginx 日志格式 log_format 有个默认的日志格式： log_format combined '$remote_addr $remote_user [$time_local]' ' "$request" $status $body_bytes_sent ' ' "$http_refere
阅读全文
摘要：nginx 学习笔记 nginx 安装 登陆 "nginx官网" 可以看到官网一般会维护两个版本一个是文档版本（偶数）,一个是测试不稳定版(基数) 下载稳定版nginx 解压进入nginx目录 目录结构 ├── auto ├── CHANGES ├── CHANGES.ru ├── conf ├──
阅读全文
摘要：两个hadoop集群之间同步数据 实例为dws的 store_wt_d表 一 文件拷贝 hadoop distcp -update -skipcrccheck hdfs://10.8.31.14:8020/user/hive/warehouse/dws.db/store_wt_d/ hdfs://1
阅读全文
摘要：安装插件 重启grafna 到grafna页面上配置数据源 这里的url需要注意 4.X和3.X不一样 出现zabbix版本 即配置成功
阅读全文
摘要：早上看CDH发现有一个nodemanager挂掉 然后查看对应的日志。 发现在日志里面并没有错误。，然然后发现服务器的磁盘满了，赶紧清理磁盘空间 清理磁盘的时候发现主要是/tmp目录下面生成了很多 类似这种的日志。 清理完空间之后 重启nodemanager。发现还是启不来 到这里之后发现就停住了。
阅读全文
摘要：https://www.ibm.com/developerworks/cn/opensource/os-cn-hadoop-name-node/index.html namenode选举（Journalnode zkfc） https://matt33.com/2018/09/01/yarn-arc
阅读全文
摘要：– dfs.name.dir – NameNode 元数据存放位置 – 默认值：使用core-site.xml中的hadoop.tmp.dir/dfs/name – dfs.block.size – 对于新文件切分的大小，单位byte。默认是64M,建议是128M。每一个节点都要指定，包括客户端。
阅读全文
摘要：HDFS是以NameNode和DataNode管理者和工作者模式运行的。 NameNode管理着整个HDFS文件系统的元数据。从架构设计上看，元数据大致分成两个层次：Namespace管理层，负责管理文件系统中的树状目录结构以及文件与数据块的映射关系；块管理层，负责管理文件系统中文件的物理块与实际存
阅读全文