08 2021 档案

摘要:problems_hadoop 1 启动Hadoop集群sbin/start-dfs.sh,DataNode没有启动 RCA 多次格式化namenode导致的namenode与datanode之间的不一致(多次格式化,版本不一致) solution HADOOP_HOME=/develop/hado 阅读全文
posted @ 2021-08-26 12:41 mediocrep 阅读(100) 评论(0) 推荐(0) 编辑
摘要:1 relative skills 1.1 linux批量替换目录下所有文件中的某字符串 method1: 比如,要将目录/modules下面所有文件中的zhangsan都修改成lisi,这样做: sed -i "s/zhangsan/lisi/g" `grep zhangsan -rl /modu 阅读全文
posted @ 2021-08-26 12:38 mediocrep 阅读(47) 评论(0) 推荐(0) 编辑
摘要:1 虚拟机在桥接状态下无法ping通局域网其他主机,无法ping通外网 desc: 发现虚拟机在桥接状态下无法ping通局域网其他主机,无法ping通外网 action: 移除hyper-v,在Control Panel\Programs\Programs and Features\ 中,点击tur 阅读全文
posted @ 2021-08-26 12:35 mediocrep 阅读(33) 评论(0) 推荐(0) 编辑
摘要:1 sftp command: Put file to server or Get File to local By DropZone You can ssh to the server or open git at local, then using sftp command as the bel 阅读全文
posted @ 2021-08-26 12:32 mediocrep 阅读(32) 评论(0) 推荐(0) 编辑
摘要:1 sql语句无法执行 Desc: 连接的是人大金仓的数据库,执行时报错。 error log: 2021-03-22 14:54:03.283 ERROR 8556 [nio-7779-exec-1] o.h.engine.jdbc.spi.SqlExceptionHelper : ERROR: 阅读全文
posted @ 2021-08-26 12:29 mediocrep 阅读(285) 评论(0) 推荐(0) 编辑
摘要:1 在config中设置mapping 1.1 1.2 cloud1是自己服务器的名字,@后面就可以随便写 1.3 配置ssh configration和root path,root path 是服务器的上面最开始的文件地址,就像电脑的E盘 1.4 mappings local path:是本地项目 阅读全文
posted @ 2021-08-26 12:26 mediocrep 阅读(642) 评论(0) 推荐(0) 编辑
摘要:method 1 # change /etc/docker/daemon.json (but found it is invalid) # old: { "registry-mirrors": ["https://1riogb3e.mirror.aliyuncs.com"], "insecure-r 阅读全文
posted @ 2021-08-26 12:23 mediocrep 阅读(841) 评论(0) 推荐(0) 编辑
摘要:1 Pig运行脚本语法 1.1 mapreduce模式 pig -x mapreduce -param default_parallel=1 -param rollupreg_extract_jar=hdfs://hdfsenv/tmp/wzhang12/sample-jar-with-depend 阅读全文
posted @ 2021-08-26 12:20 mediocrep 阅读(22) 评论(0) 推荐(0) 编辑
摘要:1 error1 Error log: Failed to parse: Pig script failed to parse: <file /x/home/pp_dt_cmpln_batch/test/CRR_rollupreg_extract.pig, line 20, column 46> F 阅读全文
posted @ 2021-08-26 12:17 mediocrep 阅读(70) 评论(0) 推荐(0) 编辑
摘要:skills_frontEnd 1 网页文件中引入另一个网页文件 在写页面的时候,有些东西是一样的,比如头部的导航或者尾部的标注。所以复用的东西可以写到一个文件中,之后再引入,angularjs或是jsp中都有很好的标签引入,而html没有,但是可以借助一些方式进行引入。 1.1 angularjs 阅读全文
posted @ 2021-08-26 12:14 mediocrep 阅读(53) 评论(0) 推荐(0) 编辑
摘要:1 notepad++正则表达式查找替换 参考链接1:https://www.cnblogs.com/tibit/p/6387199.html 参考链接2:http://www.pnotepad.org/docs/search/regular_expressions/ 2 3 阅读全文
posted @ 2021-08-26 12:11 mediocrep 阅读(30) 评论(0) 推荐(0) 编辑
摘要:1 思路 H2数据迁移到mysql,网上查找了一圈,没有现成的工具。 有几种方法,不过都可能出现各种bug,需要调试: H2导出为csv文件然后导入mysql. H2导出为sql文件然后导入mysql的过程 使用转换工具软件,比如Spectral Core(https://www.fullconve 阅读全文
posted @ 2021-08-26 12:08 mediocrep 阅读(4200) 评论(0) 推荐(0) 编辑
摘要:首先,说一下大方向,我是先新建一个maven的webapp项目,然后新建需要的文件夹,然后复制拷贝eclipse中需要的文件到idea中。 网上有直接导入项目的教程,类似截图中这样,大家如果想这么处理可以去搜索相关教程: 下面说一下步骤: 1 新建maven的webapp项目 打开File -- N 阅读全文
posted @ 2021-08-26 12:05 mediocrep 阅读(353) 评论(0) 推荐(0) 编辑
摘要:1 log4j配置文件 #output on console# #log4j.rootLogger = DEBUG,stdout log4j.rootLogger = info,stdout,dailyFile log4j.appender.stdout = org.apache.log4j.Con 阅读全文
posted @ 2021-08-26 12:02 mediocrep 阅读(45) 评论(0) 推荐(0) 编辑
摘要:1 Spring读取.properties文件的优点 当.properties文件中的内容变化时,不用重启系统,系统能立刻使用变化的数据。 eg. .properties文件中的fileSavePath=D:\\Develop\\files修改为fileSavePath=D:\\Develop\\f 阅读全文
posted @ 2021-08-26 11:59 mediocrep 阅读(35) 评论(0) 推荐(0) 编辑
摘要:1 session中的user对象失效后,页面一刷新,又会提交request中的username和userpwd,导致登录成功 该问题出现在2个场景中,一个是tomcat重启后,另一个是session失效后。并且,平时刷新页面,系统还会提示,是否需要重复提交表单。 解决步骤: Controller中 阅读全文
posted @ 2021-08-26 11:53 mediocrep 阅读(36) 评论(0) 推荐(0) 编辑
摘要:1 设置所有地方的编码为UTF-8 如图,进入Window -- Preferences,左侧搜索框中搜索encod,下方出现6个菜单,分别进入这6个菜单,设置里面的编码为UTF-8 2 全局替换(整个项目范围内替换) 按Ctrl + H进入搜索,点击File Search选项卡,填写要被替换掉的文 阅读全文
posted @ 2021-08-26 11:50 mediocrep 阅读(21) 评论(0) 推荐(0) 编辑
摘要:1 执行定时任务haloBak时报错 报错内容如下: 29-04-2020 20:34:57 CST haloBak INFO - ssh: connect to host asus port 22: Connection timed out 29-04-2020 20:34:57 CST halo 阅读全文
posted @ 2021-08-26 11:47 mediocrep 阅读(102) 评论(0) 推荐(0) 编辑
摘要:小结:防火墙的主机名和IP策略禁止桌面文件数据库的内核服务的启动加载。 桌面系统 [CentOS6] GNOME 2.x [CentOS7] GNOME 3.x(GNOME Shell) 文件系统 [CentOS6] ext4 [CentOS7] xfs 内核版本 [CentOS6] 2.6.x-x 阅读全文
posted @ 2021-08-26 11:44 mediocrep 阅读(73) 评论(0) 推荐(0) 编辑
摘要:dos命令行中运行包含java命令的bat脚本: @echo off rem echo current absolute path:%~dp0 rem echo current working directory1:%cd% rem echo JAVA_HOME: %JAVA_HOME% rem c 阅读全文
posted @ 2021-08-26 11:32 mediocrep 阅读(273) 评论(0) 推荐(0) 编辑
摘要:linux中循环批量下载文本文件中的超链接图片,然后在h2中通过sql语句批量更新图片链接地址 发现halo的文章中很多图片的超链接地址是这样的: <div class="content"><img src="https://doc-1256053707.cos.ap-beijing.myqclou 阅读全文
posted @ 2021-08-26 11:29 mediocrep 阅读(399) 评论(0) 推荐(0) 编辑
摘要:新建checkbox.js(代码如下),放到WebReport目录下,方便调用; 然后新建一些多选框,分别设置每个多选框的“初始化后”、“状态改变”事件,事件中引用该checkbox.js的init()、change()的方法。 /* finereport的js说明: 参数界面获取控件方法: var 阅读全文
posted @ 2021-08-26 11:26 mediocrep 阅读(1839) 评论(0) 推荐(0) 编辑
摘要:knowledge_others 1 KB,MB,GB,TB,PB,EB,ZB,YB,BB,NB,DB单位间换算 1B (byte 字节); 1KB(Kilobyte 千字节) = 210 B = 1024 B; 1MB(Megabyte 兆字节) = 210 KB = 1024 KB = 220 阅读全文
posted @ 2021-08-26 11:23 mediocrep 阅读(90) 评论(0) 推荐(0) 编辑
摘要:skills_kafka 1 offset记录位置 首先来说说消费者如果是根据java-api来消费,也就是kafka.javaapi.consumer.ConsumerConnector,通过配置参数zookeeper.connect来消费。这种情况下,消费者的offset会更新到zookeepe 阅读全文
posted @ 2021-08-26 11:20 mediocrep 阅读(39) 评论(0) 推荐(0) 编辑
摘要:skills_operation 1 iPhone5忘记密码 很久不用的一台iPhone5,由于工作原因要临时使用下,但是密码却忘记了。 网上查了下,要么有些破解工具是收费的,要么要恢复出厂设置,最终选择了恢复出厂设置。 步骤如下: 在电脑上安装iTunes软件,并确定电脑能上网。 将手机关机(电量 阅读全文
posted @ 2021-08-26 11:17 mediocrep 阅读(55) 评论(0) 推荐(0) 编辑
摘要:1 番茄todo熄屏时不提醒 原因:我还安装了“滴答清单”等其他app,造成冲突了。 解决方法:卸载滴答清单。 2 阅读全文
posted @ 2021-08-26 11:11 mediocrep 阅读(24) 评论(0) 推荐(0) 编辑
摘要:1 win7查内存条型号 首先,需要打开命令行模式,利用win+r键打开运行,输入cmd回车即会出现; 然后在命令行界面输入wmic进入命令行系统管理执行脚本界面; 可以通过命令memorychip进行查看内存型号。 2 win10配置ip&port转发 netsh interface portpr 阅读全文
posted @ 2021-08-26 11:08 mediocrep 阅读(46) 评论(0) 推荐(0) 编辑
摘要:背景:在CentOS7,CentOS8下 # 设置nginx的主页内容index.html,用于测试 cd /usr/local/nginx/html echo 'This is Master' > index.html curl http://localhost # 获取和安装keepalived 阅读全文
posted @ 2021-08-26 10:59 mediocrep 阅读(314) 评论(1) 推荐(0) 编辑
摘要:背景:在CenOS7.7下 1 编译、安装、测试 # 安装依赖包 yum -y install cyrus-sasl-devel # 编译安装libmemcached tar -zxvf libmemcached-1.0.18.tar.gz cd libmemcached-1.0.18 ./conf 阅读全文
posted @ 2021-08-26 10:56 mediocrep 阅读(470) 评论(0) 推荐(0) 编辑
摘要:背景:nfs服务器(172.17.0.16),nfs客户端都是docker容器 报错内容如下: mount 172.17.0.16:/share /data/share Job for rpc-statd.service failed because a timeout was exceeded. 阅读全文
posted @ 2021-08-26 10:50 mediocrep 阅读(1738) 评论(0) 推荐(0) 编辑
摘要:1 Ubuntu18.04 1.1 安装NFS 服务器端:sudo apt-get install -y nfs-kernel-server 服务器端:sudo apt-get install -y portmap(如果安装上一个,可以不用执行此操作) 客户端:sudo apt-get instal 阅读全文
posted @ 2021-08-26 10:47 mediocrep 阅读(324) 评论(0) 推荐(0) 编辑
摘要:在linux中常常用mount命令把硬盘分区或者光盘挂载到文件系统中。/etc/fstab就是在开机引导的时候自动挂载到linux的文件系统。 例如这是一个普通的/etc/fstab: /dev/device mountpoint type rules dump order # 数据项 <file 阅读全文
posted @ 2021-08-26 10:44 mediocrep 阅读(850) 评论(0) 推荐(0) 编辑
摘要:查看nginx错误日志: [root@node4 /]# tail -f /usr/local/nginx/logs/error.log 2020/02/15 23:25:22 [crit] 1664#0: *20 connect() to unix:/tmp/php-cgi.sock failed 阅读全文
posted @ 2021-08-26 10:41 mediocrep 阅读(298) 评论(0) 推荐(0) 编辑
摘要:安装步骤如下: [root@node3 /]# yum -y install gcc-c++ libxml2-devel curl-devel libjpeg-devel libpng-devel freetype-devel [root@node3 /]# cd /usr/apps/ [root@ 阅读全文
posted @ 2021-08-26 10:35 mediocrep 阅读(237) 评论(0) 推荐(0) 编辑
摘要:1 配置防火墙开放80端口的访问 Nginx提供HTTP访问所监听的是80端口。 1.1 centos6中的方法 # 方法一、设置防火墙对于来自外部访问的请求,如果是TCP协议和80端口,则接受访问 iptables -I INPUT -p tcp --dport 80 -j ACCEPT # 上述 阅读全文
posted @ 2021-08-26 10:29 mediocrep 阅读(51) 评论(0) 推荐(0) 编辑
摘要:1 ubuntu18.04.3中idea2018.3无法使用搜狗拼音输入法 方法一: 登录进去查看发现其所属用户和组都是root,于是尝试修改之: chown -R witt:witt /usr/develop/idea-IU-183.6156.11/ 然后重启idea,然后退出、并重启 fcitx 阅读全文
posted @ 2021-08-25 17:41 mediocrep 阅读(64) 评论(0) 推荐(0) 编辑
摘要:1 配置nginx编译选项./configure --prefix=/usr/local/nginx --with-http_ssl_module报错 报错内容:./configure: error: C compiler cc is not found 原因:未安装gcc gcc-c++ auto 阅读全文
posted @ 2021-08-25 17:36 mediocrep 阅读(59) 评论(0) 推荐(0) 编辑
摘要:# 进入工作目录 cd /usr/develop/halo/ # 第一步:创建Dockerfile文件 vim Dockerfile # halo v1.0 # 搭建halo:个人博客系统 # 1 获取一个镜像:centos:latest FROM centos:latest LABEL Descr 阅读全文
posted @ 2021-08-25 17:35 mediocrep 阅读(360) 评论(0) 推荐(0) 编辑
摘要:1 Docker概览 1.1 Docker 简介 什么是Docker Docker是开发,运行和部署应用程序的开放管理平台。 开发人员能利用docker 开发和运行应用程序 运维人员能利用docker 部署和管理应用程序 Docker平台介绍 (The Docker platform) Docker 阅读全文
posted @ 2021-08-25 17:33 mediocrep 阅读(107) 评论(0) 推荐(0) 编辑
摘要:1 启动容器报错 报错内容如下: root@asus:~# docker create -ti --name python centos:latest python root@asus:~# docker start -ai python Error response from daemon: OC 阅读全文
posted @ 2021-08-25 17:32 mediocrep 阅读(1620) 评论(0) 推荐(0) 编辑
摘要:problems_elk 1 java代码调用elasticSearch运行报错 报错内容如下: MapperParsingException[Root mapping definition has unsupported parameters: [properies : {id={type=int 阅读全文
posted @ 2021-08-25 17:31 mediocrep 阅读(133) 评论(0) 推荐(0) 编辑
摘要:目录 1、各类druid服务启动都报同一个错误: 错误如下: 2020-01-05T00:24:19,366 INFO [main] io.druid.guice.Exception in thread "main" io.druid.java.util.common.ISE: Extension 阅读全文
posted @ 2021-08-25 17:30 mediocrep 阅读(170) 评论(0) 推荐(0) 编辑
摘要:problems_operation 1 xftp连接远程主机报错“找不到匹配的outgoing encryption算法” RCA: 是ssh登录本地终端缓存了相关的安全确认信息,远端的ssh服务升级后,其对应的加密算法均作了升级、修改,而本地的缓存安全信息并无更新,导致无法正常登录。 solut 阅读全文
posted @ 2021-08-25 17:27 mediocrep 阅读(59) 评论(0) 推荐(0) 编辑
摘要:problems_hue 1 访问hue的web界面报错: 访问: cdh01:8888/ 报错:ProgrammingError: (1146, "Table 'hue.django_session' doesn't exist") 原因:mysql数据库没有被初始化。 解决方法:初始化数据库 c 阅读全文
posted @ 2021-08-25 17:18 mediocrep 阅读(266) 评论(0) 推荐(0) 编辑
摘要:1.集群上执行hbase和mr整合的代码报错: [root@cdh01 develop]# yarn jar original-hbase-1.0-SNAPSHOT.jar cn.study.hbasemr.HBaseMain 报错, 报错如下: Exception in thread "main" 阅读全文
posted @ 2021-08-25 17:15 mediocrep 阅读(49) 评论(0) 推荐(0) 编辑
摘要:1 idea中maven无法导入依赖 各种尝试都不行,最后无意间看到网上有人执行mvn clean install命令的。于是受到启发,执行clean和install命令,确实下载好了依赖,然后重启idea,所有依赖才能正常工作,如下图: 另外,还可以尝试注释掉某个依赖,再重新放开,右侧maven面 阅读全文
posted @ 2021-08-25 17:09 mediocrep 阅读(69) 评论(0) 推荐(0) 编辑
摘要:problems_flink 1 flink中使用kafka作为数据源报错 报错如下: [2019-12-12 21:28:24,224] ERROR Closing socket for 192.168.8.120:9092-192.168.8.1:50966 because of error ( 阅读全文
posted @ 2021-08-25 17:06 mediocrep 阅读(73) 评论(0) 推荐(0) 编辑
摘要:skills_ide 1 eclipse手动设置编译后class文件的路径 在JavaWeb项目中,class文件一般存放在WEB-INF/classes目录中,而eclipse默认生成的class文件不在这个目录中,这个时候就需要我们手动进行设置了,具体步骤如下 项目名称右键–>Build Pat 阅读全文
posted @ 2021-08-25 17:03 mediocrep 阅读(78) 评论(0) 推荐(0) 编辑
摘要:方法一 shell脚本如下: #!/bin/bash #日志文件路径 logPath=/var/log/yx.log echo -e "$(date +%Y%m%d" "%H:%M:%S): 清理程序开始执行!清理规则:A.文件大于100M,且存在时间超过5天;B.模型目录下的子目录存在时间超过30 阅读全文
posted @ 2021-08-25 17:00 mediocrep 阅读(1293) 评论(0) 推荐(0) 编辑
摘要:一、安装NppFTP插件: 方法一:打开notepad++,进入插件(Plugins) -- Plugins Admin,在Available选项卡下,搜索NppFTP,然后点击 Install 按钮: 然后程序会自动下载和安装。 方法二:如果方法一无法下载,则进行离线安装。 网上下载该插件到本地。 阅读全文
posted @ 2021-08-25 16:51 mediocrep 阅读(364) 评论(0) 推荐(0) 编辑
摘要:problems_git 1 idea中Terminal中git pull push需要反复输入密码 idea中的Terminal终端中, git push origin master git pull origin master 每次都需要输入github的账号密码。 解决方法: Terminal 阅读全文
posted @ 2021-08-25 16:33 mediocrep 阅读(45) 评论(0) 推荐(0) 编辑
摘要:knowledge_programming 1 软件开发的一个重要原则 单一职责原则: 每个功能放在单独的方法中。 优点:模块化开发,解耦合! 2 阅读全文
posted @ 2021-08-25 16:30 mediocrep 阅读(30) 评论(0) 推荐(0) 编辑
摘要:problems_impala 1 impala-shell中执行语句报错 impala-shell -i cdh02 create external table ... #执行该语句后报错,如下: ImpalaRuntimeException: Error making 'dropTable' R 阅读全文
posted @ 2021-08-25 16:27 mediocrep 阅读(120) 评论(0) 推荐(0) 编辑
摘要:skills_markdown 1 设置内部链接 或称为页内跳转链接,类似word中的书签。步骤如下: 1、设置内部链接: [链接名称](#书签名称1) 2、设置锚(点击后跳转到的页面位置):xxx {#书签名称1} 举例如下: 跳转到“一、安装ubuntu18.04.3操作系统”的位置 一、安装u 阅读全文
posted @ 2021-08-25 16:21 mediocrep 阅读(16) 评论(0) 推荐(0) 编辑
摘要:problems_markdown 1 halo系统中的换行问题 desc: 后台的markdonw在线编辑文章时,编辑好了发布后,前台页面上无法换行。 比如,下面一段文字: 二、定时备份文件:<br/> 需求:定期备份halo。<br/> 然后定期拷贝到移动硬盘中。 这一段文字,我必须在末尾加上< 阅读全文
posted @ 2021-08-25 16:15 mediocrep 阅读(44) 评论(0) 推荐(0) 编辑
摘要:skills_springboot 1 springboot实现热部署 spring为开发者提供了一个名为spring-boot-devtools的模块来使Spring Boot应用支持热部署,提高开发者的开发效率,无需手动重启Spring Boot应用。 devtools的原理: 深层原理是使用了 阅读全文
posted @ 2021-08-25 16:09 mediocrep 阅读(91) 评论(0) 推荐(0) 编辑
摘要:1.cat /etc/shells #查看系统中安装的 shell 2.eg1. #!/bin/bash echo "Hello World !" 3.Shell 脚本的执行: chmod +x ./hello.sh #使脚本具有执行权限 ./hello.sh #执行脚本 /bin/sh /root 阅读全文
posted @ 2021-08-25 16:00 mediocrep 阅读(50) 评论(0) 推荐(0) 编辑
摘要:skills_bd 1 大数据集群环境准备 集群所有主机关闭防火墙 集群所有主机关闭selinux 集群所有主机更改主机名 集群所有主机做主机名与IP地址的映射 集群所有主机重启 集群所有主机机器免密码登录 集群所有主机时钟同步 集群所有主机安装jdk 阅读全文
posted @ 2021-08-25 15:57 mediocrep 阅读(19) 评论(0) 推荐(0) 编辑
摘要:1 bin/hadoop checknative #检查是否支持本地库 HADOOP_HOME=/develop/hadoop-2.7.5 [root@node01 ~]# $HADOOP_HOME/bin/hadoop checknative 19/05/28 23:12:46 INFO bzip 阅读全文
posted @ 2021-08-25 15:51 mediocrep 阅读(35) 评论(0) 推荐(0) 编辑
摘要:1 工作流调度器azkaban 1.1 概述 azkaban官网:https://azkaban.github.io/ 1.1.1 为什么需要工作流调度系统 一个完整的数据分析系统通常都是由大量任务单元组成:shell脚本程序,java程序,mapreduce程序、hive脚本等 各任务单元之间存在 阅读全文
posted @ 2021-08-25 15:42 mediocrep 阅读(63) 评论(0) 推荐(0) 编辑
摘要:1 centos6.9下rpm方式安装mysql后mysql服务无法启动 以下两种方式启动都报错:启动失败: [root@node03 ~]# service mysqld start MySQL Daemon failed to start. Starting mysqld: [FAILED] [ 阅读全文
posted @ 2021-08-25 15:39 mediocrep 阅读(367) 评论(0) 推荐(0) 编辑
摘要:skills_mysql 1 CentOS 6.9 用rpm安装MySQL5.7 1.1 安装 # 清理系统自带的mysql版本 whereis mysql yum -y remove mysql-libs yum clean dbcache # 下载并安装 wget http://repo.mys 阅读全文
posted @ 2021-08-25 15:35 mediocrep 阅读(7) 评论(0) 推荐(0) 编辑
摘要:1 创建数据库并设置默认字符集编码、默认校对规则 create database mydb default character set utf8 default collate utf8_general_ci; create database testdb default character set 阅读全文
posted @ 2021-08-25 15:32 mediocrep 阅读(51) 评论(0) 推荐(0) 编辑
摘要:knowledge_impala 1 impala invalidate metadata和impala-shell -r作用相同 impala的invalidate metadata内部命令,是否和外部命令impala-shell -r的作用相同的? 答: 在invalidate metadata 阅读全文
posted @ 2021-08-25 15:14 mediocrep 阅读(27) 评论(0) 推荐(0) 编辑
摘要:1.变量或路径的英文字母写错,常常是大小写搞混,或者是字母顺序颠倒。 2.本地 oozie_works 工作目录下的文件,如job.properties,workflow.xml等,修改后,忘记上传到hdfs。 3.忘记启动hdfs、yarn、jobhistory、hive的metastore或hi 阅读全文
posted @ 2021-08-25 15:05 mediocrep 阅读(57) 评论(0) 推荐(0) 编辑
摘要:problems_kafka 1 启动kafka报错1 errorlog: kafka-console-consumer.sh --from-beginning --zookeeper node01:8121,node02:8121,node03:8121 --topic log_monitor U 阅读全文
posted @ 2021-08-25 14:50 mediocrep 阅读(300) 评论(0) 推荐(0) 编辑
摘要:problems_flume 1 kafka-console-consumer接收不到flume推送过来的消息 原因和解决方法:需要先启动kafka,再启动flume,两者启动有先后顺序。 2 flume启动报错 desc: 执行flume-ng agent -c conf -f conf/load 阅读全文
posted @ 2021-08-25 14:47 mediocrep 阅读(129) 评论(0) 推荐(0) 编辑
摘要:需求:kafka在zookeeper默认使用/为根目录,将/更换为/kafka 步骤:1、进入kafka的根目录: [root@node01 kafka_2.11-1.0.0]# cd /develop/kafka_2.11-1.0.0/ 2、3个节点都要:参照图1,编辑server.propert 阅读全文
posted @ 2021-08-25 14:44 mediocrep 阅读(1090) 评论(0) 推荐(0) 编辑
摘要:1 trait执行报错找不到或无法加载主类 cn.develop.scala.trait 报错内容如下: 错误: 找不到或无法加载主类 cn.develop.scala.trait.Children 原因:包名中包含了trait,与trait关键字重名了:package cn.develop.sca 阅读全文
posted @ 2021-08-25 14:32 mediocrep 阅读(36) 评论(0) 推荐(0) 编辑
摘要:skills_oracle 1 oracle的TO_CHAR()格式化数字为百分数的字符串 TO_CHAR(-0.926903249,'FM999999990.00') || '%' 说明: .(点号) eg. '99.99' 点号,不要念为"句号",句号是个圆圈,点号只能出现在小数点对应的地方.只 阅读全文
posted @ 2021-08-25 14:17 mediocrep 阅读(58) 评论(0) 推荐(0) 编辑
摘要:skills_scala 1 idea中scala项目补全变量、添加打印语句的小技巧 自动补全变量: new Person.var ,然后按回车键;效果:代码变成: val person: Person = new Person 添加打印语句: person.name.prln (也可以是prtln 阅读全文
posted @ 2021-08-25 14:14 mediocrep 阅读(34) 评论(0) 推荐(0) 编辑
摘要:spark脑图 阅读全文
posted @ 2021-08-25 14:06 mediocrep 阅读(89) 评论(0) 推荐(0) 编辑
摘要:1 执行sparksql报错 报错内容如下: org.apache.spark.sql.AnalysisException: Unable to generate an encoder for inner class cn.develop.spark.sql.Intro$Person without 阅读全文
posted @ 2021-08-24 01:39 mediocrep 阅读(46) 评论(0) 推荐(0) 编辑
摘要:spark整合hive后,hive启动报错: ls: cannot access /develop/spark/lib/spark-assembly-*.jar: No such file or directory 原因:spark版本升级到2.x以后,原有lib目录下的大JAR包被分散成多个小JA 阅读全文
posted @ 2021-08-24 01:38 mediocrep 阅读(257) 评论(0) 推荐(0) 编辑
摘要:problems_kudu 1 执行service kudu-master start , 提示启动失败failed 进入报错日志目录 (cd /var/log/kudu/),看到报错信息(vim kudu-master.ERROR 或 vim kudu-master.FATAL)如下: Log f 阅读全文
posted @ 2021-08-24 01:37 mediocrep 阅读(212) 评论(0) 推荐(0) 编辑
摘要:1 maven中的pom.xml中的scope的作用 pom.xml配置文件中,<dependency>中的<scope>,它主要管理依赖的生效范围。目前<scope>可以使用5个值: compile,缺省值,适用于所有阶段,会随着项目一起发布。 provided,类似compile,期望JDK、容 阅读全文
posted @ 2021-08-24 01:32 mediocrep 阅读(38) 评论(0) 推荐(0) 编辑
摘要:Springboot中的配置文件有application.yml,application.yaml,application.properties 1 相同点 1.1 位置问题 1.1.1 location proiroty 创建Spring Boot项目时,默认 resources 目录下就有一个a 阅读全文
posted @ 2021-08-24 01:32 mediocrep 阅读(570) 评论(0) 推荐(0) 编辑
摘要:problems_springboot 1 springboot无法查询到后台的数据 springbooot中,整合mybatis时,在IUserMapper接口中, @Select("select * from user where name like '%李%'") List<User> fin 阅读全文
posted @ 2021-08-24 01:32 mediocrep 阅读(1060) 评论(0) 推荐(0) 编辑
摘要:1 halo的工作目录被硬编码 halo的工作目录,有一个是在代码里配置的,硬编码了 在HaloProperties.java中: /** * Work directory. */ private String workDir = HaloConst.USER_HOME + "/halo-test/ 阅读全文
posted @ 2021-08-24 01:21 mediocrep 阅读(52) 评论(0) 推荐(0) 编辑
摘要:skills_java 1 HttpURLConnection和HTTPClient的比较 reference: https://blog.csdn.net/moshenglv/article/details/51834038 2 linux中,java代码中的路径问题 在linux中,java代码 阅读全文
posted @ 2021-08-18 11:49 mediocrep 阅读(41) 评论(0) 推荐(0) 编辑
摘要:problems_java 1 tomcat运行javaweb项目报错 erorlog: java.lang.UnsupportedClassVersionError: ... : Unsupported major.minor version 52.0 RCA: 使用高版本的JDK编译的Java 阅读全文
posted @ 2021-08-17 18:12 mediocrep 阅读(534) 评论(0) 推荐(0) 编辑
摘要:problems_centos 1 CentOS虚拟机断电或强制关机,再开机出现问题 errorlog: Entering emergency mode. Exit the shell to continue RCA: 找出问题出现在哪: 这里的 journalctl 是查看系统的日志信息;直接输入 阅读全文
posted @ 2021-08-16 21:32 mediocrep 阅读(212) 评论(0) 推荐(0) 编辑
摘要:knowledge_git 1 vc ⇒ version control 2 git clone -b dev remoteRepository git push -u -f origin dev git push git reset --hard e443f89e5f32ac6488dac02f3 阅读全文
posted @ 2021-08-16 02:49 mediocrep 阅读(32) 评论(0) 推荐(0) 编辑
摘要:problems_maven 1 pom.xml中删除了某个依赖,右侧maven栏里仍然有该依赖 desc: 并且有5个相同的依赖banboo-0.0.1.jar,其中2个依赖有红色下划波浪线,代表有错误。 RCA: 待定。 solution: 关闭该idea项目,删除工作空间根目录下的.idea文 阅读全文
posted @ 2021-08-16 02:45 mediocrep 阅读(735) 评论(0) 推荐(0) 编辑
摘要:skills_maven 1 如何引入本地jar包,并且maven打包时自动打包到系统运行jar/war包内 按照网上资料,试过下面截图中的方法,但是无法maven打包到jar/war包内: 后来发现可以这样:在pom.xml中引入如下依赖即可解决: <dependency> <groupId>co 阅读全文
posted @ 2021-08-16 02:43 mediocrep 阅读(142) 评论(0) 推荐(0) 编辑
摘要:skills_docker 1 Docker容器暴露多个端口方法 创建容器时指定 docker run -p [HOST_IP]:[HOST_PORT]:CONTAINER_PORT -p [HOST_IP]:[HOST_PORT]:CONTAINER_PORT 多写几个 -p参数即可。 修改Doc 阅读全文
posted @ 2021-08-16 02:33 mediocrep 阅读(149) 评论(0) 推荐(0) 编辑
摘要:problems_kingdeeAAS 1 运行报错 OpenJDK 64-Bit Server VM warning: ignoring option MaxPermSize=256m; support was removed in 8.0 javax.management.ServiceNotF 阅读全文
posted @ 2021-08-16 02:28 mediocrep 阅读(46) 评论(0) 推荐(0) 编辑
摘要:problems_linux 1 './hello.sh' failed desc: sh hello.sh , bash hello.sh succeeded, but './hello.sh' failed, RCA: because sh and bash has the executing 阅读全文
posted @ 2021-08-16 02:22 mediocrep 阅读(43) 评论(0) 推荐(0) 编辑
摘要:problems_office 1 mate20,安卓版坚果云markdown,无法加载本地图片? 试了一下,可以加载网络图片,另外,可以加载本地的绝对路径的图片,只是无法加载本地相对路径的图片。 本地的绝对路径类似于这样:/storage/0123-4567/.1neceInfo/study/bd 阅读全文
posted @ 2021-08-16 02:10 mediocrep 阅读(69) 评论(0) 推荐(0) 编辑
摘要:skills_office 1 mate20,微信内容存储路径 安卓版微信中的文件,点击手动下载后的默认存储路径: /Phone/Download/WeiXin/ 安卓版微信中的图片,点击手动下载后的默认存储路径: /Phone/Pictures/WeiXin/ 其中,/Phone/ 表示 手机内置 阅读全文
posted @ 2021-08-16 02:05 mediocrep 阅读(13) 评论(0) 推荐(0) 编辑
摘要:skills_idea 1 idea2021.1.3无限重置试用天数 下载 ide-eval-resetter-2.1.13.jar ,在我的百度网盘的 /app/ide/目录下。 reference: https://www.ghxi.com/ideapatch.html/comment-page 阅读全文
posted @ 2021-08-16 00:40 mediocrep 阅读(177) 评论(0) 推荐(0) 编辑
摘要:skills_git 1 git diff 1.1 命令输出结果详解 注意这个:@@ -1,7 +1,7 @@ "-1,7″分成三个部分:减号表示第一个文件(即f1),"1″表示第1行,“7″表示连续7行。 合在一起,就表示下面是第一个文件从第1行开始的连续7行。 同样的,”+1,7″表示变动后,成 阅读全文
posted @ 2021-08-16 00:37 mediocrep 阅读(51) 评论(0) 推荐(0) 编辑
摘要:(skills_redis) skills_redis 1 redis持久化策略种类和选择 如果需求对数据完整性要求不是很高,可以接受短时间数据丢失,RDB快照持久化方式是最好不过的选择; 如果对数据完整性要求比较严格,使用AOF日志形式进行持久化比较合适; 如果redis版本在4.0以上,可以使用 阅读全文
posted @ 2021-08-16 00:32 mediocrep 阅读(6) 评论(0) 推荐(0) 编辑
摘要:(problems_redis) problems_redis 1 启动哨兵模式报错 desc: 执行启动命令: redis-server sentinel.conf errorlog: *** FATAL CONFIG FILE ERROR *** Reading the configuratio 阅读全文
posted @ 2021-08-16 00:31 mediocrep 阅读(60) 评论(0) 推荐(0) 编辑
摘要:(skills_linux) skills_linux 1 differences between soft link and hard link 2 压缩、解压缩、加密压缩 2.1 tar 压缩 tar -cvf 解压缩 tar -xvf 因为-f 表示指定文件名称,所以后面一定跟一个文件名 eg 阅读全文
posted @ 2021-08-16 00:29 mediocrep 阅读(125) 评论(0) 推荐(0) 编辑
摘要:skills_ubuntu 1 ubuntu20.04 安装微信、qq、腾讯会议等(其他软件都可以安装) 使用winehq。尝试过,是个巨坑,能安装winehq本身,但是使用wine安装微信等软件时各种报错。另外,ubuntu上的wine,安装后也无法使用。果断弃用! 使用deepin-wine。发 阅读全文
posted @ 2021-08-16 00:23 mediocrep 阅读(188) 评论(0) 推荐(0) 编辑
摘要:(skills_centos) skills_centos 1 永久关闭蜂鸣器提示音(滴滴声,哔哔声)方法 执行:echo "rmmod pcspkr" >> /etc/rc.d/rc.local 授权:chmod +x /etc/rc.d/rc.local 但是有的电脑上会提示:rmmod: ER 阅读全文
posted @ 2021-08-16 00:16 mediocrep 阅读(585) 评论(0) 推荐(0) 编辑
摘要:(skills_hive) skills_hive 1 hive常用配置 <!-- 是否以本地模式启动,默认false --> <!-- 作用:hive查询时使用本地查询,不走集群,加快少量数据的查询速度 --> <!-- 临时开启 set hive.exec.mode.local.auto=tru 阅读全文
posted @ 2021-08-16 00:15 mediocrep 阅读(86) 评论(0) 推荐(0) 编辑
摘要:problems_hive 1 hive执行如下截图中的语句时卡住了 原因:yarn未启动,hive底层是要提交mapreduce到yarn上才能计算结果的。 RCA: 之前启动yarn时,未执行jps查看是否已经启动。其实未启动成功,具体原因未知: [root@node01 ~]# start-y 阅读全文
posted @ 2021-08-16 00:13 mediocrep 阅读(234) 评论(0) 推荐(0) 编辑
摘要:sqoop 1 sqoop设置--update-mode allowinsert,但是仍然插入新的记录,没有更新 RCA: 当sqoop,update的时候是需要知道update谁的,如果你的表主键会变或者没有主键,都将使update失败。 solution: 设置主键 2 阅读全文
posted @ 2021-08-16 00:04 mediocrep 阅读(34) 评论(0) 推荐(0) 编辑

既然选择了远方,便只顾风雨兼程!
点击右上角即可分享
微信分享提示