摘要：
一、git工具的安装 下载 点击 git官网,下载 windows 版本 : 双击下载好的.exe安装包. 一直点击next. 验证安装是否成功 win+R打开运行窗口输入cmd 进入到刚刚的安装目录下，输入git.txt 说明安装成功 二、IDEA配置git环境 选择 File->Settings 阅读全文
摘要：
一、canal介绍 官网的介绍： 名称：canal [kə'næl] 译意： 水道/管道/沟渠 语言： 纯java开发 定位： 基于数据库增量日志解析，提供增量数据订阅&消费，目前主要支持了mysql 关键词： mysql binlog parser / real-time / queue&topi 阅读全文
摘要：
flink连接mysql报错连接超时 报错内容：mysql连接超时 报错原因分析： flink在流式程序在向mysql写入数据的时候，由于已经跟mysql建立的连接长时间没有想mysql中写入数据，查过了mysql的最大心跳时间(mysql默认是8小时)，此时mysql会将连接关闭，导致再次写入数据 阅读全文
摘要：
IDEA内无法进行复制粘贴 问题 IDEA内无法进行复制粘贴操作,即ctrl+c 与ctrl+v 不起作用，但是IDEA外面是可以的 原因分析 快捷键冲突，即IDEA中设置的赋值粘贴快捷键与idea外面的快捷键不一致，或者冲突导致 快捷键冲突，很可能是IDEA安装了vim插件，该插件也是有快捷键的， 阅读全文
摘要：
IDEA中调试程序设置指定的用户提交任务 场景： 在IDEA中调试任务，远程操作hadoo集群的时候，发生权限不足的问题 报错代码： ... 7 more Caused by: org.apache.hadoop.security.AccessControlException: Permission 阅读全文
摘要：
Failure to find org.glassfish:javax.el:pom:3.0.1-b08-SNAPSHOT in xxx 问题描述： 在进行程序编译编译的时候发生通过pom下载文件之后进行编译报错： 看到这个问题首要想到的就是，可能jar冲突了，查看一下项目的mvn依赖情况，找到这个 阅读全文
摘要：
SHELL脚本实现发送信息到钉钉 日常工作中我们经常需要将一些业务告警信息及时的发送到我们的手机上，比如邮件，短信，钉钉...以便于我们及时发现问题并进行处理，下面主要介绍如果通过shell脚本的方式发送信息到钉钉，并通过钉钉机器人，并艾特群里中的某一个人。 操作步骤 1、钉钉创建群组 2、创建钉钉 阅读全文
摘要：
sqlSERVER对字符串字段进行加密的问题 问题描述： 在使用sqlServer的md5函数对字符串进行加密的过程中发现，针对相同的字符串进行加密，会得到不同的结果： 可以看到，二者唯一的区别就是对需要加密的字符串进行了char类型的转换 问题解决： 找到问题原因之后，如果想要解决，那就简单了，将 阅读全文
摘要：
spark版本：2.3 ES版本：7.1 问题描述： 在通过JavaSpark写入数据到ES过程中，需要对文档id进行手动指定。 在查询ES官网之后，返现官网介绍中是有次方法的： 可以看到，JavaEsSpark.saveToEs该方法是有一个这样的构造方法，需要传入一个ImmutableMap参数 阅读全文
摘要：
java类型的map转为scala类型map package com.xxx.spark.flow.util.common; import scala.collection.JavaConverters; import scala.collection.Map$; import java.util. 阅读全文