文章分类 -  其他

摘要:INSERT INTO maxwell.bootstrap (database_name, table_name,where_clause) VALUES ('och_prd', 'order_info_201907','create_time >= '2019-07-18''); INSERT I 阅读全文
posted @ 2019-07-30 22:10 niutao 阅读(770) 评论(0) 推荐(0) 编辑
摘要:往常maxwell是正常跑的,但是突然今天报错: Couldn't find table 'violation_info' in database och_evcard_data 而且这个库和这个表,可以肯定的是,完全不是自己想要的(在include中过滤出来的) 解决: 进入mysql的Maxwe 阅读全文
posted @ 2019-07-03 18:32 niutao 阅读(1063) 评论(0) 推荐(2) 编辑
摘要:冲突的地放其实很多,大概都是类似,找不到哪个方法了: 类似于: Error starting ApplicationContext. To display the conditions report re-run your application with 'debug' enabled. 19/0 阅读全文
posted @ 2019-07-02 16:29 niutao 阅读(9512) 评论(0) 推荐(0) 编辑
摘要:因为做了cdh的迁移,启动后所有服务都是正常执行,不影响操作,但是尴尬的是,页面上的图表监控不见了 这种情况的根本原因就是: Host Monitor和Service Monitor服务失效! 解决: 去主节点中的/var/lib目录,然后删掉:cloudera-host-monitor , clo 阅读全文
posted @ 2019-05-23 09:51 niutao 阅读(754) 评论(0) 推荐(0) 编辑
摘要:需求: 每分钟执行一次程序,将处理后的数据写入mongodb 最初做法: 1):写crontab没有响应,于是打算通过shell脚本的while true来执行 当时sb,没控制时间内,而且我还是用nohup XXXX.sh 2>&1 & 结果就是,几乎每一个瞬间启动一个jar,服务器内存瞬间沾满 阅读全文
posted @ 2019-04-27 14:18 niutao 阅读(875) 评论(0) 推荐(0) 编辑
摘要:反射的包名:reflect 步骤: 1:根据传入函数获取函数的指针 2:通过指针获取函数名称 代码: func apply(op func(int , int) int , a,b int) int{ pointer:= reflect.ValueOf(op).Pointer() funcName 阅读全文
posted @ 2019-04-13 17:49 niutao 阅读(872) 评论(0) 推荐(1) 编辑
摘要:企业运维的数据库最常见的是 mysql;但是 mysql 有个缺陷:当数据量达到千万条的时候,mysql 的相关操作会变的非常迟缓; 如果这个时候有需求需要实时展示数据;对于 mysql 来说是一种灾难;而且对于 mysql 来说,同一时间还要给多个开发人员和用户操作; 所以经过调研,将 mysql 阅读全文
posted @ 2018-05-24 20:46 niutao 阅读(26677) 评论(0) 推荐(3) 编辑
摘要:maven导入avro: <dependency> <groupId>org.apache.avro</groupId> <artifactId>avro</artifactId> <version>1.7.7</version> </dependency> maven导入avro的构建插件: <b 阅读全文
posted @ 2016-10-19 17:55 niutao 阅读(1445) 评论(0) 推荐(0) 编辑
摘要:系统:Centos7 CDH版本:5.14.0 请自己提前安装好:mysql、jdk 并下载好相关依赖(每一台机器) yum -y install chkconfig python bind-utils psmisc libxslt zlib sqlite cyrus-sasl-plain cyru 阅读全文
posted @ 2016-07-08 13:00 niutao 阅读(1923) 评论(0) 推荐(0) 编辑
摘要:在并发编程过程中,我们大部分的焦点都放在如何控制共享变量的访问控制上(代码层面),但是很少人会关注系统硬件及 JVM 底层相关的影响因素; CPU缓存 网页浏览器为了加快速度,会在本机存缓存以前浏览过的数据; 传统数据库或NoSQL数据库为了加速查询,常在内存设置一个缓存,减少对磁盘(慢)的IO。 阅读全文
posted @ 2016-03-20 21:23 niutao 阅读(1549) 评论(0) 推荐(0) 编辑