2017 年 12月 22 日随笔档案 - papering

2017年12月22日

摘要：不能粗放式产生数据和更新数据必须有计划地且按时按量地产生和更新数据控制数据的产生（更新，“更新”即“产生”了数据），才能从之后动态数据转化成的静态数据中进行数据挖掘，导向决策 data decision 阅读全文

posted @ 2017-12-22 20:56 papering 阅读(155) 评论(0) 推荐(0) 编辑

摘要： SELECT id,'|',url,'|',update_time FROM tab LIMIT 10;SELECT COUNT(1) AS parent,(SELECT COUNT(1) FROM tab WHERE id%2=0) AS child FROM tab; 阅读全文

posted @ 2017-12-22 16:59 papering 阅读(492) 评论(0) 推荐(0) 编辑

定时任务 bash 对远程数据库备份读写

摘要： 1g表每行都有可能被更新，故全表备份检测备份是否在进行 [root@hadoop1 ~]# netstat --numeric-ports | grep 3306tcp 0 0 hadoop1:37692 121.110.203.226:3306 ESTABLISHED您在 /var/spool 阅读全文

posted @ 2017-12-22 16:30 papering 阅读(405) 评论(0) 推荐(0) 编辑

监控脚本更新数据结果要求当前小时更新的数据所分布的产生时间

摘要： SELECT COUNT(1),FROM_UNIXTIME(update_time,'%Y%m%d %H') AS h, FROM_UNIXTIME(create_time,'%Y%m%d') AS d FROM test_url GROUP BY h,d ORDER BY h DESC ; 阅读全文

posted @ 2017-12-22 15:05 papering 阅读(351) 评论(0) 推荐(0) 编辑

利用一切可以利用的资源去解决问题完成难以想象的任务

摘要：去解决问题干阅读全文

posted @ 2017-12-22 12:48 papering 阅读(297) 评论(0) 推荐(0) 编辑

面向数据的编程面向数据的决策

摘要：面向数据阅读全文

posted @ 2017-12-22 10:50 papering 阅读(131) 评论(0) 推荐(0) 编辑

整洁的架构

摘要：小结: 1、User Case 用例是架构设计中非常重要的一环，架构也是基于这些用例进行设计的，如果缺失了用例，就无从谈起架构设计了。一文读懂架构整洁之道 https://mp.weixin.qq.com/s/XAm1MO4RQYtkj3ay-2jT7A 一文读懂架构整洁之道原创马飞翔（泽畔）阅读全文

posted @ 2017-12-22 10:44 papering 阅读(320) 评论(0) 推荐(0) 编辑