用户画像的技术选型与架构实现
摘要:这里讲解下用户画像的技术架构和整体实现,那么就从数据整理、数据平台、面向应用三个方面来讨论一个架构的实现(个人见解)。 数据整理: 1、数据指标的的梳理来源于各个系统日常积累的日志记录系统,通过sqoop导入hdfs,也可以用代码来实现,比如spark的jdbc连接传统数据库进行数据的cache。还
阅读全文
posted @
2016-02-27 12:33
松伯
阅读(6495)
推荐(0) 编辑
1分钟内检查Linux服务器性能的命令
摘要:1、uptime 在Linux系统中,这些数据表示等待CPU资源的进程和阻塞在不可中断IO进程(进程状态为D)的数量。 2、dmesg|tail 命令会输出系统日志的最后10行,这些日志都可以排查性能问题。 3、vmstat 1 输出的日志中 r:等待在CPU资源的进程数。这个数据比平均负载更加能够
阅读全文
posted @
2016-02-02 10:32
松伯
阅读(529)
推荐(0) 编辑