2017年2月12日

摘要: sudo 可以保留保持用户的环境,而root 就只能用root的配置了。那么如果没有 sudo,那么用户不得不在 root 和 普通用户同步两套相同的环境,久而久之就只用 root。但是有了sudo之后就不一样了,用户使用自己的环境配置,又可以不修改root用户的配置文件,互不影响。 阅读全文
posted @ 2017-02-12 15:29 chenb 阅读(418) 评论(0) 推荐(1) 编辑
摘要: 指定bash shell脚本第一行, #! 应该是什么? 大多数情况 /usr/bin/env bash, /bin/bash, /usr/bin/bash, /bin/sh, /usr/bin/env sh 是等价的,但是少数情况还是有坑。如默认的shell 可能不是 bash,如某个发行法本,默 阅读全文
posted @ 2017-02-12 15:21 chenb 阅读(127) 评论(0) 推荐(0) 编辑
摘要: 在linux 或 unix 操作系统中,守护进程 Daemon 就是一种运行在后台的特殊进程,独立于控制终端,并且周期性的执行某种任务或等待处理某种发生的事件。 终端 系统与用户进行交流的界面就是终端。那么每一个从此终端开始运行的进程都会依附于这个终端,这个终端就是这些进程的控制终端。终端关闭,那么 阅读全文
posted @ 2017-02-12 15:02 chenb 阅读(116) 评论(0) 推荐(0) 编辑
摘要: 遇到的问题: ETL 作业调度,用shell控制。对于并行执行的作业,采用shell并行执行。 这样的话 作业就可以并行着做 阅读全文
posted @ 2017-02-12 13:32 chenb 阅读(137) 评论(0) 推荐(0) 编辑

2017年2月5日

摘要: 全栈工程师是未来。因为技术门槛下降,导致一个web应用只需一两个人就可以。组织架构的变迁,也赋予每个人的职责越来越多。 技术的革新史,CGI到MVC到前后端分离的架构模式,不断降低技术的门槛。 组织架构,瀑布式开发到迭代式敏捷开发到精益开发,解决沟通,需求变更等问题。 大公司需要解决性能问题,需要专 阅读全文
posted @ 2017-02-05 14:55 chenb 阅读(667) 评论(0) 推荐(0) 编辑

2017年2月4日

摘要: “矩阵求导”似乎是一个三不管的区域。虽然原理确实是数学分析中所讲的多元函数求导,但是总结一些公式以及复合函数求导的法则还是必要的,毕竟逐分量地求导太累而且易出错,例如一旦涉及矩阵乘法,要把结果展开实在是太麻烦了,更不要说多层函数嵌套(对应于深层神经网络)的情形了。如何在机器学习中应用矩阵求导(例如 阅读全文
posted @ 2017-02-04 20:34 chenb 阅读(289) 评论(0) 推荐(0) 编辑
摘要: hbase 是 nosql的一种。nosql的话,不需要sql作为查询语言,也不需要固定的表模式(table schema),也不怎么有sql的join操作,一般都能水平扩展,放宽ACID属性(因为CAP定理)。Hbase是C+P类型的,强一致性(仅支持单行事务)。最常见的应用场景还是采集的网页数据 阅读全文
posted @ 2017-02-04 13:52 chenb 阅读(181) 评论(0) 推荐(0) 编辑

2017年2月3日

摘要: echarts和highcharts是一类的东西。 echarts视觉效果一般是要美于highcharts的,但是highcharts的风格更为统一。 echarts在大数据方面性能是比较好的,如果数据量比较大,可以考虑echarts。 如果是一些简单的数据,而客户对界面定制较多,可以考虑使用hig 阅读全文
posted @ 2017-02-03 21:03 chenb 阅读(119) 评论(0) 推荐(0) 编辑

2017年2月2日

摘要: 由于酿酒业,对于葡萄酒而言,年份不同,气候不同,生产的葡萄酒品质也不同,因此酿酒业常将葡萄的采摘年份作为品质的区分。同时,随着葡萄酒窖藏时间的增加,酒的品质也会提升。因此有了vintage分析,来评估不同年份的葡萄酒随着窖藏时间的推移而产生的品质变化。一般来说,窖藏一定年份后,品质趋于稳定。 银行在 阅读全文
posted @ 2017-02-02 22:31 chenb 阅读(3422) 评论(0) 推荐(0) 编辑
摘要: 看到一篇关于数据分析师的能力体系文章,正好做个提炼。 文章将分析对象分为三种,初级数据分析师,高级数据分析师,数据挖掘工程师。 能力分为八种。 数学知识主要指统计学,矩阵计算,算法层面的数据。 对于初级数据分析师,主要了解一些统计知识,能够计算出来。了解常见统计模型算法则加分。 对于高级数据分析师, 阅读全文
posted @ 2017-02-02 20:50 chenb 阅读(258) 评论(0) 推荐(0) 编辑

导航