kimbo

摘要： 在执行Shell脚本是，可以向脚本传递参数。脚本内获取参数的格式为： $n ,n 是一个数字， 1 表示第一个参数，2 表示第二个参数，以此类推 例子1： 向脚本传递2个参数，并分别输出，其中 $0 表示执行的文件名 执行： sh kimbo_test.sh 20170201 eg 结果： 常用参数 阅读全文

摘要： Shell 是用C语言编写的程序，便于用户与Linux内核系统进行交互。 Linux的Shell种类众多，常见的有： Bourne Again Shell （/bin/bash） Bourne Shell（/bin/sh或/usr/bin/sh） C Shell（/usr/bin/csh） K Sh 阅读全文

摘要： 环境 Anaconda3 Python 3.6, Window 64bit 书籍 O'Reilly出版的Wes McKinney编的《Python for Data Analysis》 警告：ParserWarning: Falling back to the 'python' engine bec 阅读全文

摘要： 环境 Anaconda3 Python 3.6, Window 64bit 书籍 O'Reilly出版的Wes McKinney编的《Python for Data Analysis》 rnames =['user_id','movie_id','rating','time_cd'] ratings 阅读全文

摘要： eg1: 检验登录名，只能以字母、数字、下划线等字符组成，长度最短7，最高30 ^\w{7,30} 或者 ^[A-Za-z0-9_]{7,30} eg2：只能输入由0到9之间的数字 ^[0-9]+$ 或者 ^\d+$ eg3: 只能输入由26个英文字母组成的字符串 ^[a-zA-Z]+$ 说明： 1 阅读全文

摘要： 参考地址：https://cwiki.apache.org/confluence/display/Hive/LanguageManual+UDF 1. parse_url(url, partToExtract[, key]) 参考地址：https://cwiki.apache.org/conflue 阅读全文

摘要： 一、官网下载最新版的PyCharm，根据平台选择版本(Liunx,Windows) 地址：https://www.jetbrains.com/pycharm/download/#section=windows 二、安装PyCharm PyCharm 的激活方式： i) 推荐购买正版。 ii) 可以选 阅读全文

摘要： 参考文档：https://hadoop.apache.org/docs/r2.7.1/hadoop-project-dist/hadoop-common/FileSystemShell.html#df 1. 环境：hadoop-2.6.0 2. 参数说明： hadoop fs [-appendToF 阅读全文

摘要： 一、列转行 (对某列拆分，形成新列) 使用函数：lateral view explode(split(column, ',')) num eg: 如表：t_row_to_column_tmp 数据如下，对tag列进行拆分 SQL代码： select id,tag,tag_new from t_row 阅读全文

摘要： Anaconda 作为开源项目，集成了Python的大部分第三方包，如：pandas，numpy，matplotlib等。 1. 下载地址：https://www.continuum.io/downloads 2. 本人安装的Anaconda3 Python 3.6, Window 64bit 的版 阅读全文