摘要：
添加分区： 已经创建好的分区表： 分区字段包含：p_hour,p_city,p_loctype。 根据分区字段p_loctype删除分区： 删除日志： 阅读全文
摘要：
python实现代码： https://github.com/CatarinaPinheiro/meshless/blob/master/meshless.ipynb 阅读全文
摘要：
1）maven安装 一般我们从github、码云（https://gitee.com）上获取代码后，实际上我们并没有一个版本管理工具来用来获取（get）、提交（commit and push）代码的工具，因此需要使用一个代码提交管理工具，maven是这类工具中比较好的工具。 声明：maven安装请参 阅读全文
摘要：
https://github.com/Zephery/newblog http://www.wenzhihuai.com/index.html 阅读全文
摘要：
de4dot是一款C#编写的基于GPLv3协议的一个开源的.net反混淆脱壳工具，是目前.net下非常不错的一款反编译工具。 支持如下混淆器： Agile.NET (aka CliSecure) Babel.NET CodeFort CodeVeil CodeWall CryptoObfuscato 阅读全文
摘要：
hadoop api提供了一些遍历文件的api,通过该api可以实现遍历文件目录： 并行执行sh的线程： 执行sh的java代码： submitsparkjob.sh 执行BatchSubmit.jar的命令： 阅读全文
摘要：
一、 控制hive任务中的map数: 1. 通常情况下，作业会通过input的目录产生一个或者多个map任务。主要的决定因素有： input的文件总个数，input的文件大小，集群设置的文件块大小(目前为128M, 可在hive中通过set dfs.block.size;命令查看到，该参数不能自定义 阅读全文
摘要：
声明：本文转自《在Spark中自定义Kryo序列化输入输出API》 在Spark中内置支持两种系列化格式：（1）、Java serialization；（2）、Kryo serialization。在默认情况下，Spark使用的是Java的ObjectOutputStream系列化框架，它支持所有继 阅读全文
摘要：
假设我们有一组个人信息，我们针对人的性别进行分组统计，并进行统计每个分组中的记录数。 输出步骤： 上边的信息中，个人信息中只有一个值，如果value是元组的话，需要定义出一个type： 阅读全文
摘要：
作者：王燚光链接：https://www.zhihu.com/question/33270495/answer/93424104来源：知乎著作权归作者所有。商业转载请联系作者获得授权，非商业转载请注明出处。 梳理一下Spark中关于并发度涉及的几个概念File，Block，Split，Task，Pa 阅读全文
摘要：
def partitionBy(partitioner: Partitioner): RDD[(K, V)] 该函数根据partitioner函数生成新的ShuffleRDD，将原RDD重新分区。 参考：http://lxw1234.com/archives/2015/07/356.htm 阅读全文
摘要：
抽样示例操作： 阅读全文
摘要：
在创建好一个分区表后，执行动态分区插入数据，抛出了错误： 解决方案： 在执行插入数据到分区时，添加参数设置： 阅读全文
摘要：
Android触屏事件包含两种： 1）屏幕触屏事件：重写onTouchEvent(MotionEvent event)； 2）控件触屏事件：给控件注册触屏事件，setOnTouchEventListener(...)。 屏幕触屏事件 效果： 代码： res/values/colors.xml <?x 阅读全文
摘要：
1）ChexkBox继承自CompoundButton组件； 2）isChecked()--确定是否选中；setChecked(bool checked)--设置选中或取消选中； 3）监听事件：CompoundButton.OnCheckedChangeListener 使用checkbox，并实现 阅读全文
摘要：
RadioGroup：如果需要实现一组可选项中选择一个，可以使用该控件来实现； RadioButton：继承自CompoundButton,是一个单选按钮； 学习如何使用RadioGroup实现选中，获取选中项： 效果： 源代码： res\layout\activity_main.xml <Rela 阅读全文
摘要：
1）android显示图片可以使用imageView来呈现，而且也可以通过ImageButton来实现给button添加图片。 2）在创建一个ImageView后，显示图片绑定元素是：android:src="@android:drawable/btn_dialog" 3）后台操作绑定图片函数：im 阅读全文
摘要：
reduceByKey函数ＡＰＩ： 该函数利用映射函数将每个K对应的V进行运算。 其中参数说明如下： - func：映射函数，根据需求自定义； - partitioner：分区函数； - numPartitions：分区数，默认的分区函数是HashPartitioner。 返回值：可以看出最终是返回 阅读全文
摘要：
通过SecureCRT工具连上linux后，通过beeline连接上hive后，在输错hive语句时，无论 Backspace还是delete 都删除不掉错误的语句，没有办法退格。 解决方案: 第一步：SecureCRT菜单选项栏中"选项(O)"-》"会话选项(S)...",点击打开： 第二步：在“ 阅读全文
摘要：
安装 首先从ｇｉｔｈｕｂ上下载orchard源代码：https://github.com/OrchardCMS/Orchard（下载版本最新的1.10.2） 使用ｖｓ２０１７打开源代码，运行进入安装界面，输入后台账户名密码。 安装界面 网站名：ｘｘｘｘ 用户：xxxxx 密码：****** 重复密码 阅读全文