2014 年 8月随笔档案 - 代码王子

机器学习中的维数灾难

摘要：一.引言这里我们将要讨论所谓的“维数灾难”，同时结合过拟合现象来解释它在分类器学习中的重要性。举一个分类应用的简单例子，假设我们有一系列的图片，每张图片的内容可能是猫也可能是狗；我们需要构造一个分类器能够对猫、狗自动的分类。首先，要寻找到一些能够描述猫和狗的特征，这样我们的分类算法就可以利用... 阅读全文

posted @ 2014-08-29 18:46 代码王子阅读(457) 评论(0) 推荐(0) 编辑

python字典（dictionary）使用：基本函数code实例，字典的合并、排序、copy，函数中*args 和**kwargs做形参和实参

摘要：python字典dictionary几个不常用函数例子一、字典声明如，d={}; d= {'x':1,'b':2} d1 = dict(x=1,y=2,z=3) d2 = dict(a=3,b=4,c=5) 二、方法说明：参考：http://blog.csdn.net... 阅读全文

posted @ 2014-08-29 15:58 代码王子阅读(281) 评论(0) 推荐(0) 编辑

pig运行方法：本地与云上

摘要：pig脚本放在本地当前目录（键入pig命令时，所处的目录），然后用进入grunt，用run或者exec调用 1云运行：键入pig进入grunt，用run命令运行当前目录脚本。（或者外部用pig -f file）这是云运行模式，脚本中操作文件路径都在云上，pig脚本里面要用云路... 阅读全文

posted @ 2014-08-28 15:32 代码王子阅读(231) 评论(0) 推荐(0) 编辑

Dynamics CRM2011/2013 站点地图sitemap的翻译

摘要：实体、属性字段、ribbon等的翻译可以通过解决方案来解决（具体可见我前面的博客：http://blog.csdn.net/vic0228/article/details/37690913），但解决方案不支持sitemap的翻译，那么就只能另谋出路了。这里介绍两... 阅读全文

posted @ 2014-08-24 17:22 代码王子阅读(93) 评论(0) 推荐(0) 编辑

Dynamics crm2013 IFD部署后启用多组织

摘要：对CRM的多组织都不会陌生，在常规模式下新建组织后更改下url后面的组织名称即可访问新的组织了，而在部署IFD后就需要注意两点：1、域名的DNS解析；2、relying patry trust的更新先说第一点域名解析，在dns管理器中添加新的host名，... 阅读全文

posted @ 2014-08-24 17:14 代码王子阅读(111) 评论(0) 推荐(0) 编辑

pig读取部分列 (全部列中的少部分列)

摘要：pig流式数据，load数据时，不能读入任意列。但是，可以从头读，只能连续几列。就是前几列。比如10列数据，可以只读前3列。但不能读第3列：如：数据testdata [wizad@sr104 lmj]$ cat testdata.txt 1,2,3,4,5,6,7,8,9,10 1,2,3... 阅读全文

posted @ 2014-08-22 18:13 代码王子阅读(197) 评论(0) 推荐(0) 编辑

支付宝中当面付的通过音频传输数据的研究-实现部分（2）

摘要：书接上回既然有目标了我们就开始写测试代码吧~~ 1）使用超声波17500, 17700, 17900, 18100, 18300, 18500, 18700 分别表示0-6（为什么是0-6呢嘿嘿本人比较懒，SinVoice使用了6段频率，我也懒得修改代码了，就使用了同样的六段频率）其中... 阅读全文

posted @ 2014-08-21 14:39 代码王子阅读(185) 评论(0) 推荐(0) 编辑

sublime test2 快捷键

摘要：快捷键比较全的：http://blog.useasp.net/archive/2013/06/14/sublime-text-2-all-default-Shortcuts-table-on-windows-translated-with-chinese.aspx 文件 File ... 阅读全文

posted @ 2014-08-20 15:10 代码王子阅读(198) 评论(0) 推荐(0) 编辑

支付宝中当面付的通过音频传输数据的研究（1）

摘要：近日公司提出了一个需求,要求做一个类似当面付中通过音频传输用户ID的方法。拿到任务后马上祭起GOOGLE大法去查找。（此处再次吐槽一下GWF——我去年买了个表，超耐磨）首先找到的是一个开源的软件 https://github.com/JesseGu/SinVoice 是Android的。 ... 阅读全文

posted @ 2014-08-19 16:46 代码王子阅读(223) 评论(0) 推荐(0) 编辑

outlook邮箱邮件与企业邮箱同步(outlook本地文件夹邮件，web邮箱里没有)

摘要：用惯了outlook2010，问题：今天将邮件放到自定义文件夹后，发现在web邮箱中看不到邮件了。不能同步到企业邮箱。解决忙了一天，才知道是账户类型问题，pop3类型，只下载不上传。所以outlook本地修改后，web邮箱看不到。创建账户类型imap，才能将本地文件夹邮件上传到邮箱服务器。创... 阅读全文

posted @ 2014-08-18 16:06 代码王子阅读(701) 评论(0) 推荐(0) 编辑

foreach 内嵌的使用

摘要：foreach内部处理数据流的每条记录，进行关系操作，最后用generate返回数据给外部。但注意关系操作符不能作用于表达式，要将表达式提取成关系。 foreach内部只支持distinct, filter, limit, order；最后必须是generate； foreach内部处理数据每... 阅读全文

posted @ 2014-08-13 18:18 代码王子阅读(255) 评论(0) 推荐(0) 编辑

从极大似然函数到EM算法

摘要：最近看斯坦福大学的机器学习课程，空下来总结一下参数估计相关的算法知识。一、极大似然估计：大学概率论课程都有讲到参数估计的两种基本方法：极大似然估计、矩估计。两种方法都是利用样本信息尽量准确的去描述总体信息，或者说给定模型（参数全部或者部分未知）和数据集（样本），让我们去估计模型的未知参数。 ... 阅读全文

posted @ 2014-08-13 18:14 代码王子阅读(171) 评论(0) 推荐(0) 编辑

Dynamics CRM 2013 停用和激活按钮的显示与隐藏

摘要：CRM中命令栏上的有些按钮是可以通过权限控制显示和隐藏的，比如新建、保存、保存并关闭、删除等，但惟独激活和停用无法控制，但我们还是可以用权限去控制，只是稍微绕了那么一下。这里就要涉及到按钮的自定义了，说到按钮的自定义那肯定得用到ribbon workbench，这个工具如何使用不在本文... 阅读全文

posted @ 2014-08-13 00:11 代码王子阅读(118) 评论(0) 推荐(0) 编辑

pig基础知识总结

摘要：Pig Latin UDF语句 REGISTER 在Pig运行时环境中注册一个JAR文件 DEFINE 为UDF、流式脚本或命令规范新建别名 Pig Latin命令类型 kill 中止某个MapReduce任务 exec 在一个新的Grunt shell程序中以批处理模... 阅读全文

posted @ 2014-08-12 17:28 代码王子阅读(574) 评论(0) 推荐(0) 编辑

中值滤波与椒盐噪声

摘要：椒盐噪声：也称为脉冲噪声：在图像中，它是一种随机出现的白点或者黑点，可能是亮的区域有黑色像素或是在暗的区域有白色像素（或是两者皆有）。在一维信号中，可以理解为一些离群的点或者尖脉冲。举两个栗子：分别为带有椒盐噪声二维信号和一维信号滤除椒盐噪声比较有效的方法是对信号进行中值滤波处理... 阅读全文

posted @ 2014-08-06 18:54 代码王子阅读(1162) 评论(0) 推荐(0) 编辑

幂次法则power law

摘要：幂次法则分布和高斯分布是两种广泛存在的数学分布。可以预测和统计相关数据。 pig中用其处理数据倾斜，实现负载均衡。个体的规模和其名次之间存在着幂次方的反比关系，R(x)=ax（-b次方）其中，x为规模（如：人口、成绩、营业额…），R(x)为其名次(第1名的规模最大)，a为系数，b为幂次。... 阅读全文

posted @ 2014-08-06 16:12 代码王子阅读(1005) 评论(0) 推荐(0) 编辑

异常值探测的相关理论及方法

摘要：摘要：异常值是影响统计数据质量的一个非常重要的因素，一直以来，我国的统计界以及社会各界均对此问题给予很高的关注。所以，近年来有关异常值的理论探讨一直是个热点问题。但是目前研究的重点一直放在统计法律制度的健全以及统计工作程序完善等方面。虽然这两点确实能提高统计数据的质量，但对于已经形... 阅读全文

posted @ 2014-08-06 13:30 代码王子阅读(187) 评论(0) 推荐(0) 编辑

Dynamics CRM2013 1：N关系 sub-grid中的“添加现有项”和“添加新建项”功能详解

摘要：CRM2013中sub-grid的样式和2011中有了较大的变化，2013和2011界面对比如下在2011的时候按钮是在ribbon区，1：N的父子关系实体直接点击添加新纪录就可以，但2013就不行了点加号首先会有个下拉框把现有的子实体数据列出来，你可以选择现有的也可以新建既然你的... 阅读全文

posted @ 2014-08-05 21:32 代码王子阅读(167) 评论(0) 推荐(0) 编辑

Microsoft Office Excel cannot access the file, There are several possible reasons

摘要：今天在做EXCEL打印读取模板时报错了，错误信息如下： Microsoft Excel cannot access the file 'D:\xx.xlsx'. There are several possible reasons: • The file name or path does ... 阅读全文

posted @ 2014-08-04 15:58 代码王子阅读(269) 评论(0) 推荐(0) 编辑

matlab学习日志之并行运算

摘要：原文地址：matlab并行计算，大家共同学习吧，涉及到大规模数据量处理的时候还是效果很好的今天搞了一下matlab的并行计算，效果好的出乎我的意料。本来CPU就是双核，不过以前一直注重算法，没注意并行计算的问题。今天为了在8核的dell服务器上跑程序才专门看了一下。本身写的程序就很容易... 阅读全文

posted @ 2014-08-03 16:59 代码王子阅读(701) 评论(0) 推荐(0) 编辑

代码王子

08 2014 档案