会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
残阳飞雪
博客园
首页
新随笔
联系
订阅
管理
上一页
1
2
3
4
5
6
7
···
29
下一页
2018年10月24日
Linux下配置用msmtp和mutt发邮件
摘要: https://blog.csdn.net/qq_14806125/article/details/50962343 一、安装mutt yum install mutt二、配置muttvi /etc/Muttrc在里面找到下面几行,并将内容修改为你自己的内容(下面几行分布在不同位置,请耐心查找,记得
阅读全文
posted @ 2018-10-24 19:03 残阳飞雪
阅读(726)
评论(0)
推荐(0)
编辑
2018年9月25日
spark StructType的应用,用在处理mongoDB keyvalue
摘要: 近期在处理mongoDB 数据的时候,遇到了非常奇怪的格式,账号密码的日志都追加在一条记录里面,要取一个密码的时长和所有密码的平均时长就非常繁琐。 用了各种迭代计算,非常困难,而且printschema出来结构也是不规范的。 和同事一起研究后用了StructType 效率非常高。 代码如下:
阅读全文
posted @ 2018-09-25 15:46 残阳飞雪
阅读(3324)
评论(0)
推荐(0)
编辑
2018年9月11日
Spark--sql--所有函数举例(spark-2.x版本)
摘要: 参考https://www.2cto.com/net/201803/727248.html
阅读全文
posted @ 2018-09-11 22:51 残阳飞雪
阅读(2993)
评论(0)
推荐(0)
编辑
2018年9月1日
Idea2018旗舰版破解方法
摘要: 完整请参考 https://www.jianshu.com/p/3c87487e7121 1.在hosts文件里添加一行: 2.在Activation code输入 上面的尝试了可以用。 下面的方法没尝试
阅读全文
posted @ 2018-09-01 00:33 残阳飞雪
阅读(698)
评论(0)
推荐(0)
编辑
2018年8月16日
spark 解析json切分多重循环嵌套插入mysql代码20180816
该文被密码保护。
阅读全文
posted @ 2018-08-16 12:59 残阳飞雪
阅读(2)
评论(0)
推荐(0)
编辑
2018年8月3日
sbt spark2.3.1 idea打包Caused by: java.lang.ClassNotFoundException: scala.Product$class
摘要: 今天同事在服务区上面装的是最新版本的hadoop3.10和spark2.3.1,因为用scala开发, 所以我想用sbt进行开发。过程中遇到各种坑,刚开始用的jdk10,结果也报错,后来改成jdk1.8. 又报了新的错误。开始用的是scala2.12.6 如果不要使用spark的纯scala项目则不
阅读全文
posted @ 2018-08-03 19:32 残阳飞雪
阅读(5983)
评论(0)
推荐(0)
编辑
2018年7月23日
windows 安装python pip Could not install packages due to anEnvironmentError: [WinError 5] 拒绝访问
摘要: 找打 C:\Windows\System32 文件夹下面的cmd.exe点开后运行python -m pip install --upgrade pip 即解决问题了。
阅读全文
posted @ 2018-07-23 16:14 残阳飞雪
阅读(15149)
评论(0)
推荐(0)
编辑
2018年7月13日
AUC比较两个模型的预测能力
该文被密码保护。
阅读全文
posted @ 2018-07-13 11:53 残阳飞雪
阅读(6)
评论(0)
推荐(0)
编辑
2018年7月6日
博客园编辑数学公式的方法
摘要: 需要在选项中勾上 启用数学公式支持 $x^2$ 在公式开始和结尾输入美元符号 : 如 美元符号x^2美元符号 则显示x的平方 x^2 需要在http://latex.codecogs.com/eqneditor/editor.php里面编辑好后复制源码过来。 如 $=\sum_{i=1}^{6}[x
阅读全文
posted @ 2018-07-06 17:48 残阳飞雪
阅读(1061)
评论(6)
推荐(1)
编辑
伯努利分布的最大似然估计
摘要: 极大似然估计法是求点估计的一种方法,最早由高斯提出,后来费歇尔(Fisher)在1912年重新提出。它属于数理统计的范畴。 大学期间我们都学过概率论和数理统计这门课程。 概率论和数理统计是互逆的过程。概率论可以看成是由因推果,数理统计则是由果溯因。 用两个简单的例子来说明它们之间的区别。 由因推果(
阅读全文
posted @ 2018-07-06 16:06 残阳飞雪
阅读(11851)
评论(0)
推荐(0)
编辑
上一页
1
2
3
4
5
6
7
···
29
下一页
公告