该文被密码保护。 阅读全文
摘要：
今天同事在服务区上面装的是最新版本的hadoop3.10和spark2.3.1,因为用scala开发， 所以我想用sbt进行开发。过程中遇到各种坑，刚开始用的jdk10,结果也报错，后来改成jdk1.8. 又报了新的错误。开始用的是scala2.12.6 如果不要使用spark的纯scala项目则不 阅读全文
摘要：
找打 C:\Windows\System32 文件夹下面的cmd.exe点开后运行python -m pip install --upgrade pip 即解决问题了。 阅读全文
摘要：
需要在选项中勾上 启用数学公式支持 $x^2$ 在公式开始和结尾输入美元符号 ： 如 美元符号x^2美元符号 则显示x的平方 x^2 需要在http://latex.codecogs.com/eqneditor/editor.php里面编辑好后复制源码过来。 如 $=\sum_{i=1}^{6}[x 阅读全文
摘要：
极大似然估计法是求点估计的一种方法，最早由高斯提出，后来费歇尔（Fisher）在1912年重新提出。它属于数理统计的范畴。 大学期间我们都学过概率论和数理统计这门课程。 概率论和数理统计是互逆的过程。概率论可以看成是由因推果，数理统计则是由果溯因。 用两个简单的例子来说明它们之间的区别。 由因推果（ 阅读全文
摘要：
在采用随机梯度下降算法训练神经网络时，使用滑动平均模型可以提高最终模型在测试集数据上的表现。在Tensflow中提供了tf.train.ExponentialMovingAverage来实现滑动平均模型。在初始化ExponentialMovingAverage时，需要提供一个衰减率（decay)。这 阅读全文
摘要：
tensflow 不仅支持经典的损失函数，还可以优化任意的自定义损失函数。 预测商品销量时，如果预测值比真实销量大，商家损失的是生产商品的成本；如果预测值比真实值小，损失的则是商品的利润。 比如如果一个商品的成本是1元，但利润是10元，那么少预测一个就少赚9元；而多预测一个才亏1元，为了最大化利润预 阅读全文
摘要：
我的是win7的系统，去python官网下载python3.7安装 CMD #打开命令窗口 pip install numpy #在cmd中输入 提示 需要c++14.0, 解决办法： 1， 进入https://www.lfd.uci.edu/~gohlke/pythonlibs/#wordclou 阅读全文
摘要：
import org.apache.spark.{SparkConf, SparkContext} import org.apache.spark.sql.{SQLContext, SaveMode} import org.apache.spark.sql.hive.HiveContext //spark-shell --driver-class-path /home/hadoop/hive... 阅读全文