摘要：
.copyFromLocal copyToLocal ls 列出hdfs文件系统根目录下的目录和文件 列出hdfs文件系统所有的目录和文件 put hdfs file的父目录一定要存在，否则命令不会执行 hdfs dir 一定要存在，否则命令不会执行 从键盘读取输入到hdfs file中，按Ctrl 阅读全文
2018年1月22日
2018年1月19日
摘要：
问题 训练神经网络是一个很复杂的过程，在 "前面" 提到了深度学习中常用的激活函数，例如ELU或者Relu的变体能够在开始训练的时候很大程度上减少梯度消失或者爆炸问题，但是却不能保证在训练过程中不出现该问题，例如在训练过程中每一层输入 发生了改变了，那么我们就需要使用更小的learning rate 阅读全文
2018年1月1日
摘要：
本节内容比较简单，通过python的 模块画出深度学习中常用的激活函数 sigmoid 首先是sigmoid相信大家都不陌生，大家学习逻辑回归和神经网络的时候经常遇到。 效果： 从上面的图可以看出，当输入的值比较大或者比较小的时候值会保持在0和1，常被称为saturates 。当对这些位置进行求导的 阅读全文
2017年12月26日
摘要：
实际上就是二叉树的层次遍历，需要借助要给队列， 需要注意的是队列数据结构在Java中的选取与使用。 阅读全文
摘要：
思路是借助辅助栈，先入栈，如果栈顶元素和出栈列相同则依次出栈。 import java.util.ArrayList; import java.util.Stack; public class Solution { public boolean IsPopOrder(int [] pushA,int 阅读全文
2017年12月18日
摘要：
这一节使用TF实现一个多层神经网络模型来对 数据集进行分类，这里我们设计一个含有两个隐藏层的神经网络，在输出部分使用softmax对结果进行预测。 使用高级API实现多层神经网络 这里我们使用 包，这是一个高度封装的包，里面包含了许多类似 一些实用的方法。 先引入数据 模型的主要代码 其中 这个方法 阅读全文
2017年12月13日
摘要：
这工作小半年了发现以前学的那么多流弊技能都不怎么用，倒是shell用的很多，自己已经从shell小菜鸟一步步走过来，已经要变成 =。= 经常需要用shell按行读取配置文件，自己在上面踩了很多坑，可依然没长记性，故记录下来。先创建一个测试用例 ; 使用while读取 使用while读取文件时候需要配 阅读全文
2017年12月11日
摘要：
因为工作需要，需要修改集群中机器的配置，一台一台的修改太浪费时间，就想能不能通过自动化脚本批量执行命令，尝试写一个，自己shell不熟悉，写的有点渣渣 if [ "$ " ne 2 ];then echo "USAGE:$0 f host_file cmd" exit 1 fi file_name= 阅读全文
摘要：
升级主要分为两部分1.CM的升级、2.CDH的升级 CM的升级 两种升级方法 1.使用 "package" 2.使用Tarballs升级方法，参照 "官方" 升级指引，Tarball中包含了 和`Cloudera Manager Agent` 通常情况下升级CM和升级CDH是两个独立的过程，可以在不 阅读全文
2017年12月8日
摘要：
学习机器学习的同学在学习过程中会经常遇到一个问题，那就是对目标函数进行求微分，线性回归这类简单的就不说、复杂的如神经网络类那些求导过程的 。像我还是那种比较粗心的人往往有十 九错，所以说自动求导就十分有必要了，本文主要介绍几种求导的方式。假设我们的函数为$f(x,y)=x^2y+y+2$，目标是求出 阅读全文
