摘要:
1. sgn 函数 2. sigmoid 函数 3. ReLU 函数 y=max(x,0) 这种函数的设计启发来自于生物神经元对于激励的线性响应,以及当低于某个阈值后就不再响应的模拟。 阅读全文
摘要:
1. sgn 函数 2. sigmoid 函数 3. ReLU 函数 y=max(x,0) 这种函数的设计启发来自于生物神经元对于激励的线性响应,以及当低于某个阈值后就不再响应的模拟。 阅读全文
摘要:
plt.figure(2) #创建图表2 plt.figure(1) #创建图表1 ax1=plt.subplot(211) # 在上面 最近的 图表1上 创建子图1 ax2=plt.subplot(212) # 在上面 最近的 图表2上 创建子图2 ax3=plt.subplot(212) # 在同一幅子图2 创建子图3 x=np.lin... 阅读全文
摘要:
1. 初始化Spark 2. 创建RDD的方法 内存:Parallelize 或者 makeRDD 外部文件:textFile 3. 保存Spark结果 RDD可以使用 saveAsTextFile()保存下来; 非RDD,可以借助 Parallelize/makeRDD转化为RDD,再保存下来 4 阅读全文
摘要:
1) 本地运行报错: 解决方案: 第一种, 在代码里设置: 第二种,在IDE里设置为本地单线程运行(-Dspark.master=local) 2) 调用函数出错: 原因:main函数和另一个独立的函数我都定义了SparkContext 解决:把main函数里面的SparkContext定义去掉。直 阅读全文
摘要:
欢呼一下先。软件环境菜鸟的我终于把单机Spark 和 Pyspark 安装成功了。加油加油!!! 1. 安装方法参考: 已安装Pycharm 和 Intellij IDEA。 win7 PySpark 安装: http://blog.csdn.net/a819825294/article/detai 阅读全文
摘要:
为了学习Spark,我开始了学习Scala。加油! 递归的一个题目: 代码: 疑问: 为什么参数定义时,X明明是 Float型,但是我调用函数时,X=3.0 等却报错!希望自己早日发现问题所在! 阅读全文
摘要:
pom.xml 有小红叉,报错: Missing artifact jdk.tools:jdk.tools:jar:1.7 解决方法:(缺少一个jar包) http://blog.csdn.net/u013281331/article/details/40824707 Eclipse Java 自动 阅读全文
摘要:
1. awk awk -F ',' '{print $NF, $(NF-1)}' ##F 是field 2. sed 's/a1/a2/g' 1) 批量替换多个文件中的字符串命令如下:sed -i “s/原字符串/新字符串/g” `grep 原字符串 -rl 所在目录` 例如:我要把 charset 阅读全文
摘要:
1. hive表中有一列值,是以 分号 ; 为分隔符连接存储的 1470047164;1470047628;1470049068;1470048978;1470048922;1470047658;1470047628;1470047628;1470047778; 2. 使用sql语句在HUE里面直接 阅读全文
摘要:
show create table 表名; -- 可以查看表的DDL语句 describe 表名; -- 查看表的字段信息 explain dependency select count(1) from 表名; -- 可以查看表的分区依赖关系 show partitions 表名; -- 表的分区情 阅读全文
|