摘要:
标签(空格分隔): Spark 还记得上次的 程序嘛?通过这个小程序,我们来一窥Spark的框架是什么样子的。 sc.textFile("/usr/local/Cellar/apache spark/1.3.0/README.md").flatMap(line = line.split(" ")). 阅读全文
摘要:
标签(空格分隔): Spark 学习中的知识点:函数式编程、泛型编程、面向对象、并行编程。 任何工具的产生都会涉及这几个问题: 1. 现实问题是什么? 2. 理论模型的提出。 3. 工程实现。 思考: 数据规模达到一台机器无法处理的时候,如何在有限的时间内对整个数据集进行遍历及分析? Google针 阅读全文
摘要:
标签(空格分隔): Python 读入读出通常可以划分为几个大类:读取文本文件和其他更高效的磁盘存储格式,加载数据库中的数据,利用Web API操作网络资源。 读写文本格式的数据 pandas提供了一些用于将表格型数据读取为DataFrame对象的函数,如下表所示: |函数|说明| |: :|: : 阅读全文
摘要:
标签(空格分隔): Python 数据结构 首先引入需要使用的模块 from pandas import Series, DataFrame import pandas as pd Series Series类似于一维数组的对象,由一组数据以及一组与之相关的数据标签组成。传入一个数组,将会创建一个0 阅读全文
摘要:
标签(空格分隔): Python 安装pip 正如管理Java Project的Maven,管理Scalar Project的sbt一样,Python也有其管理工具 pip,也是今天我们的主角哦~ #下载最新版本的源码 https://pypi.python.org/pypi/pip 解压 tar 阅读全文
摘要:
标签(空格分隔): Python Python简介 Python是一种面向对象、解释型计算机程序设计语言。 Python开发环境和编辑工具 Windows:编辑器是Python IDE; Linux:自带Python解释器,编辑器为vi. Python的输入输出 输入:变量,控制台; 输出:显示,文 阅读全文
摘要:
reactive turtle 标签(空格分隔): Scala Github 偶然在Github上看到一个有意思的小项目,一个粑粑教11岁的儿子学习scala,因为学习语法等太枯燥了,所以写了一个海龟的小游戏,跟儿子一起学习。(我也要酱紫的粑粑!!) 链接 [https://github.com/k 阅读全文
摘要:
标签(空格分隔): DeepLearning mnist mnist是一个数据集,其中包含很多手写数字的图片,每张图片都已经打上了label; Deep Learning 传统的机器学习神经网络由一层输入层和一个输出层构成,中间最多还包含一个隐藏层。包括输入和输出层在内,超过三层的神经网络就被称为D 阅读全文
摘要:
标签(空格分隔): DeepLearning 在Mac上装DP4j 1. 安装Java 因为DP4j是基于JVM的,所以要先安装一下Java。 使用命令行 并且在 文件中配置 。 MAC OSX的环境变量加载顺序为: df 其中, 是系统级的,系统启动就会自动加载,后面几个是用户级额环境变量,因为电 阅读全文
摘要:
标签(空格分隔): 学习笔记 Maven的 聚合特性 能够把项目的各个模块聚合在一起构建; Maven的 继承特性 能够帮助抽取各模块相同的依赖和插件等配置,在简化POM的同时,还能够促进各个模块配置的一致性。 account persist模块 POM文件 4.0.0 com.park.mvnDe 阅读全文