dy9776

摘要： Spark MLlib底层的向量、矩阵运算使用了Breeze库，Breeze库提供了Vector/Matrix的实现以及相应计算的接口（Linalg）。但是在MLlib里面同时也提供了Vector和Linalg等的实现。 使用需导入： 1 2 Breeze创建函数 1 DenseMatrix[Dou 阅读全文

摘要： 1.看到 这篇总结的这么好， 就悄悄的转过来，供学习 wordcount.toDebugString查看RDD的继承链条所以广义的讲，对任何函数进行某一项操作都可以认为是一个算子，甚至包括求幂次，开方都可以认为是一个算子，只是有的算子我们用了一个符号来代替他所要进行的运算罢了，所以大家看到算子就不要 阅读全文

摘要： 1.为了 能够方便记忆， 总结一下。 2. 并行软件平台，不是 一个。 （1）这个特别熟悉的 以 hadoop 为平台的 生态系统 （2）还有以 微软的 并行软件平台 生态系统 (3) 还有LexisNexis公司的 基于 C++ 开发的 HPCC 下面补充（1） 有介绍 补充说明： （一）HPCC 阅读全文

摘要： 1. C++ 1.1 计算机视觉 CCV —基于C语言/提供缓存/核心的机器视觉库，新颖的机器视觉库 OpenCV—它提供C++, C, Python, Java 以及 MATLAB接口，并支持Windows, Linux, Android and Mac OS操作系统。 1.2 机器学习 MLPa 阅读全文

摘要： 规范化，有关之前都是用 python写的， 偶然要用scala 进行写， 看到这位大神写的， 那个网页也不错，那个连接图做的还蛮不错的，那天也将自己的博客弄一下那个插件。 本文来源 原文地址：http://www.neilron.xyz/spark-ml-feature-scaler/ 下面是大神写 阅读全文

摘要： 这下面的练习中，需要自己将spark的jar包 添加进来。 1.spark Mlib 底层使用的向量、矩阵运算使用了Breeze库。 scalaNLP 是一套 机器学习和数值技算的库。它主要是关于科学技术（sc）、机器学习（ML）和自然语言处理（NLP)的。它包括三个库，Breeze、Epic 和 阅读全文

摘要： 前言：同学告我说，他为了能使得数据查询变得快一点，修改的数据引擎，故查询一下，总结一下。 登录mysql后，查看当前数据库支持的引擎和默认的数据库引擎，使用下面命令： mysql>show engines; 修改命令：（对单个表修改） alter table user ENGINE =MyISAM; 阅读全文

摘要： 1.传统的SQL数据库有3个缺点 许可费用昂贵 不能自动Sharding 严格的Schema 许可费用昂贵 不能自动Sharding 严格的Schema 2. 关系型数据库和非关系型数据库在使用场景上差别比较大，所以并不存在孰强孰弱，只有结合自身的业务特点才能发挥出这两类数据库的优势，下面说说这两类 阅读全文

摘要： http://www.jb51.net/article/62654.htm 1.MongoDB 数据库级锁 MongoDB的锁机制和一般关系数据库如 MySQL（InnoDB）, Oracle 有很大的差异，InnoDB 和 Oracle 能提供行级粒度锁，而 MongoDB 只能提供 库级粒度锁， 阅读全文

摘要： package com.app.common; import java.io.ByteArrayOutputStream; import java.io.File; import java.io.FileInputStream; import java.io.IOException; import java.io.InputStream; import java.io.OutputStream... 阅读全文