2017年3月14日
Hive_on_Spark安装配置详解
摘要： 简介 本文主要记录如何安装配置Hive on Spark，在执行以下步骤之前，请先确保已经安装Hadoop集群，Hive，MySQL，JDK，Scala，具体安装步骤不再赘述。 背景 Hive默认使用MapReduce作为执行引擎，即Hive on mr。实际上，Hive还可以使用Tez和Spark 阅读全文
posted @ 2017-03-14 12:09 _夜枫 阅读(1719) 评论(0) 推荐(0) 编辑
深入MaxCompute理解数据、运算和用户的大脑：基于代价的优化器
摘要： 回顾大数据技术领域大事件，最早可追溯到06年Hadoop的正式启动，而环顾四下，围绕着数据库及数据处理引擎，业内充斥着各种各样的大数据技术。这是个技术人的好时代，仅数据库领域热门DB就有300+，围绕着Hadoop生态圈的大数据处理技术更是繁花似锦。在云栖社区2017在线技术峰会大数据技术峰会上，阿 阅读全文
posted @ 2017-03-14 12:05 _夜枫 阅读(727) 评论(0) 推荐(0) 编辑
非常复杂，上双11数据大屏背后的秘密：大规模流式增量计算及应用
摘要： 回顾大数据技术领域大事件，最早可追溯到06年Hadoop的正式启动，而环顾四下，围绕着数据库及数据处理引擎，业内充斥着各种各样的大数据技术。这是个技术人的好时代，仅数据库领域热门DB就有300+，围绕着Hadoop生态圈的大数据处理技术更是繁花似锦。在云栖社区2017在线技术峰会大数据技术峰会上，阿 阅读全文
posted @ 2017-03-14 11:59 _夜枫 阅读(401) 评论(0) 推荐(0) 编辑
2017年3月7日
【机器学习快速入门】简单自学机器学习理论
摘要： 【机器学习快速入门】简单自学机器学习理论 机器学习理论——part I 前言 （第II部分内容点此；第III部分内容点此） 动机 大多数人在小的时候被魔术师以及魔术技巧所迷住，并想弄明白其中的奥秘。有些人会带着这份迷恋研究到更深处并学习魔术技巧，有些人会接受专业的训练，而其他人会继续平庸下去。我在年 阅读全文
posted @ 2017-03-07 11:09 _夜枫 阅读(1486) 评论(0) 推荐(0) 编辑
车辆追踪算法大PK：SVM+HOGvs.YOLO
摘要： 介绍 对于Udacity（优达学城）自动驾驶汽车纳米学位的汽车检测和跟踪项目，如果使用传统的计算机可视化技术将是一个挑战，就像方向梯度直方图（Histogram of Oriented Gradients，HOG）和其它特征组合在一起在视频里跟踪汽车一样，理想的解决方案应该是实时运行的，如>30FP 阅读全文
posted @ 2017-03-07 11:07 _夜枫 阅读(2357) 评论(0) 推荐(0) 编辑
简单入门——深度学习笔记
摘要： 神经网络 神经网络的结构就像任何其他网络。 它是一系列互连的节点，称为神经元和边缘，并将它们连接在一起。 主要功能是接收一组输入执行逐步复杂的计算并使用输出来解决问题。 分类是其中的一个应用。分类是对一组对象进行分类，而只使用描述它们的一些基本数据特征。 分类器的例子 - 逻辑回归，支持机器向量（S 阅读全文
posted @ 2017-03-07 11:01 _夜枫 阅读(209) 评论(0) 推荐(0) 编辑
2017年3月6日
有技术有热情就来阿里云论坛任职吧
摘要： 有技术有热情就来阿里云论坛任职吧 阿里云论坛是云栖社区旗下论坛，为广大站长、开发者提供技术交流和应用分享的服务平台 阿里云现邀请有技术有热情的同学加入我们管理大家庭，分享技术经验，一起为论坛用户提供技术支持，共同管理论坛事务。 论坛版主福利： 1、拥有阿里云新品的优先试用资格； 2. 可以结识志同道 阅读全文
posted @ 2017-03-06 17:27 _夜枫 阅读(145) 评论(0) 推荐(0) 编辑
2017年1月17日
React 入门实例教程
摘要： 现在最热门的前端框架，毫无疑问是 React 。 上周，基于 React 的 React Native 发布，结果一天之内，就获得了 5000 颗星，受瞩目程度可见一斑。 React 起源于 Facebook 的内部项目，因为该公司对市场上所有 JavaScript MVC 框架，都不满意，就决定自 阅读全文
posted @ 2017-01-17 14:06 _夜枫 阅读(130) 评论(0) 推荐(0) 编辑
拒绝跟风，看机器学习、数据科学、人工智能、深度学习、统计学等的区别
摘要： 因为数据科学是个广义的学科，所以这里将从任何业务里都可能会遇到的数据科学家类型开始，通过这个部分或许你能发现自己隐藏的数据科学家潜质：）正如任何科学学科一样，数据科学家也可能向相关学科学习借鉴，尽管数据科学已经有自己的部分，尤其是自动处理超大规模非结构化数据的方式和算法，甚至不需要人为干涉，就可以做 阅读全文
posted @ 2017-01-17 14:05 _夜枫 阅读(338) 评论(0) 推荐(0) 编辑
墨迹天气的大数据之路
摘要： 案例篇 一、 轻松处理每天2TB的日志数据，支撑运营团队进行大数据分析挖掘，随时洞察用户个性化需求 墨迹天气的API每天产生的日志量大约在2TB左右，主要的日志分析场景是天气查询业务和广告业务。整个过程中数据量庞大，且计算复杂，这对云平台的大数据能力、生态完整性和开放性提出了很高的要求。之前墨迹使用 阅读全文
posted @ 2017-01-17 14:04 _夜枫 阅读(1339) 评论(0) 推荐(0) 编辑