随笔分类 -  大数据

C#码农的大数据之路 - 使用C#编写MR作业
摘要：系列目录 写在前面 从Hadoop出现至今，大数据几乎就是Java平台专属一般。虽然Hadoop或Spark也提供了接口可以与其他语言一起使用，但作为基于JVM运行的框架，Java系语言有着天生优势。而且能找到的与大数据框架如Hadoop等使用介绍的文章也都以Java语言作为示例居多。许多C er为 阅读全文
posted @ 2017-06-05 10:19 hystar 阅读(26935) 评论(31) 推荐(51) 编辑
C#码农的大数据之路 - HDP SandBox配置及VS连接.md
摘要：在进行HDInsight的开发测试之前，搭建一个测试环境是很重要的。 由于微软与Hortonworks合作开发了HDInsgiht，如果不方便建立Azure账号使用Azure HDInsight进行开发测试（土豪可以直接选择使用Azure，的确很方便，不过HDInsight按分钟计费，走的都是真金白 阅读全文
posted @ 2017-06-02 09:55 hystar 阅读(2812) 评论(0) 推荐(2) 编辑
C#码农的大数据之路 - 使用Azure Management API创建HDInsight集群
摘要：Azure平台提供了几乎全线产品的API，可以使用第三方工具来进行管理。对于.NET更是提供封装好了的库方便使用C 等语言实现Azure的管理。 我们使用创建HDInsight集群为例来介绍使用C 管理Azure。 由于HDInsight是按照集群存在的小时收费，所以对于集群的使用都是使用时创建，使 阅读全文
posted @ 2017-05-31 14:39 hystar 阅读(1096) 评论(0) 推荐(2) 编辑
C#码农的大数据之路 - 使用Ambari自动化安装HDP2.6(基于Ubuntu16.04)并运行.NET Core编写的MR作业
摘要：准备主机 准备3台主机，名称作用如下： | 昵称 | Fully Qualified Domain Name | IP | 作用 | | : | : | : | : | | Ubuntu Parrot | head1.parrot | 192.168.9.126 | Ambari控制中心，头结点(辅 阅读全文
posted @ 2017-05-27 15:59 hystar 阅读(5594) 评论(0) 推荐(1) 编辑

点击右上角即可分享
微信分享提示