随笔分类 -  spark

摘要：史上最全的spark面试题——持续更新中 2018年09月09日 16:34:10 为了九亿少女的期待 阅读数 13696更多 分类专栏： Spark 面试题 史上最全的spark面试题——持续更新中 2018年09月09日 16:34:10 为了九亿少女的期待 阅读数 13696更多 分类专栏：  阅读全文

摘要：Dataflow编程模型和spark streaming结合 主要介绍一下Dataflow编程模型的基本思想，后面再简单比较一下Spark streaming的编程模型 == 是什么 == 为用户提供以流式或批量模式处理海量数据的能力，该服务的编程接口模型（或者说计算框架）也就是下面要讨论的data 阅读全文

摘要：Spark 的情感分析 本文描述了基于 Spark 如何构建一个文本情感分析系统。文章首先介绍文本情感分析基本概念和应用场景，其次描述采用 Spark 作为分析的基础技术平台的原因和本文使用到技术组件，然后介绍基于 Spark 如何构建文本情感分析系统，最后提出几种提高正确率的方法。 9 评论 Sp 阅读全文

摘要：package com.icklick.spark.wordSegment import org.apache.log4j.{ Level, Logger } import org.apache.spark.{ SparkConf, SparkContext } import com.iclick. 阅读全文

摘要：Spark Streaming实例分析 Spark Streaming实例分析 2015-02-02 21:00 4343人阅读 评论(0) 收藏 举报 2015-02-02 21:00 4343人阅读 评论(0) 收藏 举报 分类： spark（11） 分类： spark（11） 转载地址：htt 阅读全文

摘要：HADOOP:WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable WARN util.Nat 阅读全文

摘要：Hadoop 启动节点Datanode失败解决 [日期：2014-11-01] 来源：Linux社区 作者：shuideyidi [字体：大 中 小] 当我动态添加一个Hadoop从节点的之后，出现了一个问题： [root@hadoop current]# hadoop-daemon.sh star 阅读全文