摘要： 简介： 1，transformation是得到一个新的RDD，方式很多，比如从数据源生成一个新的RDD，从RDD生成一个新的RDD 2，action是得到一个值，或者一个结果（直接将RDDcache到内存中） 所有的transformation都是采用的懒策略，就是如果只是将transformati 阅读全文

摘要： 转自 https://www.csdn.net/article/2014-05-19/2819831-TDW-Shuffle/1 摘要：腾讯分布式数据仓库基于开源软件Hadoop和Hive进行构建,TDW计算引擎包括两部分：MapReduce和Spark，两者内部都包含了一个重要的过程—Shuffl 阅读全文

摘要： 顾名思义，从字面理解RDD就是 Resillient Distributed Dataset，即弹性分布式数据集。 它是Spark提供的核心抽象。 RDD在抽象上来讲是一种抽象的分布式的数据集。它是被分区的，每个分区分布在集群中的不同的节点上。从而可以让数据进行并行的计算 它主要特点就是弹性和容错性 阅读全文

摘要： 天眼通 http://www.tianyantong.win/tyt/web/index/introduce 阅读全文

摘要： 今天碰到比较奇怪的问题： 总是报错，试了网上说的 第一种：修改配置文件spark-env.sh,把临时文件引入到一个自定义的目录中去即可 export SPARK_LOCAL_DIRS=/home/utoken/datadir/spark/tmp 第二种：偷懒方式，针对tmp目录不启用tmpfs,直 阅读全文

摘要： 屏幕录像专家修改“录音来源” 选择Line1 阅读全文

摘要： 选择器是jQuery最基础的东西，本文中列举的选择器基本上囊括了所有的jQuery选择器，也许各位通过这篇文章能够加深对jQuery选择器的理解，它们本身用法就非常简单，我更希望的是它能够提升个人编写jQuery代码的效率。本文配合截图、代码和简单的概括对所有jQuery选择器进行了介绍，也列举出了一些需要注意和区分的地方。一、基本选择器1. id选择器（指定id元素）将id="one"的元素背景色设置为黑色。（id选择器返单个元素）$(document).ready(function () { $('#one').css('background&# 阅读全文

摘要： Sql Server一共提供了30多个全局变量常用:@@IDENTITY : 返回最后插入行的标识列的列值。 ＠＠ERROR : 返回最后执行的Transact-SQL语句的错误代码。没有错误则为零@@ROWCOUNT : 返回受上一语句影响的行数，任何不返回行的语句将这一变量设置为0。 @@DBTS : 返回当前数据库的时间戳值必须保证数据库中时间戳的值是惟一的。 @@SERVERNAME : 返回运行SQL Server 2000本地服务器的名称。 @@REMSERVER : 返回登录记录中记载的远程SQL Server服务器的名称。 ＠＠CONNECTIONS : 返回自上次启动SQL 阅读全文

摘要： 对象初始化顺序如下： 静态构造方法被调用 派生类静态成员初始化 派生类静态构造方法被调用 派生类实例成员初始化 基类静态成员初始化 基类静态构造方法被调用 基类实例成员初始化 基类实例构造方法被调用 派生类实例构造方法被调用 归纳结论： 子类的静态字段→子类静态构造函数→子类的实例字段→跳到子类构造函数入口，并跳转到父类→父类静态字段→父类静态构造函数→父类实例字段→父类构造函数→执行子类的构造函数 阅读全文

摘要： 标准顺序的 SQL 语句为: select 考生姓名, max(总成绩) as max总成绩 from tb_Grade where 考生姓名 is not null group by 考生姓名 having max(总成绩) > 600 order by max总成绩 在上面的示例中 SQL 语句的执行顺序如下: (1). 首先执行 FROM 子句, 从 tb_Grade 表组装数据源的数据 (2). 执行 WHERE 子句, 筛选 tb_Grade 表中所有数据不为 NULL 的数据 (3). 执行 GROUP BY 子句, 把 tb_Grade ... 阅读全文