冰封♀啸

摘要： 1，transformation是得到一个新的RDD，方式很多，比如从数据源生成一个新的RDD，从RDD生成一个新的RDD 2，action是得到一个值，或者一个结果（直接将RDD cache到内存中） 所有的transformation都是采用的懒策略，就是如果只是将transformation提 阅读全文

摘要： RDD是什么？ RDD是Spark中的抽象数据结构类型，任何数据在Spark中都被表示为RDD。从编程的角度来看，RDD可以简单看成是一个数组。和普通数组 的区别是，RDD中的数据是分区存储的，这样不同分区的数据就可以分布在不同的机器上，同时可以被并行处理。因此，Spark应用程序所做的无非是把需要 阅读全文

摘要： 主类 User 单方 从类 UserIp 多方要求结果：操作USER类，自动添加USERIP并维护关联关系 为了节省篇幅，忽略了get/set方法 请自行添加 User类代码: public class User { /**用户的ID*/ private long id; /**登录用户名*/ pr 阅读全文

摘要： 配置文件参数说明: 1. Redis默认不是以守护进程的方式运行，可以通过该配置项修改，使用yes启用守护进程 daemonize no2. 当Redis以守护进程方式运行时，Redis默认会把pid写入/var/run/redis.pid文件，可以通过pidfile指定 pidfile /var/... 阅读全文

摘要： 本文大部分内容是从网络收集过来，根据这些资料中，已配置成功从图可以看到 地址栏的URL相同，但是实际服务器返回的自己的IP却不同，证明访问的不同的服务器；nginx的主要配置文件是nginx.conf，位于安装目录下的nginx/conf文件夹里，主要的配置参数如下：#定义Nginx运行的用户和用户... 阅读全文

摘要： 因为本人不是很懂linux，所以安装步骤是从网上找的一些资料整合后，才部署成功，现将步骤记录下来部署安装nainx环境：pcre（作用rewrite）、zlib（作用压缩）、ssl、gccyum -y install zlib;yum –y install pcre;yum –y install o... 阅读全文