摘要：
20/12/12 15:49:47 ERROR SparkContext: Error initializing SparkContext. java.lang.IllegalArgumentException: System memory 259522560 must be at least 47 阅读全文
摘要：
一.Redis概念 NoSQL Not Only SQL,泛指非关系型数据库 Memcache：这是一个和Redis非常相似的数据库，但是它的数据类型没有Redis丰富。Memcache由LiveJournal的Brad Fitzpatrick开发，作为一套分布式的高速缓存系统，被许多网站使用以提升 阅读全文
摘要：
spark运行流程: 1.构建Spark Application的运行环境（启动Driver），Driver(SparkContext)向资源管理器（可以是Standalone、Mesos或YARN）注册并申请运行Executor资源； 2.资源管理器分配Executor资源并启动Standalon 阅读全文
摘要：
一.kafka概念 kafka是 分布式,支持分区的,多副本的基于zookeeper协调的分布式消息系统 DMQ(Distributed Message Queue) DMQ是一个消息中间件，传递消息 发布-订阅模式(生产者-消费者) 二.常见术语 Broker： Kafka节点，一个Kafka节点 阅读全文
摘要：
一.作用: 判断一个元素是否存在一个集合中 二.基本原理通俗: 当一个元素被加入集合时，通过K个Hash函数将这个元素映射成一个一维的布尔型的数组中的K个点，把它们置为1。检索时，我们只要看看这些点是不是都是1就（大约）知道集合中有没有它了：如果这些点有任何一个0，则被检元素一定不在；如果都是1，则 阅读全文
摘要：
一.Redis概念 NoSQL Not Only SQL,泛指非关系型数据库 Memcache：这是一个和Redis非常相似的数据库，但是它的数据类型没有Redis丰富。Memcache由LiveJournal的Brad Fitzpatrick开发，作为一套分布式的高速缓存系统，被许多网站使用以提升 阅读全文
摘要：
一.Redis概念 NoSQL Not Only SQL,泛指非关系型数据库 Memcache：这是一个和Redis非常相似的数据库，但是它的数据类型没有Redis丰富。Memcache由LiveJournal的Brad Fitzpatrick开发，作为一套分布式的高速缓存系统，被许多网站使用以提升 阅读全文
摘要：
Tomcat服务器端口 Tomcat所有配置都在conf文件夹下,server.xml是核心文件 <Connector port="8080" protocol="HTTP/1.1" connectionTimeout="20000" redirectPort="8443" /> 可以直接在此修改端 阅读全文
摘要：
1.理解io,多线程,集合等基础框架,对JVM原理有一定了解,熟练掌握,java核心编程技术; 2.对用过的开源框架能了解他的原理和机制; 3.熟悉分布式系统的设计和应用,熟悉分布式,缓存,消息等机制;能对分布式常用技术进行合理的应用,解决问题; 4.熟悉internet基本协议(如TCP/IP,H 阅读全文
摘要：
JVM 源码 → 字节码文件 classloader装载 类的加载过程: 装载 查找并装载类型的二进制数据 链接 verify, 验证确保class文件字节流中信息符合当前虚拟机要求 prepare,为类变量分配内存并将其初始化为默认初始值 ①类变量(也叫静态变量): 被 static 修饰的变量; 阅读全文