奔跑的蜗牛

摘要： 原因：因为IDEA打包时候MAVEN内存不足，导致打包失败，如下图： 解决办法： 1： 2： 3：经过上述的两个步骤之后，会出来一个自定义的package打包按钮，双击即可 阅读全文

摘要： package com.qf.utils;import kafka.javaapi.producer.Producer;import kafka.producer.KeyedMessage;import kafka.producer.ProducerConfig;import kafka.seria 阅读全文

摘要： package com.qf.spark.scalaimport java.sql.{Connection, DriverManager}import java.util/** * 连接池 */object ConnectionPoolUtil { /** * 需要设置的连接池数据 */ priva 阅读全文

摘要： 如果javaapi长时间消费不到数据，需要在kafka集群中的server.properties配置如下代码： # Hostname the broker will advertise to producers and consumers. If not set, i$ # value for "h 阅读全文

摘要： RDB:如果我们配置这样的方式，那么它的效率很高，因为不需要每一步都存储，执行效率低，相当于快照一样，但是它有缺点，因为当我们达到配置的要求时，它不会执行存储，那么突然宕机，数据将无法恢复 AOF：如果我们用AOF方式，那么这种方式将保存你的持久化数据完整性，但是效率低，因为每次都会存储，根据你的执 阅读全文

摘要： SparkStreaming的Receiver方式和直连方式的区别？Receiver接收固定时间间隔的数据(放在内存中的)，使用kafka高级API，自动维护偏移量， 达到固定时间才能进行处理，效率低下（），并且容易丢失数据 Direct直连方式，相当于直连连接到Kafka的分区上，使用Kafka底 阅读全文

摘要： /** * 二分法查找 * .二分查找要求：（1）必须采用顺序存储结构 （2）.必须按关键字大小有序排列 * 原理：将数组分为三部分，依次是中值（所谓的中值就是数组中间位置的那个值）前， * 中值，中值后；将要查找的值和数组的中值进行比较，若小于中值则在中值前 面找， * 若大于中值则在中值后面找， 阅读全文

摘要： 一、shell介绍： shell是一个用C语言编写的程序，它被称为用户使用linux的桥梁。 Shell既是一种命令语言，又是一种程序设计语言。 Shell 脚本(shell script)，是一种为shell编写的脚本程序。 二、shell运行环境和运行方式 1、shell编程和java、php等 阅读全文

摘要： package main.com.qianfeng.utils;import java.security.NoSuchAlgorithmException;public class Md5Utils { public static String getMD5(byte[] source) { Str 阅读全文

摘要： 1.点击File按钮 2.点击Project Structure.... 3.选择modules按钮 4.点击Dependecies按钮 5.点击右上角的加号，选择第一行 6.选择jar包所在的位置，然后记得apply，再点击ok哦。 7.然后你就能在 External Liberaies中看到自己 阅读全文