胡小华的博客

摘要： 1.Spark安装 1安装SCALA 1) 使用命令tar -zvxf scala-2.11.7.tgz解压该压缩包, 修改环境变量. 2) 与JDK一样，使用命令vi /etc/profile 修改环境变量的配置文件,之后使用命令 source /etc/profile，使文件修改生效。 3) 使 阅读全文

摘要： 一、系统基础环境 Centos7.4 64位系统 jdk1.8 mysql5.7.24 二、需安装的软件包 kafka_2.12-2.2.0 zookeeper-3.4.9 Python-3.6.0 （暂时不用） elasticsearch-6.2.2 scala-2.11.7 （暂时不用） spa 阅读全文

摘要： 今天项目上遇到一个多线程任务问题，大概图文描述一下： 1.前端需要及时返回任务状态 2.后台开了一个任务线程去执行具体的业务，业务包括四个部分，四个部分全部完成才算完成 3.业务中某些耗时的或者需要多线程的任务单独又开了一个线程池 4.由于任务主线程和子任务线程池是并行运行，如何知道整个业务线程什么 阅读全文

摘要： String String类是不可变类，即一旦一个String对象被创建以后，包含在这个对象中的字符序列是不可改变的，直至这个对象被销毁。 这个是String类的解释，之前小咸儿看到这个情况，不能理解上述的解释，如下 String a = "123"; a = "456"; // 打印出来的a为45 阅读全文

摘要： 本次的记录内容包括： 1.Java调用生产者APi流程 2.Kafka生产者Api的使用及说明 3.Kafka消费者Api的使用及说明 4.Kafka消费者自动提交Offset和手动提交Offset 5.自定义生产者的拦截器，分区器 那么接下来我就带大家熟悉以上Kafka的知识说明 1.Java调用 阅读全文