摘要: 本文是以kafka0.8.2.2为例讲解 一,如何删除一个topic 删除一个topic有两个关键点: 1,配置删除参数 delete.topic.enable这个Broker参数配置为True。 2,执行 bin/kafka-topics.sh --zookeeper zk_host:port/c 阅读全文
posted @ 2018-09-12 11:09 马竹君 阅读(471) 评论(0) 推荐(0) 编辑
摘要: 具体细节?浪院长 | spark streaming的使用心得 的作用是提供线程内的局部变量,这种变量在线程的生命周期内起作用,减少同一个线程内多个函数或者组件之间一些公共变量的传递的复杂度。但是如果滥用 ,就可能会导致内存泄漏。下面,我们将围绕三个方面来分析 内存泄漏的问题 ThreadLocal 阅读全文
posted @ 2018-09-12 11:08 马竹君 阅读(995) 评论(1) 推荐(0) 编辑
摘要: 摘要:消息队列Kafka是一个分布式的、高吞吐量、高可扩展性消息队列服务,广泛用于日志收集、监控数据聚合、流式数据处理、在线和离线分析等,是大数据生态中不可或缺的产品之一。本文就将带你走进消息队列Kafka。本文摘自阿里云栖社区。以下内容根据演讲视频以及PPT整理而成。视频分享 http://cli 阅读全文
posted @ 2018-09-12 11:07 马竹君 阅读(3789) 评论(0) 推荐(0) 编辑
摘要: 今天,主要想聊聊spark streaming的使用心得。 1,基本使用 主要是转换算子,action,和状态算子,这些其实,就按照api手册或者源码里接口介绍结合业务来编码。 其实,想用好spark streaming 掌握spark core,spark rpc,spark 任务调度,spark 阅读全文
posted @ 2018-09-12 11:05 马竹君 阅读(480) 评论(0) 推荐(0) 编辑
摘要: 本文会主要讲三种udf: 用户自定义函数是非常重要的一个特征,因为他极大地扩展了查询的表达能力。本文除了介绍这三种udf之外,最后会介绍一个redis作为交互数据源的udf案例。 注册用户自定义函数 在大多数场景下,用户自定义函数在使用之前是必须要注册的。对于Scala的Table API,udf是 阅读全文
posted @ 2018-09-12 11:04 马竹君 阅读(1439) 评论(0) 推荐(0) 编辑
摘要: 本文从梯度学习算法的角度中看学习率对于学习算法性能的影响,以及介绍如何调整学习率的一般经验和技巧。 在机器学习中,监督式学习(Supervised Learning)通过定义一个模型,并根据训练集上的数据估计最优参数。梯度下降法(Gradient Descent)是一个广泛被用来最小化模型误差的参数 阅读全文
posted @ 2018-09-12 11:03 马竹君 阅读(11285) 评论(0) 推荐(0) 编辑
摘要: 时间是不可逆的,我们不可能经历之后,然后再返回来修正自己过去的行为,但是我们可以通过观察不同时间段的相同职业人的现状来修正自己。 最近一段时间,浪尖忙于招人面试,在面试别人的过程中收获了很多,我相信被我面试的人也会收获很多。 面试者的工作经验有十年以上的,有五六年,还有两三年的,每个年龄段都有自己的 阅读全文
posted @ 2018-09-12 11:01 马竹君 阅读(575) 评论(0) 推荐(0) 编辑
摘要: 算法一:穷举式地尝试所有的可能 算法复杂度为O(n^3)(三重for循环) 算法二:算法一的改进 该算法去除了算法一中不必要的计算,时间复杂度为O(n^2)(两重for循环)。 分治策略: 分:把问题分成若干个(通常是两个)规模相当的子问题,然后递归地对它们求解。 治:将若干个问题的解4合并到一起并 阅读全文
posted @ 2018-09-12 11:00 马竹君 阅读(200) 评论(0) 推荐(0) 编辑
摘要: 导读:本文来自于知乎问题“低学历是否比高学历更加会赚钱?”被赞最高的答案,答主就读于伦敦政治经济学院公共健康政策与健康经济学专业,利用国内外各类统计数据驳斥“读书无用论”。 “受教育程度高的人,就是更有钱,就是更健康,就是更道德。” 写在最前面的话:毋庸置疑这篇文章触痛了某些人,毕竟很多人想要快乐地 阅读全文
posted @ 2018-09-12 10:59 马竹君 阅读(302) 评论(0) 推荐(0) 编辑
摘要: 参考:51CTO(id:weixin51cto)、乐职微猎头等 你是不是还在怀念曾经逝去的高三,遗憾自己没有超常发挥,或者遗憾自己志愿表没有填好。其实,只要志愿选的好,年年期末像高考。 比如,你选择了计算机专业,那么你将面临高等数学、线性代数、C语言、计算机引论、离散数学、电子技术、C++程序设计、 阅读全文
posted @ 2018-09-12 10:55 马竹君 阅读(338) 评论(0) 推荐(0) 编辑
友情链接:回力 | 中老年高档女装 | 武汉雅思培训 | 武汉托福 | 武汉sat培训