2020年5月10日
flink的安装模式
摘要： Flink 常见的部署模式：本地模式、Standalone 模式和 Flink On Yarn 模式，然后分别讲解三种模式的使用场景和部署中常见的问题，最后将讲解在生产环境中 Flink 集群的高可用配置。 Flink 常见的部署模式环境准备在绝大多数情况下，我们的 Flink 都是运行在 Unix 阅读全文
posted @ 2020-05-10 22:20 黑小莲花 阅读(577) 评论(0) 推荐(0) 编辑
flinksql与table
摘要： 分别从 Flink Table & SQL 的背景和编程模型、常见的 API、算子和内置函数等对 Flink Table & SQL 做一个详细的讲解和概括，最后模拟了一个实际业务场景使用 Flink Table & SQL 开发。 Flink Table & SQL 概述背景我们在前面的课时中讲过 阅读全文
posted @ 2020-05-10 21:54 黑小莲花 阅读(1026) 评论(0) 推荐(0) 编辑
flink常用的API
摘要： Flink 的 DataSet 和 DataStream 的 API，并模拟了实时计算的场景，详细讲解了 DataStream 常用的 API 的使用。 说好的流批一体呢现状在前面的课程中，曾经提到过，Flink 很重要的一个特点是“流批一体”，然而事实上 Flink 并没有完全做到所谓的“流批一体 阅读全文
posted @ 2020-05-10 20:34 黑小莲花 阅读(1172) 评论(0) 推荐(0) 编辑
2020年5月6日
Flink 的编程模型与其他框架比较
摘要： Flink 的核心语义和架构模型我们在讲解 Flink 程序的编程模型之前，先来了解一下 Flink 中的 Streams、State、Time 等核心概念和基础语义，以及 Flink 提供的不同层级的 API。 Flink 核心概念Streams（流），流分为有界流和无界流。有界流指的是有固定大小 阅读全文
posted @ 2020-05-06 22:54 黑小莲花 阅读(210) 评论(0) 推荐(0) 编辑
初识flink
摘要： 传统的分析方式通常是利用批查询，或将事件（生产上一般是消息）记录下来并基于此形成有限数据集（表）构建应用来完成。为了得到最新数据的计算结果，必须先将它们写入表中并重新执行 SQL 查询，然后将结果写入存储系统比如 MySQL 中，再生成报告。 Apache Flink 同时支持流式及批量分析应用，这 阅读全文
posted @ 2020-05-06 21:37 黑小莲花 阅读(208) 评论(0) 推荐(0) 编辑
2020年1月16日
idea 自身添加依赖及打成jar包
摘要： 添加依赖 1：file--》project structure--》moudle--》+项目名--》dependencies--》+指定集成下载好的依赖路径--》ok即好 打成jar包 2：file--》project structure--》artifacts--》+项目名--》填写主工程类名-- 阅读全文
posted @ 2020-01-16 17:09 黑小莲花 阅读(1239) 评论(0) 推荐(0) 编辑
2020年1月13日
推荐系统技术演进趋势：召回->排序->重排
摘要： 导读：推荐系统技术，总体而言，与 NLP 和图像领域比，发展速度不算太快。不过最近两年，由于深度学习等一些新技术的引入，总体还是表现出了一些比较明显的技术发展趋势。这篇文章试图从推荐系统几个环节，以及不同的技术角度，来对目前推荐技术的比较彰显的技术趋势做个归纳。个人判断较多，偏颇难免，所以还请谨慎参 阅读全文
posted @ 2020-01-13 18:43 黑小莲花 阅读(3269) 评论(0) 推荐(0) 编辑
机器学习关键的6点
摘要： 导读 机器学习是未来，因为它将广泛应用于计算机和其他领域。尽管如此，开发有效的机器学习应用需要大量的“黑魔法”，这在手册中很难找到。 在机器人技术、智能家电、智能零售店、自动驾驶汽车技术等的推动下，我们正步入一个新时期。机器学习是所有这些新时代技术进步的前沿。在不久的将来，自动化机器的发展将使得机器 阅读全文
posted @ 2020-01-13 16:54 黑小莲花 阅读(419) 评论(0) 推荐(0) 编辑
2020年1月7日
python___jupyter改变文件保存路径
摘要： 一定一定一定要把Jupyter Notebook 的属性的 目标（T） 中的 %USERPROFILE% 删掉！！！！ 否则怎么改都是没用的！！没用的！！没用的！！时间就这样浪费啦！！（浪费了一个多小时的菜鸡已哭晕。。哎。。还是菜啊） 一、 修改配置文件。 文件名叫 jupyter_notebook 阅读全文
posted @ 2020-01-07 11:08 黑小莲花 阅读(914) 评论(0) 推荐(0) 编辑
2019年12月25日
spark_Sql(大全)
摘要： 不好意思啊 飞一波 https://blog.csdn.net/dabokele/article/details/52802150 阅读全文
posted @ 2019-12-25 15:53 黑小莲花 阅读(83) 评论(0) 推荐(0) 编辑