摘要:Flink实战教程:实时热门统计 实战案例介绍 本案例将实现一个“实时热门商品”的需求,我们可以将“实时热门商品”翻译成程序员更好理解的需求:每隔5分钟输出最近一小时内点击量最多的前 N 个商品。 将这个需求进行分解我们大概要做这么几件事情: 抽取出业务时间戳,告诉 Flink 框架基于业务时间做窗
阅读全文
11 2024 档案
摘要:java对时间处理进行格式化的工具 Java实现日期格式化封装类-DateConvert背景代码实现 背景无论使用什么开发语言,无论开发那种类型的项目,日期格式化都是绕不过去的一个问题,就我个人感觉java中对日期的格式化操作不如C#来的方便,因此为了弥补这块,就整理了一个工具类DateConver
阅读全文
摘要:DateUtil 处理时间工具类 /** * 获取日期中的某数值。如获取月份 * * @param date 日期 * @param dateType 日期格式 * @return 数值 */ private static int getInteger(Date date, int dateType
阅读全文
摘要:尚硅谷大数据技术之电商用户行为数据分析 尚硅谷大数据技术之电商用户画像.docx 尚硅谷大数据技术之电商用户行为分析 第1章 项目整体介绍 1.1 电商的用户行为 电商平台中的用户行为频繁且较复杂,系统上线运行一段时间后,可以收集到大量的用户行为数据,进而利用大数据技术进行深入挖掘和分析,得到感兴趣
阅读全文
摘要:Json使用 jackjson 工具类 import java.io.IOException; import java.util.ArrayList; import java.util.Iterator; import java.util.LinkedHashMap; import java.uti
阅读全文
摘要:json解析之fastjson和jackson使用对比 前言 最近项目中需要做埋点分析,首先就需要对埋点日志进行解析处理,刚好这时候体验对比了下fastjson和jackson两者使用的区别,以下分别是针对同一个json串处理,最终的效果都是将json数据解析出来,并统一展示。 一、fastjson
阅读全文
摘要:FastJSON和Jackon的区别 简介 FastJSON 和 Jackson 是两个常用的 Java 库,用于序列化和反序列化 JSON 数据。虽然它们都提供了将 Java 对象转换为 JSON 字符串,以及将 JSON 字符串转换为 Java 对象的功能,但它们在性能、特性、使用方式等方面存在
阅读全文
摘要:Jupyter Notebook与机器学习:使用Scikit-Learn构建模型 Jupyter Notebook与机器学习:使用Scikit-Learn构建模型 介绍 Jupyter Notebook是一款强大的交互式开发环境,广泛应用于数据科学和机器学习领域。Scikit-Learn是一个流行的
阅读全文
摘要:jupyter notebook 建立深度学习 模型 jupyter notebook入门 文章目录Jupyter Notebook简介创建一个新的Notebookcellcell模式快捷键Kernel简单的Python程序的例子数据分析的例子设置检查数据集使用matplotlib进行绘图分享Not
阅读全文
摘要:什么是JUPYTER?一文快速了解JUPYTER基础知识 Jupyter JUPYTER是一款开源的交互式计算环境,为数据科学家、研究人员和开发者提供了一个灵活且强大的平台,用于创建、共享和展示计算性工作。它最初由Fernando Perez于2014年推出,并得到了全球广泛的应用和认可。JUPYT
阅读全文
摘要:Jupyter的全面探索:从入门到高级应用 ,安装最常见的是使用Python的包管理器pip或Anaconda发行版 1. 引言 Jupyter项目的简介 Jupyter项目是一个开源项目,旨在为科学计算、数据分析和教育提供交互式计算和数据科学环境。它允许用户创建和共享包含实时代码、方程、可视化以及
阅读全文
摘要:为什么学习 python 最好的工具是 Jupyter ?Jupyter 在vscode 中使用 一、简介 文本适合 python 初学者,着重点在于 Jupyter 基本安装与使用。 Jupyter 是一个强大的 Python 工编程工具。编程语言交互环境,可以在浏览器中,也可以VsCode 插件
阅读全文
摘要:【学习心得】Jupyter常用操作与魔法方法 一、安装与打开 Jupyter是什么我就不啰嗦了,直接安装: pip install jupyter 安装完后,在你想要打开的项目路径下,唤出CMD执行下面命令就可以使用jupyter notebook了 jupyter notebook 也可以用更加好
阅读全文
摘要:【Python + Jupyter】安装教程: 一、安装 Python 安装 Python 没啥说的,傻瓜式点击默认选项即可: Python下载地址:https://www.python.org/downloads/windows/ (若访问不通畅,可尝试切网络,比如手机热点等) 在下载页面找到 S
阅读全文
摘要:解决常见的80/443端口被占用导致steamcommunity 302无法打开 右键单击桌面,新建一个文本文档,复制以下内容并将后缀改为.bat格式。 比如 ABC.bat. 然后用管理员权限执行。就可以用了 原理就是清理掉了占用443 和 80 端口的常用程序。 %1 mshta vbscrip
阅读全文
摘要:Flink调优之前,必须先看懂的TaskManager内存模型 Task Manager内存模型Flink的程序运行在内存中。不管是我们在学习C语言、Java语言的时候,我们都很想知道程序到底是如何管理内存的。Flink程序也一样,当我们写完Flink程序,我们需要为Flink程序分配运行的资源,那
阅读全文
摘要:Ubuntu环境下Flink的日志如何查看与分析 在生产环境中,建议将Flink日志发送到集中式日志系统(如ELK Stack、Splunk等),以便于长期存储和分析。 在Ubuntu环境下查看和分析Flink日志,你需要首先找到日志文件的存放位置 查找Flink安装目录: 通常情况下,Flink安
阅读全文
摘要:vue中使用async和await 代码示例 vue中使用异步async和await 引言async和await定义使用场景实战场景小结 引言 在我们进行实际开发中会遇到异步请求的问题,这时候我们的异步请求的存在就非常的具备合理性了!接下来将会讲述异步编程终级解决方案async/await。 这段时
阅读全文
摘要:Java常用方法:StringUtils.isNotBlank()、StringUtils.isEmpty()、去除空格的函数、手机号中间4位换成*、判断字符是否为数字 要使用工具类 StringUtils ,首先得导入依赖 <dependency> <groupId>org.apache.comm
阅读全文
摘要:android sonar 库扫描 sonarlint扫描的问题 今天要进行代码检查,所以我就装了一个插件SonarLint,先自己看看有啥问题,进行优化一下,并对遇到的问题做一个汇总SonarLint安装我用的是SonarLint,安装很好安装,我用的idea,找到setting里边的我这是安装完
阅读全文
摘要:flink job 提交到yarn 需要哪些配置文件 flink submit new job 文章目录前言Standalone模式yarn模式 前言本文介绍flink的任务提交模式。Standalone模式Web UI提交job 打开flink的Web UI,在Web UI的Submit New
阅读全文
摘要:flink部署jar包 flink提交jar包 导语 本文主要介绍58同城实时计算平台技术演进,以及基于Flink打造的一站式实时计算平台Wstream,涵盖很多实践经验、干货和方法论,希望对您有所帮助。 背景58同城作为覆盖生活全领域的服务平台,业务覆盖招聘、房产、汽车、金融、二手及本地服务等各个
阅读全文
摘要:flink Uploaded Jars 路径 flink提交jar包 漏洞描述:2019年11月11号,安全工程师Henry Chen披露了一个Apache Flink未授权上传jar包导致远程代码执行的漏洞。由于Apache Flink Dashboard 默认无需认证即可访问,通过上传恶意jar
阅读全文
摘要:Java 中 Stream 流的使用方法 目录 一、Stream 的概念 二、Stream 的特点 三、Stream 的使用步骤 1、Stream 的创建 1.1、通过Collection对象的stream()或parallelStream()方法 1.1.1、stream() 和 parallel
阅读全文
摘要:Flink日志输出查看方式 在网上查看flink日志查看方式,竟然查询不到,因此写下这篇文章,给有此困惑的小盆友们,也给自己做个总结! 前情提要: 我是通过flink web ui提交的flink任务的,因此通过flink ui查看自身控制台打印输出的。 第一步:打开flink的Dashboard
阅读全文