ZooKeeper 学习笔记

博主头像 概述 ZooKeeper 是一个分布式协调服务，其设计初衷是为分布式软件提供一致性服务。ZooKeeper 提供了一个类似 Linux 文件系统的树形结构，ZooKeeper 的每个节点既可以是目录，也可以是数据，同时 ZooKeeper 提供了对每个节点的监控与通知机制。基于 ZooKeeper ...

Rust字符串类型全解析

博主头像 字符串是每种编程语言都绕不开的类型， 不过，在Rust中，你会看到远比其他语言更加丰富多样的字符串类型。 如下图： 为什么Rust中需要这么多种表示字符串的类型呢？ 初学Rust时，可能无法理解为什么要这样设计？为什么要给使用字符串带来这么多不必要的复杂性？ 其实，Rust中对于字符串的设计，优先考 ...

树形结构工具类

博主头像 前言 日常开发中，树形结构的数据是比较常见的一种数据结构，比如系统菜单、组织机构、数据字典等，有时候需要后端把数据转成树形结构再返回给前端，对此特意封装通用树形结构工具类 封装了以下方法： 根据父id，递归获取所有子节点，转为树结构 根据子id，递归获取所有父节点，转为树结构 拼接 union sq ...

裁员，这一次终于轮到了我

博主头像 新产品发行失利，流水逐渐下滑，裁员成了公司不可避免的选择，看着身边朝夕相处的同事一个个离开，甚至还要亲自去跟团队内的同事谈离职，真的很不是滋味。好在这一切即将结束，我也要走了，公司给了足额的赔偿，我觉得挺好，于我而言，这是最好的结果。公司如果赚钱，即便不会多发给我，那我也是干劲十足，我会觉得我的工作 ...

大模型训练：K8s 环境中数千节点存储最佳实践

博主头像 今天这篇博客来自全栈工程师朱唯唯，她在前不久举办的 KubeCon 中国大会上进行了该主题分享。 Kubernetes 已经成为事实的应用编排标准，越来越多的应用在不断的向云原生靠拢。与此同时，人工智能技术的迅速发展，尤其是大型语言模型（LLM）的推进，导致企业需要处理的数据量急剧增加，例如，Lla ...

Python计算傅里叶变换

博主头像 本文介绍了离散傅里叶变换和快速傅里叶变换的基本原理及其对应的Python代码实现，并将计算结果与numpy所集成的fft函数进行对比。其实现在FFT计算的成熟工具已经有很多了，不论是CPU上scipy的fft模块还是GPU上的cufft动态链接库，都有非常好的性能。但还是得真正去了解计算背后的原理，... ...

SelMatch：最新数据集蒸馏，仅用5%训练数据也是可以的 | ICML'24

数据集蒸馏旨在从大型数据集中合成每类（IPC）少量图像，以在最小性能损失的情况下近似完整数据集训练。尽管在非常小的IPC范围内有效，但随着IPC增加，许多蒸馏方法变得不太有效甚至性能不如随机样本选择。论文对各种IPC范围下的最先进的基于轨迹匹配的蒸馏方法进行了研究，发现这些方法在增加IPC的情况下很 ...

keycloak~关于授权码认证中的scope的实践

博主头像 前言 1. scope 参数的作用 定义权限：scope 用于声明请求访问的资源和权限。常见的值包括 openid、profile、email 等。 影响返回的数据：如果你在授权请求中指定了某些 scope，在后续的 token 请求中，Keycloak 会根据这些 scope 返回相应的信息。 o ...

使用.NET并行任务库(TPL)与并行Linq(PLINQ)充分利用多核性能

博主头像 前言 最近比较闲,(项目要转Java被分到架构组,边缘化人员,无所事事 哈哈哈哈) 记录一下前段时间用到的.NET框架下采用并行策略充分利用多核CPU进行优化的一个方法 起因是项目中有个结算的方法,需要汇总一个月的数据在内存中进行计算,统计,分组 ,然后产生新的数据 在某个客户那部署后发现,这个方法 ...

C# 开源浏览器性能提升，体验Chrome级速度

博主头像 前言 使用 C# 和 CefSharp 开发的全功能网页浏览器。 项目介绍 SharpBrowser 是目前最快的开源 C# 网页浏览器！ 采用了轻量级的 CEF 渲染器，在呈现网页时甚至比 Google Chrome 更快。 我们对比了所有可用的.NET 浏览器引擎，最终选择了高性能的 CefSh ...

Java Web 拾遗

博主头像 许是年纪大了，老是回忆起以前的点点滴滴。翻看当初的代码，如同偶遇多年未见的前女友，曾经一起深入交流的情谊在颔首之间消散，令人烦躁。 今天就来聊聊老生常谈的 Java Web 开发。缘于一个简单的Spring Boot项目改造，笔者看着一坨注解和配置，苦于拾掇记忆的痛苦，择其一二记录，纪念逝去的青春。 ...

Java序列化、反序列化、反序列化漏洞

博主头像 目录1 序列化和反序列化1.1 概念1.2 序列化可以做什么？3 实现方式3.1 Java 原生方式3.2 第三方方式4 反序列化漏洞 1 序列化和反序列化 1.1 概念 Java 中序列化的意思是将运行时的对象转成可网络传输或者存储的字节流的过程。而反序列化正相反，是把字节流恢复成对象的过程。 1 ...

关于建表字段是否该使用not null这个问题你怎么看?

博主头像 大家好，我是 V 哥，在数据库设计中，是否使用 NOT NULL 是一个非常重要的决策，直接影响数据完整性、查询性能以及业务逻辑的复杂度。使用 NOT NULL 的关键在于理解业务需求和具体场景。 下面V哥通过一些场景来分析什么时候应该使用 NOT NULL，什么时候允许 NULL。一起聊聊经验之谈 ...

从零开始学机器学习——了解回归

博主头像 在本文中，我们探讨了回归分析在统计学和数据分析中的重要性和应用。线性回归和逻辑回归作为两种主要的回归分析方法，分别适用于不同类型的数据建模和预测需求。通过数学建模，它们能够揭示变量之间的关系，并且在实际应用中展现了强大的预测能力。 ...

<1···99100