2023 年 9月随笔档案 - 京东云开发者

摘要：

众所周知，各大厂目前都在AIGC的领域探索实践，也有非常多的外部设计师制作了大量的AIGC相关授课，很多同学因为不清楚具体能得到什么价值或者收获而停止了脚步。今天我来为大家分享一下经过实际探索且落地的Stable diffusion的IP海报生成流程，内容很干请上车坐稳阅读全文

posted @ 2023-09-28 16:53 京东云开发者阅读(182) 评论(0) 推荐(0) 编辑

Dubbo源码浅析（一）—RPC框架与Dubbo

摘要：

RPC，Remote Procedure Call 即远程过程调用，与之相对的是本地服务调用，即LPC(Local Procedure Call)。本地服务调用比较常用，像我们应用内部程序(注意此处是程序而不是方法，程序包含方法)互相调用即为本地过程调用，而远程过程调用是指在本地调取远程过程进行使用。阅读全文

posted @ 2023-09-28 10:21 京东云开发者阅读(394) 评论(0) 推荐(4) 编辑

使用Triton部署chatglm2-6b模型

摘要：

一、技术介绍 NVIDIA Triton Inference Server是一个针对CPU和GPU进行优化的云端和推理的解决方案。支持的模型类型包括TensorRT、TensorFlow、PyTorch(meta-llama/Llama-2-7b)、Python(chatglm)、ONNX Run 阅读全文

posted @ 2023-09-27 16:37 京东云开发者阅读(598) 评论(0) 推荐(0) 编辑

真·Redis缓存优化—97%的优化率你见过嘛？

摘要：本文通过一封618前的R2M(公司内部缓存组件，可以认为等同于Redis)告警，由浅入深的分析了该告警的直接原因与根本原因，并根据原因提出相应的解决方法，希望能够给大家在排查类似问题时提供相应的思路。阅读全文

posted @ 2023-09-27 09:36 京东云开发者阅读(989) 评论(1) 推荐(6) 编辑

MySQL事务死锁问题排查

摘要：

一、背景在预发环境中，由消息驱动最终触发执行事务来写库存，但是导致MySQL发生死锁，写库存失败。 com.mysql.jdbc.exceptions.jdbc4.MySQLTransactionRollbackException: rpc error: code = Aborted desc = 阅读全文

posted @ 2023-09-26 16:48 京东云开发者阅读(604) 评论(1) 推荐(3) 编辑

专为小白打造—Kafka一篇文章从入门到入土

摘要：

Kafka 和传统的消息系统(也称作消息中间件)都具备系统解耦、冗余存储、流量削峰、缓冲、异步通信、扩展性、可恢复性等功能。与此同时，Kafka 还提供了大多数消息系统难以实现的消息顺序性保障及回溯消费的功能。阅读全文

posted @ 2023-09-26 10:07 京东云开发者阅读(854) 评论(0) 推荐(2) 编辑

一文浅谈Mockito使用

摘要：

一、前期准备～ 1、准备工作 a <dependency> <groupId>org.mockito</groupId> <artifactId>mockito-core</artifactId> <version>2.7.19</version> <scope>te 阅读全文

posted @ 2023-09-25 13:55 京东云开发者阅读(105) 评论(0) 推荐(0) 编辑

一个 println 竟然比 volatile 还好使？

摘要：

前两天一个小伙伴突然找我求助，说准备换个坑，最近在系统复习多线程知识，但遇到了一个刷新认知的问题…… 阅读全文

posted @ 2023-09-25 10:11 京东云开发者阅读(195) 评论(1) 推荐(3) 编辑

聊聊wireshark的进阶使用功能

摘要：

emmm，说起网络知识学习肯定离不来wireshark工具，这个工具能够帮助我们快速地定位网络问题以及帮助正在学习网络协议这块的知识的同学验证理论与实际的一大利器，平时更多的只是停留在初步的使用阶段。也是利用部门内部的网络兴趣小组的讨论机会，私下对wireshark的一些进阶功能，比如专家模式、图表等功能进行调研，并结合实际场景抓包分析对功能进行对照说明。阅读全文

posted @ 2023-09-22 17:01 京东云开发者阅读(615) 评论(1) 推荐(0) 编辑

深入浅出线程池

摘要：

线程(thread)是操作系统能够进行运算调度的最小单位。它被包含在进程之中，是进程中的实际运作单位。一条线程指的是进程中一个单一顺序的控制流，一个进程中可以并发多个线程，每条线程并行执行不同的任务。阅读全文

posted @ 2023-09-22 10:42 京东云开发者阅读(879) 评论(2) 推荐(6) 编辑

慢SQL原因分析之索引失效

摘要：

现象最近收到一个慢sql工单,慢sql大概是这样：“select xxx from tabel where type = 1”。咦，type字段明明有索引啊，为啥是慢sql呢？原因通过执行explain，发现实际上数据库执行了全表扫描，从而被系统判定为慢sql。这时有一定开发经验的同事会说：阅读全文

posted @ 2023-09-21 11:37 京东云开发者阅读(128) 评论(0) 推荐(1) 编辑

CocoaPods 在iOS开发中养活了这么多项目，它到底是个啥？

摘要：

对于iOS开发者而言，CocoaPods并不陌生，通过pod相关的命令操作，就可以很方便的将项目中用到的三方依赖库资源集成到项目环境中，大大的提升了开发的效率。CocoaPods作为iOS项目的包管理工具，它在命令行背后做了什么操作？而又是通过什么样的方式将命令指令声明出来供我们使用的？这些实现的背后底层逻辑是什么？都是本文想要探讨挖掘的。阅读全文

posted @ 2023-09-21 10:43 京东云开发者阅读(248) 评论(0) 推荐(1) 编辑

探析ElasticSearch Kibana在测试工作中的实践应用

摘要：

离线数据测试中最重要的就是数据验证，一部分需要测试es存储数据的正确性，另一部分就需要验证接口从es取值逻辑的正确性。而为了验证es取值逻辑的正确性，就需要用到Kibana, 它能帮助测试同学更加快速高效的执行es数据的查询，大大提高测试效率。阅读全文

posted @ 2023-09-20 11:33 京东云开发者阅读(400) 评论(0) 推荐(0) 编辑

逻辑漏洞挖掘之XSS漏洞原理分析及实战演练

摘要：

本系列文章旨在揭秘逻辑漏洞的范围、原理及预防措施，逐步提升大家的安全意识。作为开篇第一章，本文选取了广为熟知的XSS逻辑漏洞进行介绍。阅读全文

posted @ 2023-09-20 10:18 京东云开发者阅读(82) 评论(0) 推荐(0) 编辑

主动写入流对@ResponseBody注解的影响

摘要：问题回溯 2023年Q2某日运营反馈一个问题，商品系统商家中心某批量工具模板无法下载，导致功能无法使用（因为模板是动态变化的）商家中心报错（JSON串）： {"code":-1,"msg":"失败"} 负责的同事看到失败后立即与我展开讨论（因为不是关键业务，所以不需要回滚，修复即可），我们发现新功阅读全文

posted @ 2023-09-19 11:58 京东云开发者阅读(126) 评论(0) 推荐(2) 编辑

Web3.0时代的全新合作模式：DAO

摘要：

今天我就介绍一个可以改变你这种现状的技术：DAO。但在介绍DAO之前我们需要先了解一下所有人都在热烈讨论的web3.0。阅读全文

posted @ 2023-09-19 10:30 京东云开发者阅读(143) 评论(2) 推荐(0) 编辑

【ChatGPT-应用篇】基于chatGPT覆盖测试过程的初步探索

摘要：

ChatGPT如此火爆之势，作为测试人员对此也颇为好奇，简单的人机对话有哪些可以帮助我们测试工作呢？本文主要谈从测试视角，结合测试流程来看chatGPT的应用。阅读全文

posted @ 2023-09-18 16:10 京东云开发者阅读(346) 评论(0) 推荐(2) 编辑

文盘Rust -- tonic-Rust grpc初体验

摘要：

gRPC 是开发中常用的开源高性能远程过程调用（RPC）框架，tonic 是基于 HTTP/2 的 gRPC 实现，专注于高性能、互操作性和灵活性。该库的创建是为了对 async/await 提供一流的支持，并充当用 Rust 编写的生产系统的核心构建块。今天我们聊聊通过使用tonic 调用grpc的的具体过程。阅读全文

posted @ 2023-09-18 10:08 京东云开发者阅读(485) 评论(0) 推荐(1) 编辑

618京东到家APP-门详页反爬实战

摘要：一、背景与系统安全需求分析 1. 系统的重要性上图所示是接口所属位置、对电商平台或在线商店而言，分类查商品都是很重要的，通过为用户提供清晰的商品分类，帮助他们快速找到所需产品，节省浏览时间，提升购物效率，是购物结算产生GMV的核心环节。那么电商平台为什么都很看重商品信息的爬取？ a. 数据收集和分阅读全文

posted @ 2023-09-15 09:17 京东云开发者阅读(610) 评论(0) 推荐(3) 编辑

慢SQL的致胜法宝

摘要：大促备战，最大的隐患项之一就是慢SQL，对于服务平稳运行带来的破坏性最大，也是日常工作中经常带来整个应用抖动的最大隐患，在日常开发中如何避免出现慢SQL，出现了慢SQL应该按照什么思路去解决是我们必须要知道的。本文主要介绍对于慢SQL的排查、解决思路，通过一个个实际的例子深入分析总结，以便更快更准确阅读全文

posted @ 2023-09-15 09:17 京东云开发者阅读(36) 评论(0) 推荐(1) 编辑

基于Spring事务的可靠异步调用实践

摘要：SpringTxAsync组件是仓储平台组（WMS6）自主研发的一个专门用于解决可靠异步调用问题的组件。通过使用SpringTxAsync组件，我们成功地解决了在仓储平台（WMS6）中的异步调用需求。经过近二年多的实践并经历了两次618活动以及两次双11活动，该组件已经在我们的所有应用中稳定运行并阅读全文

posted @ 2023-09-14 16:29 京东云开发者阅读(105) 评论(1) 推荐(0) 编辑

Stream流处理快速上手最佳实践

摘要：一引言 JAVA1.8得益于Lambda所带来的函数式编程，引入了一个全新的Stream流概念Stream流式思想类似于工厂车间的“生产流水线”，Stream流不是一种数据结构，不保存数据，而是对数据进行加工处理。Stream可以看作是流水线上的一个工序。在流水线上，通过多个工序让一个原材料加工成阅读全文

posted @ 2023-09-14 16:29 京东云开发者阅读(49) 评论(0) 推荐(0) 编辑

从好玩到好用：程序员用AI提效的那些事儿

摘要：本片内容是【AI思维空间】ChatGPT纵横编程世界，点亮智慧火花的续作，主要记录组内开发小伙伴儿们在开发过程中的实际应用案例，记录典型案例，尽量不要和其他人重复，以解决开发过程中的实际问题为主，设计、方案、编码、测试、集成、部署等等；目的：贡献最佳实践，分享心得，共同成长！ Prompt提问万能阅读全文

posted @ 2023-09-14 16:28 京东云开发者阅读(26) 评论(0) 推荐(0) 编辑

买彩票能中大奖？用Java盘点常见的概率悖论 | 京东云技术团队

摘要：引言《双色球头奖概率与被雷劈中的概率哪个高？》《3人轮流射击，枪法最差的反而更容易活下来？》让我们用Java来探索ta们！悖论1：著名的三门问题规则描述：你正在参加一个游戏节目，你被要求在三扇门中选择一扇：其中一扇后面有一辆车；其余两扇后面则是山羊。你选择了一道门，假设是一号门，然后知道门阅读全文

posted @ 2023-09-13 09:21 京东云开发者阅读(29) 评论(0) 推荐(0) 编辑

分库表数据倾斜的处理让我联想到了AKF模型

摘要：1 背景最近在做需求的时候需要在一张表中增加一个字段。这张表情况如下： 1、拆分了多个库多张表 2、库表拆分按表中商户编码字段hash之后取模进行拆分由于库表拆分按照商户编码，有些大商家的单子数量远远要高于其他普通商家，这样就造成了严重的数据倾斜。在增加字段的时候尝试多种办法，执行多次都添加阅读全文

posted @ 2023-09-13 09:21 京东云开发者阅读(102) 评论(0) 推荐(0) 编辑

高性能MySQL实战（三）：性能优化 | 京东物流技术团队

摘要：这篇主要介绍对慢 SQL 优化的一些手段，而在讲解具体的优化措施之前，我想先对 EXPLAIN 进行介绍，它是我们在分析查询时必要的操作，理解了它输出结果的内容更有利于我们优化 SQL。为了方便大家的阅读，在下文中规定类似 key1 的表示二级索引，key_part1 表示联合索引的第一部分，uni 阅读全文

posted @ 2023-09-13 09:21 京东云开发者阅读(176) 评论(0) 推荐(0) 编辑

SPI在Java中的实现与应用 | 京东物流技术团队

摘要：1 SPI的概念 API API在我们日常开发工作中是比较直观可以看到的，比如在 Spring 项目中，我们通常习惯在写 service 层代码前，添加一个接口层，对于 service 的调用一般也都是基于接口操作，通过依赖注入，可以使用接口实现类的实例。简单形容就是这样的：图1：API 如上图阅读全文

posted @ 2023-09-12 09:23 京东云开发者阅读(64) 评论(0) 推荐(0) 编辑

高性能MySQL实战（二）：索引 | 京东物流技术团队

摘要：我们在上篇高性能MySQL实战（一）：表结构中已经建立好了表结构，这篇我们则是针对已有的表结构和搜索条件为表创建索引。 1. 根据搜索条件创建索引我们还是先将表结构的初始化 SQL 拿过来： CREATE TABLE `service_log` ( `id` bigint UNSIGNED N 阅读全文

posted @ 2023-09-12 09:22 京东云开发者阅读(53) 评论(0) 推荐(0) 编辑

分拣平台API安全治理实战 | 京东物流技术团队

摘要：导读本文主要基于京东物流的分拣业务平台在生产环境遇到的一些安全类问题，进行定位并采取合适的解决方案进行安全治理，引出对行业内不同业务领域、不同类型系统的安全治理方案的探究，最后笔者也基于自己在金融领域的经验进行了关于API网关治理方案的分享。写在前面随着互联网应用的多元化、复杂化、服务化成为显阅读全文

posted @ 2023-09-12 09:22 京东云开发者阅读(125) 评论(1) 推荐(0) 编辑

DPText-DETR: 基于动态点query的场景文本检测，更高更快更鲁棒 | 京东探索研究院

摘要：针对场景文本检测任务，近期基于DEtection TRansformer (DETR) 框架预测控制点的研究工作较为活跃。在基于DETR的检测器中，query的构建方式至关重要，现有方法中较为粗糙的位置先验信息构建导致了较低的训练效率以及性能。除此之外，在如何监督模型方面，之前工作中使用的点标签形式阅读全文

posted @ 2023-09-11 10:17 京东云开发者阅读(16) 评论(0) 推荐(0) 编辑

数据库深分页介绍及优化方案 | 京东云技术团队

摘要：在前端页面显示，为了避免一次性展示全量数据，通过上下翻页或指定页码的方式查看部分数据，就像翻书一样，这就利用了MySQL的分页查询。阅读全文

posted @ 2023-09-11 10:17 京东云开发者阅读(858) 评论(1) 推荐(3) 编辑

文盘Rust -- 给程序加个日志

摘要：日志是应用程序的重要组成部分。无论是服务端程序还是客户端程序都需要日志做为错误输出或者业务记录。在这篇文章中，我们结合log4rs聊聊rust 程序中如何使用日志。阅读全文

posted @ 2023-09-11 10:16 京东云开发者阅读(75) 评论(0) 推荐(0) 编辑

文盘Rust——子命令提示，提高用户体验

摘要：

上次我们聊到 CLI 的领域交互模式。在领域交互模式中，可能存在多层次的子命令。在使用过程中如果全评记忆的话，命令少还好，多了真心记不住。频繁 --help 也是个很麻烦的事情。如果每次按 'tab' 键就可以提示或补齐命令是不是很方便呢。这一节我们就来说说 'autocommplete' 如何实现。我们还是以interactcli-rs中的实现来解说实现过程阅读全文

posted @ 2023-09-08 10:49 京东云开发者阅读(300) 评论(0) 推荐(0) 编辑

谈谈JSF业务线程池的大小配置

摘要：本文旨在通过一个简化场景（“单服务应用”）下的负载测试，为“JSF业务线程池大小配置”提供基准测试结果，并形成一些普遍适用的结论。阅读全文

posted @ 2023-09-08 09:35 京东云开发者阅读(53) 评论(0) 推荐(0) 编辑

文盘Rust——起手式，CLI程序

摘要：

我们来看看如何通过几个步骤快速的实现一个功能相对齐全的CLI程序。和做饭一样，能够快速获得成就感的方式是找半成品直接下锅炒一盘阅读全文

posted @ 2023-09-07 11:09 京东云开发者阅读(74) 评论(0) 推荐(0) 编辑

Web应用防火墙--规则防护

摘要：

Web应用防火墙对网站、APP的业务流量安全及合规性保护，对业务流量的识别恶意特征提取、分析识别出恶意流量并进行处理，将正常安全的流量回源到业务服务器，保护网站核心业务和数据安全。阅读全文

posted @ 2023-09-07 10:38 京东云开发者阅读(106) 评论(0) 推荐(0) 编辑

恶意爬虫防护

摘要：

如果您仔细分析过任何一个网站的请求日志，您肯定会发现一些可疑的流量，那可能就是爬虫流量。根据Imperva发布的《2023 Imperva Bad Bot Report》在2022年的所有互联网流量中，47.4%是爬虫流量。与2021年的42.3%相比，增长了5.1%。在这些爬虫流量中，30.2%是恶意爬虫，比2021年的27.7%增长了2.5%。阅读全文

posted @ 2023-09-06 11:26 京东云开发者阅读(84) 评论(0) 推荐(0) 编辑

chatglm2-6b在P40上做LORA微调

摘要：

目前，大模型的技术应用已经遍地开花。最快的应用方式无非是利用自有垂直领域的数据进行模型微调。chatglm2-6b在国内开源的大模型上，效果比较突出。本文章分享的内容是用chatglm2-6b模型在集团EA的P40机器上进行垂直领域的LORA微调。阅读全文

posted @ 2023-09-06 10:22 京东云开发者阅读(156) 评论(0) 推荐(0) 编辑

文盘Rust -- 生命周期问题引发的 static hashmap 锁

摘要：2021年上半年，撸了个rust cli开发的框架，基本上把交互模式，子命令提示这些cli该有的常用功能做进去了。项目地址：[https://github.com/jiashiwen/interactcli-rs。](https://github.com/jiashiwen/interactcli- 阅读全文

posted @ 2023-09-05 13:53 京东云开发者阅读(253) 评论(0) 推荐(0) 编辑

楠姐技术漫话：接着唠唠社区发现

摘要：

halo，大家好很开心又和大家见面了在第一篇楠姐技术漫画：图计算的那些事发布之后，楠姐收到了很多建议、鼓励和支持，非常感谢大家的喜欢，所以楠姐尽自己所能马不停蹄开始第二篇的创作，虽迟但到~ 阅读全文

posted @ 2023-09-05 10:18 京东云开发者阅读(42) 评论(0) 推荐(0) 编辑

京东搜索EE链路演进

摘要：

本文将从搜索EE近期的全量迭代出发，展现其链路演进的整体脉络，包含：EE自适应动态探测模型——EE场景建模方式升级——打分与穿插两阶段一致性升级——探测与自然流量全局联动优化四个阶段，梳理对搜索EE的思考与下一步迭代方向。阅读全文

posted @ 2023-09-04 17:48 京东云开发者阅读(90) 评论(0) 推荐(0) 编辑

ThreadLocal：线程中的全局变量

摘要：

最近接了一个新需求，业务场景上需要在原有基础上新增2个字段，接口新增参数意味着很多类和方法的逻辑都需要改变，需要先判断是否属于该业务场景，再做对应的逻辑。原本的打算是在入口处新增变量，在操作数据的时候进行逻辑判断将变量进行存储或查询。阅读全文

posted @ 2023-09-04 11:38 京东云开发者阅读(744) 评论(1) 推荐(8) 编辑

用 ChatGPT 做一个 Chrome 扩展 | 京东云技术团队

摘要：用ChatGPT让翻译不再生硬，跟着我基于ChatGPT做个Chrome Extension，实现在网页中轻松划词翻译。阅读全文

posted @ 2023-09-01 11:33 京东云开发者阅读(1017) 评论(0) 推荐(6) 编辑

稳定性建设框架

摘要：稳定性治理是一个长期的过程，要把稳定性的工作融入到研发过程中，一方面要有意识尽量别埋坑，比如微服务强调中间件隔离，我们就不要混用中间件了，另一方面稳定性问题要一步到位，比如治理超时时间，要有个完整规范定义超时时间，并在研发过程中对新增接口、历史接口都配置合理，且能够动态更新。阅读全文

posted @ 2023-09-01 10:15 京东云开发者阅读(136) 评论(1) 推荐(0) 编辑

09 2023 档案

公告