04 2024 档案
摘要：工具解决的问题 小哥工作台配置物流网关配置一个接口，需要三个服务域名（自营、3pl、港澳），三个环境（测试、UAT、正式），3*3相当于需要配置9次，其中除了别名，其他都配置基本相同。 通过大模型生成一个工具录入一次接口，生成9个配置文件。 步骤一：定义接口配置标准格式 步骤二： 生成javascr
阅读全文
摘要：本文通过介绍使用责任链设计模式的背景和经历，来使得读者加深对于此设计模式的印象，甚至受到一定的启发来对自己当下所参与、所负责的项目进行“整容”，从而提升系统的“美感”。分享工作中的点点滴滴。 一、背景 在下所负责的系统中有这么一个模块，分区模块，直接看这个词的话相信很多人都会疑惑甚至是误解，其实其真
阅读全文
摘要：引言 22年校招入职京东后，我一直在数据中台测试部从事测试开发的工作。毕业后，写的最多的文档是测试计划和测试报告，鲜有机会就自己的成长码字进行回顾和总结。借“up技术人”栏目，也终于是在工作之余回头望，对自己这近两年时光进行一个小总结。 本文是一个大数据测试小白初入职场后的成长总结，有新人入职的迷茫
阅读全文
摘要：扫雷游戏相信很多人都从小玩过，在那个电脑游戏并不多的时代，扫雷成为玩的热度蛮高的一款游戏之一，然而就在有一次，接触到了一次不寻常的扫雷过程，使得后来我也有了这个冲动，也来做一次。通过动态调试，逆向和来写一个扫雷辅助工具从而提高逆向与编码技能。 动态调试（分析） 首先进行扫雷程序的动态调试（分析）：
阅读全文
摘要：前言 Go语言定义 Go（又称 Golang）是 Google 的 Robert Griesemer，Rob Pike 及 Ken Thompson 开发的一种静态、强类型、编译型语言。Go 语言语法与 C 相近，但功能上有：内存安全，GC，结构形态及 CSP-style 并发计算。 适用范围 本篇
阅读全文
摘要：1、系统概述 实践证明，将互联网流量变现的在线广告是互联网最成功的商业模式，而电商场景是在线广告的核心场景。京东服务中国数亿的用户和大量的商家，商品池海量。平台在兼顾用户体验、平台、广告主收益的前提推送商品具有挑战性。京东广告检索平台需要在保证服务高效可靠的前提下，为广告与用户需求进行有效匹配，提供
阅读全文
摘要：1.场景说明 公司要求离开工位要立刻锁定电脑屏幕防止信息泄露，但无论是使用锁屏快捷键还是设置触发角，总感觉不得劲。想想汽车现在基本都是自动锁车了，电脑它就不能自己锁屏吗？于是抽空搜罗了一些自动化的解决方案，并按照Win和Mac进行分类。 2.配置方式 2.1 Windows Windows官方系统就
阅读全文
摘要：前言 当讨论高可用时，那么必然有与之对应的低可用甚至不可用，但无论是哪种可用描述，其中都暗含了一个大众共识，即不存在永久稳定运行的系统程序。 事实上，几十年前图灵也论证过类似的问题，称为“停机问题”，具体的描述是：能否为A计算机编程，使得程序才能在有限时间内推断出计算机B是否会停止运行？图灵使用了十
阅读全文
摘要：1、序言：广告排序机制的前世今生 1.1、简介：广告排序机制 在线广告是国内外各大互联网公司的重要收入来源之一，而在线广告与传统广告最大的区别就在于其超大规模的实时竞价环境：数以万计的广告主在一天内可以参与亿级别的流量竞拍。在这复杂的实时竞价环境中，广告系统的重排模块（Rerank）担负着确定 流量
阅读全文
摘要：一、什么是网络钓鱼（Phishing） “网络钓鱼 （Phishing）攻击者利用欺骗性的电子邮件和伪造的 Web 站点来进行网络诈骗活动，受骗者往往会泄露自己的私人资料，如信用卡号、银行卡账户、身份证号等内容。诈骗者通常会将自己伪装成网络银行、在线零售商和信用卡公司等可信的品牌，骗取用户的私人信息
阅读全文
摘要：SpringBoot如何优雅的进行参数校验 一.为什么要进行参数校验 在日常的开发过程中,我们常常需要对传入的参数进行校验,比如在web前后端分离项目中,参数校验有两个方面: 前端进行参数校验 后端进行参数校验 那这两种有什么区别呢?只完成一个可不可以呢? 答案是不可以的! 前端校验 前端校验主要是
阅读全文
摘要：微电平台 微电平台是集电销、企业微信等于一体的综合智能SCRM SAAS化系统，涵盖多渠道管理、全客户生命周期管理、私域营销运营等主要功能，承接了京东各业务线服务，专注于为业务提供职场外包式的一站式客户管理及一体化私域运营服务。 导读 本文介绍电销系统【客户名单离线打标流程】遇到jmq消费端吞吐下降
阅读全文
摘要：引言 从2021年校招加入京东开始，我一直从事AI产品经理的工作，有幸见证了AI行业的热情从一台台服务器烧到了全世界各个角落，也见证了京东AI中台团队的影响力如何一步步的扩大。从21年的迷茫到24年的坚定，很庆幸我正走在适合自己的道路上，也有幸在此分享一些我的成长故事和观点。 一、入局：AI风口下的
阅读全文
摘要：首屏速度是用户体验的最关键一环，而首屏速度最大的决定性因素就是资源的加载速度，资源加载速度等于资源大小 + 网速，老的前端项目随着不断增长，代码可能会变得混乱，冗余难以理解，不断的做加法，久而久之，前端性能上就会受到影响，相信大家在工作当中一定遇到，页面加载时间慢，响应时间长等问题，本文将以具体项目
阅读全文
摘要：一、前言 现有的广告图片大多依赖人工制作，存在效率和成本的限制。尽管最近AIGC技术取得了卓越的进展，但其在广告图片的应用还存在缺乏卖点信息、难以规模化和个性化以及不利于卖点展示等问题。为了解决上述业界难题，京东广告部门在2023年提出了一系列创新性方法：首先提出了关系感知扩散模型将卖点信息叠加在人
阅读全文
摘要：1.锚定方向：学生生涯的一次探险 如果用一个词语概括我的本科阶段，那大概就是“迷茫”。大三前，我一直在寻找自己的热情所在，自动化专业课程内容太过理论，在个人层面没法落地。恰巧在大三Python Programming这门课中，花几个小时就能开发一个软件，并被很多人使用，这对于一个结果导向型的人来说是
阅读全文
摘要：最近在读《微服务架构设计模式》，开始的时候我非常的好奇，因为在我印象中，设计模式是常说的那23种设计模式，而微服务的设计模式又是什么呢？这个问题也留给大家，在文末我会附上我对这个问题的理解。本次文章的内容主要是工作中对微服务设计模式的应用，希望能对大家有所启发。 事务发件箱模式 事务发件箱模式：将消
阅读全文
摘要：前言 本文总结库存领域建设库存预占能力时遇到的问题以及解决方案。感谢【金鹏】、【孙静】、【陈瑞】同学在本文撰写中提供的内容及帮助！ 1、库存预占业务概述 消费者拍下商品订单后，库存系统先为该订单预留库存，这个预留库存的动作被称为库存预占。 在系统中，库存预占主要是对库存数据进行扣减操作。例：假如一个
阅读全文
摘要：前言 当我初次接触高可用这个概念的时候，对高可用的【少依赖原则】和【弱依赖原则】的边界感模糊，甚至有些“傻傻分不清楚”。这两个原则都关注降低模块之间的依赖关系，但它们之间的确存在某些差异。 那么，「少依赖原则」和「弱依赖原则」它们之间本质的区别究竟是啥？ 少依赖原则和弱依赖原则都是旨在提高系统的可靠
阅读全文
摘要：五月繁花似锦，让我们带你走进京东，开启研效实战之旅！ 四大单位联合发起 本次活动由“全国云计算技术行业产教融合共同体”发起，联合工业和信息化部电子第五研究所、E³CI软件研发效能度量工作委员会、京东云共同主办，重磅推出“卓越研效架构师”研习营，邀请30 名企业研发核心管理者和从业者，共同走进京东集团
阅读全文
摘要：简介: [key, value]的缓存数据库, Redis官方性能描述非常高, 所以面对高并发场景, 使用Redis来克服高并发压力是一个不错的手段, 本文主要基于Redis来实现基本的抢红包系统设计. 发红包模块: 1:发红包模块流程图如下: 用户首先输入红包金额和红包个数, 然后生成当前红包唯一
阅读全文
摘要：技术领域 自然语言处理领域。 应用场景： 适用于自然语言处理领域，通过命名实体识别（Named Entity Recognition，NER），准确识别实体。依托自然语言处理领域，基于人民日报数据及构造的舆情公告数据，提出一种融合指代消解的序列标注方法来改进人名识别。 解决的问题： 实体包括人名、地
阅读全文
摘要：1、什么是Hive Hive是一个基于Hadoop的数据仓库工具,用于处理和分析大规模结构化数据。Hive提供了类似SQL的查询语言(HiveQL)，使得熟悉SQL的用户能够查询数据。Hive将SQL查询转换为MapReduce任务，以在Hadoop集群上执行数据处理和分析。 2、Hive起源 回答
阅读全文
摘要：在去年、我整理了一篇名为《如何做架构设计？》的文章，主要探讨了架构设计的目标和过程，然而、那是一篇概括性的文章，用于启发思路，并不是具体的实践指南，因此、我一直期望给出具体参考案例。 我几乎忘了这件事，如今回顾、我发现并没有合适的案例可供参考，现有的案例要么不完整、要么是与业务耦合的特定场景，要么无
阅读全文
摘要：写在前面 在做正常的需求开发时，当我们提供了一个接口或是调用别人接口时，我们需要考虑接口除了正常的逻辑处理外，还需要考虑接口能接收报文的上限，性能，响应时间等一系列非功能性需求。如果不注意这些问题，就可能在某一天的某个时刻收到一系列系统告警，严重者甚至导致系统不可用，引发线上事故。如涉及明细列表相关
阅读全文
摘要：在日常开发过程中，我们经常需要去承接一个陌生的系统，而且承接的系统都很复杂，那我们应该如何快速去熟悉一个系统呢，有哪些思路和切入点呢，下面从业务和技术以及实操3个层面来分享一些心得体会。 业务层面 在熟悉一个系统之前一定是先熟悉业务再熟悉技术，切不可本末倒置，下面是熟悉业务的一些要点。 1.业务背景
阅读全文
摘要：二、使用了BERT模型和指代消解算法： 加入BERT语言预处理模型，获取到高质量动态词向量。 融入指代消解算法，根据指代词找出符合要求的子串/短语。 【2】融入指代消解算法，根据指代词找出符合要求的子串/短语 指代消解算法如图2所示，简单来说，就是考虑文档中子串/短语以及学习子串/短语的可能指代。通
阅读全文
摘要：”学而不思则罔,思而不学则殆“，本文记录了作者在锦礼侧工作1年间遇到的思考与成长、挑战与困难，也是对过去工作的总结与反思，分享出来，希望对大家有所帮助。 本文约10000字 如果觉得页面很长 那是因为截图和留言很多，哈哈 00引言 光阴似箭，来到锦礼产品线已满一年了，这期间深刻的了解到B端不同解决方
阅读全文
摘要：1、背景 上一次我们介绍了什么是二维码，读过这篇文章以后，相信大家对二维码已经有了一定的认识，那么有没有想过如何自己动手生成二维码呢？二维码在我们的生活与工作中，都能够做什么呢？今天我们来探讨一下用Python如何生成二维码。 2、使用哪些库 Python具有丰富的第三方库，能够生成二维码的就有qr
阅读全文
摘要：一 系统简介 百舸流量运营平台承接着京东金融APP核心资源位和京东APP部分重要资源位，大促单接口QPS达到10w+,压测单接口到20w+,典型的c端读链路高并发场景。接下来，聊聊我们的系统都有哪些应对高并发的“武功秘籍”。 二 “武功秘籍” 1 缓存（redis缓存，本地缓存） 缓存是提高系统的并
阅读全文
摘要：1. 前言 “代码可视化”的概念定义和业界案例在前文中已经进行了讲述，综述可阅读浅析“代码可视化”，更多相关知识可查看专栏“代码可视化”。本文梳理了“代码可视化”功能开发需要前置了解的编译器前端部分知识，因能力有限若有解释不清和错误的地方敬请谅解，如果想更深入正规的学习相关知识可以查看文后扩展阅读。
阅读全文
摘要：1、简单介绍 我们在并发编程中，目前大部分做法都是将任务添加到线程池中，并拿到Future对象，将其添加到集合中，等所有任务都添加到线程池后，在通过遍历Future集合，调用future.get()来获取每个任务的结果，这样可以使得先添加到线程池的任务先等待其完成，但是并不能保证第一个添加到线程池的
阅读全文
摘要：背景: 事故频发 •每年都会看到SQL问题引发的线上问题 不易发觉 •对于SQL性能问题测试在预发环境不易发现 •saas系统隔离字段在SQL条件中遗漏，造成越权风险 •业务初期SQL没问题，业务增长容易出现事故 •DBS慢SQL不支持实时报警，无法及时发现 •靠大家review代码总会出现遗漏 事
阅读全文
摘要：目前LangChain框架在集团大模型接入手册中的学习案例有限，为了让大家可以快速系统地了解LangChain大模型框架并开发，产出此文章。本文章包含了LangChain的简介、基本组件和可跑的代码案例（包含Embedding、Completion、Chat三种功能模型声明）。读完此文章，您可利用集
阅读全文
摘要：一. 开篇 在当今快速发展的数字化时代，企业对于高效率、低成本、可扩展性强的通信解决方案的需求日益增长。云呼叫中心作为一种新兴的服务模式，正逐渐取代传统的硬件呼叫中心。FreeSwitch，作为一款强大的开源通信平台，因其卓越的性能和灵活性而成为搭建云呼叫中心的理想选择。 本文将从零开始，详细介绍如
阅读全文
摘要：1、现状痛点 系统越来越臃肿，开发过程中可能产生的无用代码增加了系统维护成本。 2、设计思路 2.1、静态代码扫描方案 本方案解决静态代码下无调用方法扫描，通过ASTParser对静态文件进行扫描分析，获取代码块来判断调用关系。 基本步骤及思路 （1）载入本地磁盘项目 （2）循环使用ASTParse
阅读全文
摘要：浏览器输入URL到页面渲染完成，这个过程大致可分为两个阶段：网络通信和页面渲染。 一、网络通信 互联网内各网络间设备的通信遵循TCP/IP协议，利用TCP/IP协议进行网络通信时，会通过分层与对方通信。数据传输的过程：由应用层产生数据后，经过传输层的分段处理（添加TCP或UDP包头）、网络层（添加I
阅读全文
摘要：一、Paxos是什么 在分布式系统中保证多副本数据强一致性算法。 没有paxos的一堆机器, 叫做分布式 有paxos协同的一堆机器, 叫分布式系统 这个世界上只有一种一致性算法，那就是Paxos … - Google Chubby的作者Mike Burrows 其他一致性算法都可以看做Paxos在
阅读全文
摘要：背景 稳定性建设需要一系列具体的建设活动推进和落地，这些建设活动涉及人员、机制和文化，全方位的建设活动才能更好地落实建设模式。 一、稳定性保障机制 稳定性涉及团队所有不同水平技术人员、所有系统、研发所有环节、线上时时刻刻，单个技术人员是无法保障好的，必须建立团队流程机制来可持续保障。 人为因素的根源
阅读全文
摘要：不管是服务导出还是服务引入，都发生在应用启动过程中，比如：在启动类上加上 @EnableDubbo 时，该注解上有一个 @DubboComponentScan 注解，@DubboComponentScan 注解 Import 了一个 DubboComponentScanRegistrar，Dubbo
阅读全文
摘要：一、从一个请求来看网络分层原理 1.1 复杂的网络 以下为一次请求过程中可能遇到的问题，预示着网络的复杂性。 1.2 如何简化复杂度 为了简化网络的复杂度，网络通信的不同方面被分解为多层次结构，每一层只与紧挨着的上层或者下层进行交互，将网络分层，这样就可以修改，甚至替换某一层的软件，只要层与层之间的
阅读全文
摘要：前言： MySQL的性能是大家在使用时十分关心的问题，比如在高并发访问时，并且有慢sql存在的情况下，MySQL的性能会明显下降，这会导致数据库响应时间变慢，甚至导致数据库宕机。那么为了避免Mysql性能问题，比较常用的方式创建适当的索引，提升sql语句的执行效率。而本文简单介绍一下和索引有关的回表
阅读全文
摘要：一、引言 在项目开发过程中，我们经常会遇到接口响应慢的问题。这不仅影响了用户体验，还可能降低了系统的吞吐量。为了提高接口性能，我们需要对整个系统进行全面的优化，包括代码层面、数据库、缓存、异步处理等方面。本文将分享一个接口性能优化之旅，希望能帮助大家掌握Pfinder使用、JSF异步调用等优化技巧，
阅读全文
摘要：. 背景 实际开发过程中，使用maven管理jar给我们开发带来了很多便利，不需要自己一个一个的jar包下载了，只需要配置个pom配置文件就可以了，写上对应坐标和仓库地址就可以了。但是jar冲突没问题没有解决，有冲突的jar包maven不会给我们检查出来还是会根据我们的配置进行下载，等到编译才会报错
阅读全文
摘要：前言 笔者近日在做代码仓库的存量代码缩减工作，首先考虑的是基于静态扫描的缩减，尝试使用了很多工具来对代码进行优化，例如PMD、IDEA自带的inspect功能、findBugs等。但是无一例外，要么过于“保守”，只给出扫描结果，但是无法实现一键优化，要么直接就是有bug（这里特指IDEA2023.1
阅读全文
摘要：马斯克一直在指责OpenAI没有开源，终于开源自家的大模型Grok-1，也把压力给到了OpenAI GitHub链接：https://github.com/xai-org/grok-1 居然短短一天就有29k的star！ Grok-1的模型参数： •Parameters: 314B •Archite
阅读全文
摘要：简介 Vision Pro是苹果公司的首款头戴式“空间计算”显示设备，于2023年6月6日在“WWDC2023”正式发布，同时推出的还有专为Vision Pro打造的操作系统平台visionOS，以及一整套“新的”开发工具，之所以打引号，是因为用于Vision Pro开发的工具和编程语言并没有多少改
阅读全文
摘要：本文基于京东内部向量数据库vearch进行实践。Vearch 是对大规模深度学习向量进行高性能相似搜索的弹性分布式系统。详见： https://github.com/vearch/zh_docs/blob/v3.3.X/docs/source/overview.rst 二、探索 初次认识向量数据库，
阅读全文
摘要：一、让人又爱又恨的Web Components Web Components是一种用于构建可重用的Web元素的技术。它允许开发者创建自定义的HTML元素，这些元素可以在不同的Web应用程序中重复使用，并且具有自己的样式、行为和功能。 Web Components并非一项新技术，而是一组持续演进的、由
阅读全文
摘要：导读：近几年，除AIGC外，软件领域相关比较大的变化，就是各相关业务领域开始如火如荼地建设中台和去中台化了。本文不探讨中台对公司组织架构涉及的变化和影响，只是从中台化演进的思路，及使用的底层支撑技术框架进行分析探讨，重点对中台及前台协作涉及到的扩展点及热部署包的底层技术细节，结合京东实际落地情况，对
阅读全文
摘要：京东作为openKylin（开放麒麟）社区理事单位，在加入社区后，京东发起成立了SBOM SIG组。SBOM SIG组负责推动和促进软件物料清单（SBOM）的发展和工具建设。近日，SBOM工具已在openKylin社区完成开源，保障openKylin相关软件供应链安全和可追溯性。 SBOM工具能解决
阅读全文
摘要：开源软件是数字时代研发创新和效率的引擎 •开源软件占所使用的所有软件的70%，是支持企业转型的创新生态系统不可或缺的部分。 •根据奇安信的2023中国软件供应链安全分析报告，被分析的2631个国内企业软件项目中，100% 使用了开源软件，平均每个项目使用155个。 开源软件使用存在的风险 开源并不是
阅读全文
摘要：智能编码JoyCoder 是一款基于大语言模型、适配多种 IDE 的智能编程助手，可以为研发人员提供代码预测续写、UI 草图转前端代码、生成单元测试、代码安全漏洞自动识别及修复、一键生成接口文档、AI 智能问答等功能。助力开发者高效、流畅、智能化地编程！ AI辅助编程 生成式 AI 技术正在为开发工
阅读全文
摘要：一、背景介绍 1.1 业务介绍 五星门店小程序主要服务于五星线下门店交易场景，目前已有79个城市267家门店（包括超级体验店、城旗店、京东Mall等）在使用，用户可以通过小程序便捷地查看和购买门店的商品。五星门店小程序已实现基于Taro跨端解决方案的一码多端能力，一套代码可以在京东App以及微信小程
阅读全文
摘要：一、背景 对于算法工程师来说，通常采用python语言来作为工作语言，但是直接用python部署线上服务性能很差。这个问题困扰了我很久，为了缓解深度学习模型工程落地性能问题，探索了Nvidia提供的triton部署框架，并在九数中台上完成线上部署，发现性能提升近337%！！（原服务单次访问模型推理时
阅读全文
摘要：1.背景简述 在技术运维过程中，很难从某服务庞杂的日志中，单独找寻出某次API调用的全部日志。 为提高排查问题的效率，在多个系统及应用内根据 统一的TraceId 查找同一次请求链路上的日志，根据日志快速定位问题，同时需对业务代码无侵入，特别是在高频请求下，也可以方便的搜索此次请求的日志内容。 本此
阅读全文