刷新
团队小规模本地大模型服务平台搭建 - Ubuntu

博主头像 实现目标和考虑因素 部署一个支持多用户同时使用、多模型运行的离线局域网大模型服务器 需要考虑以下几个关键因素: 大模型的加载和管理。使用一个基础大模型,根据实战需要创建多个专用模型,模型管理方便可靠。 并发用户和请求管理。设置管理员、用户角色,用户管理方便可靠,支持多名用户同时在线操作。 多模型同时 ...

Java开发生态2024年度总结报告

博主头像 1 关键要点 尽管数据显示 Java 17 是最常用 JDK,但其用户占比并未超过半数。根据 New Relic 2024 Java 生态系统状态报告,Java 17、11 和 8 的用户比例分别为 35%、33% 和 29%。 New Relic 数据中所谓“快速采用”指 Java 21 的采用率 ...

Vue3最新Router带来哪些颠覆性变化?

博主头像 1 前后端开发模式的演变 jQuery时对大部分Web项目,前端不能控制路由,要依赖后端项目的路由系统。通常,前端项目也部署在后端项目的模板里,项目执行示意图: jQuery前端都要学会在后端模板如JSP里写代码。此时,前端工程师无需了解路由。对每次的页面跳转,都由后端负责重新渲染模板。 前端依赖后 ...

设计Element UI表单组件居然如此简单!

博主头像 0 前言 上文讲解了Jest框架对组件库测试,TypeScript和Jest都为代码质量和研发效率。之前实现Container和Button组件以渲染功能为主,可根据不同属性渲染不同样式去实现布局和不同格式的按钮。 本文的表单组件,除了要渲染页面组件,还支持很好页面交互,从Element3的表单组件 ...

深度解析 Transformer 模型中的位置嵌入(Positional Embedding)

博主头像 在自然语言处理中,词语的顺序对句子的意义至关重要。然而,传统的自注意力机制无法区分词语的位置。本文深入浅出地介绍了**位置嵌入(Positional Embedding)**的概念及其在Transformer模型中的作用,解释了它如何帮助模型理解词语的顺序,从而提升文本处理的准确性。通过简单的例子和... ...

AIGC性能测试用例与脚本

博主头像 提示词您是系统架构师,结合以上需求描述与功能点与场景,请编写性能测试用例,按性能测试用例设计原则, 输出表格 性能测试用例设计原则 设计性能测试用例时应遵循一定的原则,以确保测试的覆盖率和有效性。以下是一些关键的设计原则: 1. 可复现性原则:测试用例应设计得足够详细,以确保在不同时间点运行时能够得 ...

史上最全性能调优秘籍:让你的系统飞起来!

博主头像 0 前言 系统突然瘫痪,重启后,问题仍无规律重现。运维马上写个重启脚本,定时排队重启各服务,但“治标不治本”。 作为主力排查问题,通过各种 Linux 命令在线上环境查看性能指标,dump 日志文件,走查代码,最后定位问题,后面分析原因、制定解决方案、更新d版本等。这就是一次性能调优和解决技术问题思 ...

算法备案、安全评估全网最详细流程说明【附流程+附件】

博主头像 一、“深度合成算法”与“生成合成类算法”的区别 实践中,《互联网信息服务算法备案系统》显示,“生成合成类算法”与“深度合成算法”被称为一类,即“生成合成类(深度合成)算法”。因此,即使在技术层面深度合成技术与生成合成技术的或存在争议,但就算法备案实操而言,企业履行算法备案关系以及被要求提供的备案信息 ...

向量更新的3种方式

博主头像 本文介绍向量检索服务如何通过控制台、SDK、API三种不同的方式更新向量。 控制台方式 登录向量检索服务控制台 在左侧导航栏单击 Cluster列表 ,选中需要检索向量的Collection,单击Collection 详情 。 在左侧二级导航栏,单击 向量更新 ,填写相应内容后,单击 确认 ,即可更 ...

想自己做大模型备案的企业看过来【评估测试题+备案源文件】

博主头像 文章目录 (一)适用主体 (二)语料安全 (三)模型安全 (四)安全措施要求 (五)词库要求 (六)安全评估要求 (七)附录大模型备案材料源文件 2024年3月1日,我国通过了《生成式人工智能服务安全基本要求》(以下简称《AIGC安全要求》),这是目前我国第一部有关AIGC服务安全性方面的技术性指导 ...

Meta如何用极致技术实现接近完美的缓存一致性?

博主头像 0 导言 缓存是一种强大的技术,广泛应用于计算机系统的各个方面,从缓存等硬件到操作系统、网络浏览器,尤其是后端开发。对于 Meta 这样的公司来说,缓存是非常重要的,因为它可以帮助他们减少延迟、扩展繁重的工作负载并节省资金。由于他们的用例非常依赖缓存,这就给他们带来了另一系列问题,那就是缓存失效。 ...

Datawhale冬令营第二期!Task 1

博主头像 Datawhale冬令营第二期-Task1:动手体验AI辅助编程:番茄钟 对应链接:https://www.datawhale.cn/activity/116/23/94?rankingPage=1 笔记整理者:博客园-岁月月宝贝 现在我已经是Datawhale宣传组的一员啦!好开心好开心!!! ...

大模型备案全网最详细流程解读(附文件+重点解读)

博主头像 文章目录 一、语料安全评估 二、黑盒测试 三、模型安全措施评估 四、性能评估 五、性能评估 六、安全性评估 七、可解释性评估 八、法律和合规性评估 九、应急管理措施 十、材料准备 十一、【线下流程】大模型备案线下详细步骤说明 十二、【线上流程】算法备案填报流程及重难点分析 十三、大模型备案时间成本对 ...

AI文字界面描述生成原型与前端代码

博主头像 场景 之前文章也有介绍 AI助力生成原型与UI前端代码第一回代码自动生成:AI大模型可以根据用户提供的文字界面描述,自动生成前端代码,如HTML、CSS和JavaScript。这种自动化过程显著减少了手动编写代码的时间和工作量,提高了开发效率。例如,开发者只需提供界面的草图或描述性语言,AI就能生成 ...

AI助力生成原型与UI前端代码第一回

博主头像 应用场景代码自动生成:AI大模型可以根据设计稿或简单的描述自动生成前端代码,如HTML、CSS和JavaScript。开发者只需提供界面的草图或描述性语言,AI就能生成相应的代码。 前端开发工具中的AI插件可以实现更智能的代码补全功能,不仅根据语法和变量名进行补全,还能根据项目的上下文和开发习惯进行 ...

AI经营分析报告生成案例

博主头像 生成场景财务报告:AI可以通过学习大量的财务报告模板,自动填充数据,并生成符合规范的财务报告。此外,AI还可以根据企业的经营状况,提供财务预测和风险评估,为企业决策提供数据支持。市场分析报告:AI可以自动收集和整理网络上的各类市场数据,运用自然语言处理技术对数据进行分析和挖掘,从而生成准确、深入的市 ...

最强AI智能体竟如此简单!Anthropic首次公开内部秘籍!

博主头像 0 前言 过去一年中,我们与不同行业中开发大语言模型 (LLM) 智能体的多个团队进行了合作。我们发现,最成功的实现并非依赖复杂的框架或专业化的库,而是通过简单、可组合的模式构建。 本文分享从客户合作及自身开发智能体的过程中所学到的经验,并为开发者提供构建高效智能体的实用建议。 1 啥是智能体? “ ...

大规模可观测性揭秘:Netflix 如何通过标题玩转全球内容发布?

博主头像 1 导言 在 Netflix,我们每月管理着上千个全球内容发布项目,每年的投资额高达数十亿美元。确保每部影片在我们平台上的成功和可发现性是我们的首要任务,因为我们的目标是将每个故事与合适的受众联系起来,让我们的会员满意。为了实现这一目标,我们致力于建立强大的系统,提供全面的可观察性,使我们能够对我们 ...

<123···21>