随笔分类 -  云运维&&云架构

1 2 3 4 5 ··· 185 下一页

zenoh rest plugin 简单使用说明
摘要:zenoh rest plugin 提供了rest api 能力,包含了管理adminspace 以及通过get,put,delete 操作key 的能力 配置 包含了独立模式以及plugin模式,可以解决实际场景使用,基于plugin模式是一个不错的选择 参考配置 { "mode": "route 阅读全文

posted @ 2024-12-14 08:00 荣锋亮 阅读(0) 评论(0) 推荐(0) 编辑

zenoh 1.0.0 一些新变化
摘要:zenoh 1.0.0 发布了,可以说是一个比较稳定的版本了,同时有一些新的变化,比如api 上的以及内部处理上 Interest protocol 以前版本订阅以及查询会在系统所有节点进行定义的传播,新的不会在传播到客户端以及peer子系统,所有的操作都是发送到最新的router Storage 阅读全文

posted @ 2024-12-13 09:43 荣锋亮 阅读(0) 评论(0) 推荐(0) 编辑

pydiverse.pipedag 一个快速数据pipeline 调度库
摘要:pydiverse.pipedag 实际上就是一个python包,可以用来实现data pipeline 的调度,内部集成了cache,同时可以集成pandas,polars,sqlalchemy,ibis 等框架 说明 对于简单的data pipeline 场景(一般是单机玩法),基于pydive 阅读全文

posted @ 2024-12-12 08:00 荣锋亮 阅读(5) 评论(0) 推荐(0) 编辑

pg_parquet CrunchyData团队开源的pg parquet fdw
摘要:pg_parquet是CrunchyData 团队开源的pg paquet fdw,可以实现parquet 数据通过copy 命令到pg 表中,同时也支持将pg 表写入到parquet 文件中 一些使用场景 就是上边说的,写入或者读取parquet 数据 查看parquet 的元数据以及schema 阅读全文

posted @ 2024-12-11 08:00 荣锋亮 阅读(5) 评论(0) 推荐(0) 编辑

zenoh mqtt + nanomq 集成
摘要:zenoh mqtt 是一个zenoh 插件,可以让zenoh 提供mqtt 的能力(目前支持v3以及v5协议) 使用场景 路由mqtt 到边缘以及云 对于mqtt 系统进行桥接 通过zenoh rest api 进行mqtt 消息的发布订阅 mqtt ros2 交互 存储mqtt 消息到zenoh 阅读全文

posted @ 2024-12-10 08:00 荣锋亮 阅读(6) 评论(0) 推荐(0) 编辑

zenoh 强大的网络协议
摘要:zenoh 是一个强大的网络协议,支持灵活的组网模式,(peer,mesh,router,broker),同时具有快速的性能,对于业务集成 提供了灵活的使用方法(pub,sub,query),同时还支持插件化的geo 存储能力(同时还支持数据复制能力),zenoh 同时还对于 不同的使用场景进行了适 阅读全文

posted @ 2024-12-09 08:00 荣锋亮 阅读(11) 评论(0) 推荐(0) 编辑

vitest 基于vite 的下一代测试框架
摘要:vitest 基于vite 的下一代测试框架 包含的特性 基于vite 可以复用vite 的配置,转换器,解析器,插件 智能实时watch 模式支持 支持vue,react,svelte,lit,karko等框架的组件测试 ts/jsx 开箱即用的支持 esm 优先,顶级await 支持 基于tin 阅读全文

posted @ 2024-12-08 08:00 荣锋亮 阅读(3) 评论(0) 推荐(0) 编辑

ollama 0.5.0 发布内置结构化输出了
摘要:就在前几天ollama 发布了0.5.0了内置支持结构化输出了,同时ollama python 以及js 库已经支持此特性了,很值得使用 说明 同时就在一个小时之前发布了0.5.1 解决了一些结构化输出的bug 参考资料 https://github.com/ollama/ollama/releas 阅读全文

posted @ 2024-12-07 08:59 荣锋亮 阅读(50) 评论(0) 推荐(0) 编辑

一些nodejs 线程池工具
摘要:线程池可以更好的提升系统的资源使用率,以下是一些nodejs 线程池工具的说明 piscina 快速,高效的线程池实现,包含的特性比较多,比如灵活的线程池大小,追踪执行以及等待的时间分析,取消支持,自定义任务队列等 tinypool 是基于piscina fork的一个实现,目的是为了简单以及高效, 阅读全文

posted @ 2024-12-07 08:00 荣锋亮 阅读(4) 评论(0) 推荐(0) 编辑

pgtyped 类型安全的基于typescript 的sql 包
摘要:pgtyped 类型安全的基于typescript 的sql 包 包含的特性 类型安全 解析sql 以及ts 文件 阻止sql注入 说明 对于开发强类型的sql 查询处理的,pgtyped 是一个值得尝试的包,后边简单说明下使用 参考资料 https://pgtyped.dev/ https://g 阅读全文

posted @ 2024-12-06 08:00 荣锋亮 阅读(2) 评论(0) 推荐(0) 编辑

tsup 包含依赖的处理
摘要:tsup 默认打包的bundle 实际上是结合依赖自动处理的,但是默认会排除dependencies以及devDependencies,此模式与我们实际希望的效果可能是不一致的,可选的解决方法是配置noExternal(通过正则匹配处理) 参考使用 noExternal 参考配置 import {d 阅读全文

posted @ 2024-12-05 00:28 荣锋亮 阅读(2) 评论(0) 推荐(0) 编辑

pongo基于pg的类似mongo语法查询npm包
摘要:pongo 是一个node 包装可以让我们使用类似mongo 查询的模式进行数据操作(底层数据存储在pg)同时提供强一致性 包含的特性 利用pg 提供了强一致性 方便集成 重用mongo 代码,因为兼容mongo api (注意并不是100%) 增强了传统pg json 查询能力 可以更好的使用pg 阅读全文

posted @ 2024-12-04 00:12 荣锋亮 阅读(2) 评论(0) 推荐(0) 编辑

pydantic ai集成ollama简单试用
摘要:就是一个示例学习,体验下pydantic ai,llm 基于了ollama 参考代码 app.py 一个集成ollama 的测试 import asyncio from openai import AsyncOpenAI from pydantic import BaseModel,Field fr 阅读全文

posted @ 2024-12-03 21:21 荣锋亮 阅读(40) 评论(0) 推荐(0) 编辑

pydantic ai agent 框架
摘要:pydantic 团队也开始搞ai agent 框架了,目前属于beta 版 使用pydantic ai 的一些原因(来自官方介绍) 来自pydantic团队,不少llm python sdk 都使用了此包 模型无关,尽管当前支持的还有限,但是提供了简单接口可以扩展 类型安全 支持基于普通pytho 阅读全文

posted @ 2024-12-03 19:24 荣锋亮 阅读(50) 评论(0) 推荐(0) 编辑

Semantic Metadata 语义元数据
摘要:Semantic Metadata 是orbital 为了进行数据集成提出的一套玩法,同时orbital 也开发了一些框架层的支持(Taxi 进行模型描述) orbital 进行集成开发 Semantic Metadata 的特点 元数据定义了字段内容的契约 平台无关 系统基于此进行特定领域的业务a 阅读全文

posted @ 2024-12-03 08:00 荣锋亮 阅读(5) 评论(0) 推荐(0) 编辑

connector-x db数据快速加载到dataframe的库
摘要:connector-x db数据快速加载到dataframe的库,支持不少数据库的到dataframe 数据的写入 支持的数据库 pg mysql mariadb sqlite redshift clickhouse sql server azure sql database oracle big 阅读全文

posted @ 2024-12-02 08:06 荣锋亮 阅读(5) 评论(0) 推荐(0) 编辑

crawle web 爬虫&浏览器自动化库
摘要:crawle web 爬虫&浏览器自动化库 包含的特性 js&ts 支持 http 爬取,集成了cheerio 以及jsdom 的解析器 无头浏览器支持 爬取自动proxy 处理 队列以及存储,可以保存文件,快照,json 结果 内部不少方便的工具类,方便数据提取 说明 crawle 同时也提供了p 阅读全文

posted @ 2024-12-02 08:00 荣锋亮 阅读(9) 评论(0) 推荐(0) 编辑

RulesEngine 微软开源的基于json的规则引擎
摘要:以前有简单介绍过基于js 的json-rules-engine,以下简单说明下基于dotnet 的RulesEngine 包含的特性 基于json 的规则定义 多输入支持 动态对象输入支持 c# 表达式支持 基于class type 的自定义扩展表达式支持 作用域范围参数 post rule 执行动 阅读全文

posted @ 2024-12-01 08:00 荣锋亮 阅读(13) 评论(0) 推荐(0) 编辑

json-rules-engine engine 简单说明
摘要:engine包含了存储,执行规则,提交事件以及维护状态,比如添加以及一处fact,添加、删除、更新rule,同时还包含添加operator,添加以及维护conddition 执行 // run the engine await engine.run() // with constant facts 阅读全文

posted @ 2024-11-30 08:00 荣锋亮 阅读(7) 评论(0) 推荐(0) 编辑

json-rules-engine facts 简单说明
摘要:facts 实际上就是在rule 引擎执行中需要的数据,facts 数据可以是常量(硬编码的),也可以是动态设置的 参考使用 // constant value facts let fact = new Fact('apiKey', '4feca34f9d67e99b8af2') // dynami 阅读全文

posted @ 2024-11-29 08:00 荣锋亮 阅读(3) 评论(0) 推荐(0) 编辑

1 2 3 4 5 ··· 185 下一页

导航