随笔分类 -  云运维&&云架构

上一页 1 2 3 4 5 6 7 8 ··· 185 下一页

dremio 25.2 软件包以及github 源码更新了
摘要:昨天我说了dremio 发布了25.2 提供了新的catalog 支持,之后过了一段时间dremio同时也提供了软件包以及github 源码的更新 说明 25.1 版本构建关于dremio-js 的 私服问题在这次代码中也看到解决了,新功能代码可以看看 参考资料 https://github.com 阅读全文

posted @ 2024-10-26 08:13 荣锋亮 阅读(28) 评论(0) 推荐(0) 编辑

python通过__init__.py 进行模块依赖包的check
摘要:很多时候我们开发模块化项目,或者动态加载功能包的项目,对于依赖我们不希望直接在安装的时候就安装,而是按需使用 的时候进行主动安装(比如langchain 不少模块),解决方法很多,以下说明下基于__init__.py 的处理 一些参考解决方法 在调用模块方法的时候通过显示的import 模块,并通过 阅读全文

posted @ 2024-10-26 00:22 荣锋亮 阅读(14) 评论(0) 推荐(0) 编辑

dremio 25.2 发布
摘要:就在昨天dremio 发布了25.2 版本,此版本对于catalog 的支持添加了两个新的(Polaris Catalog 以及Unity Catalog) 说明 其他主要是关于历史bug 的fix 对于新catalog ce 版本实际上只Polaris Catalog ,默认没开启,需要通过plu 阅读全文

posted @ 2024-10-25 23:47 荣锋亮 阅读(20) 评论(0) 推荐(0) 编辑

weasyprint 基于html 的pdf 生成框架
摘要:weasyprint 基于html 的pdf 生成框架,我们可以基于css+ html 生成高质量的pdf 文件,weasyprint 使用简单 说明 weasyprint 的速度并不是很快,如果希望快速生成pdf文件的,可以选择其他解决方案,md2pdf 就使用了WeasyPrint只是为了支持灵 阅读全文

posted @ 2024-10-25 08:00 荣锋亮 阅读(36) 评论(0) 推荐(0) 编辑

通过rye 进行maturin rust python 扩展开发
摘要:rye 实际上也是一个python 包管理工具,实际上与uv 是比较类似的工具,都是同一个团队开发的,但是uv 相对晚一些出现的 rye 可以进行maturin 项目的开发,maturin 实际上也提供了内置的cli 可以快速开发 maturin 项目初始化 命令 rye init my-proje 阅读全文

posted @ 2024-10-24 08:00 荣锋亮 阅读(15) 评论(0) 推荐(0) 编辑

uv python 版本管理
摘要:最近版本的uv 也支持对于python 版本的管理(下载安装,支持cpython 以及pypy) 安装python 参考命令 uv python install 3.12.3 查看列表 uv python list 查找python 执行程序 uv python find # 默认是基于path的, 阅读全文

posted @ 2024-10-23 08:00 荣锋亮 阅读(169) 评论(0) 推荐(0) 编辑

基于uv 进行类似cargo 的workspace 管理
摘要:uv 支持类似cargo workspace模式的项目管理,可以实现多模块的开发机制,以下是一个简单学习 准备 uv 对于workspac 的支持,使用上类似rust cargo 项目结构 ├── README.md ├── packages │ ├── api │ │ ├── README.md 阅读全文

posted @ 2024-10-22 08:00 荣锋亮 阅读(30) 评论(0) 推荐(0) 编辑

uv 基于rust 编写的python 包管理以及项目管理工具
摘要:uv 基于rust 编写的python 包管理以及项目管理工具 包含的特性 简单工具可以替换pip,pip-tools,pipx,poetry,pyenv 等 比pip 快10-100 倍 安装以及管理python 版本 运行以及安装python 应用 运行脚本 支持类似cargo 模式的works 阅读全文

posted @ 2024-10-21 08:00 荣锋亮 阅读(42) 评论(0) 推荐(0) 编辑

基于prompt-poet进行了灵活的提示词模版管理
摘要:以前简单介绍过prompt-poet的使用,同时也进行了一些扩展(比如支持s3,oss,等加载的loader 集成) 实际上使用好prompt-poet 可以简化不少我们的提示词管理能力,实现灵活的个性化提示词能力,以下是一个简单的 使用说明 参考结构管理 prompt-poet 默认支持加载本地文 阅读全文

posted @ 2024-10-20 08:00 荣锋亮 阅读(25) 评论(0) 推荐(0) 编辑

pyfilesystem 一个简单试用
摘要:以前简单介绍过关于pyfilesystem 支持通用的文件系统访问,同时还提供了不少内部实现,可以快速使用,以下是一个关于 UserDataFS的简单试用 参考代码 app.py from fs.appfs import UserDataFS user_fs = UserDataFS('my_app 阅读全文

posted @ 2024-10-19 08:00 荣锋亮 阅读(6) 评论(0) 推荐(0) 编辑

pyfilesystem jinja2 loader 实现prompt-poet 提示词模板管理
摘要:效果实际与fsspec jinaj2 laoder类似,就是一个集成测试 pyfilesystem loader 实现 pyfs_loader.py import fs import jinja2 from jinja2.loaders import BaseLoader class PyFiles 阅读全文

posted @ 2024-10-18 06:29 荣锋亮 阅读(13) 评论(0) 推荐(0) 编辑

pyfilesystem python 通用文件系统抽象
摘要:pyfilesystem python 通用文件系统抽象包,对于统一基于文件的数据操作比较方便 目前一些内置的文件系统 app 文件系统 ftp 文件系统 memory 文件 mount 文件系统 multi 文件系统 os 文件系统 sub 文件系统 tar 文件系统 temporary 文件系统 阅读全文

posted @ 2024-10-17 06:12 荣锋亮 阅读(12) 评论(0) 推荐(0) 编辑

md2pdf python markdown 转pdf 包简单试用
摘要:md2pdf 是基于weasyprint 开发的一个markdown 转pdf 工具,功能上还是比较强大的,支持自定义效果,同时还支持基于jinja2 模版引擎的数据处理,在基本的转换完成之后内部会使用weasyprint 基于html 转换pdf 参考使用 安装 pip install git+h 阅读全文

posted @ 2024-10-16 05:56 荣锋亮 阅读(90) 评论(0) 推荐(0) 编辑

fsspec jinaj2 loader 简单说明
摘要:为了方便使用,我简单提取了jinja2 fspsec loader 的代码,开发成为一个pip 包,方便使用 代码 fsspec_loader.py from __future__ import annotations import pathlib from typing import TYPE_C 阅读全文

posted @ 2024-10-15 06:57 荣锋亮 阅读(8) 评论(0) 推荐(0) 编辑

自定义jinja2 loader 实现基于oss的prompt-poet 提示词模板存储
摘要:prompt-poet 默认支持的是基于本地文件系统或者直接模版内容的模式进行处理,对于实际使用上并不是很方便,可以通过简单的扩展jinja2 loader 实现基于fsspec 的模版加载,这么就可以支持各类存储的模型了,以下是一个简单示例,因为目前prompt-poet 内部处理是固定的,暂时只 阅读全文

posted @ 2024-10-14 06:40 荣锋亮 阅读(19) 评论(0) 推荐(0) 编辑

chainlit 实际部署一些问题
摘要:chainlit内部基于了socket.io 进行消息处理,socket.io 是有一些缺陷的,但是也有相关的解决方法,同时 对于启动的入口是加载的一个python 文件,这个处理上是动态加载里边的方法到chainlit 运行环境的 内部一些处理 load 模块处理 def load_module( 阅读全文

posted @ 2024-10-13 07:43 荣锋亮 阅读(53) 评论(0) 推荐(0) 编辑

fasthtml 快速创建web app 的框架
摘要:fasthtml 让我们可以基于python 代码就可以快速开发web app 的框架,使用上简单 说明 fasthtml 包含了丰富的组件,内部web 框架基于了starlette 与fastapi 是一样的,fasthtml 值得尝试下 参考资料 https://github.com/Answe 阅读全文

posted @ 2024-10-12 06:08 荣锋亮 阅读(101) 评论(0) 推荐(0) 编辑

chainlit 一些外部集成部署方法
摘要:chainlit 对于部署支持多种模式,比如直接all-in-one 的,基于fastapi 集成的(api 模式),基于copilot (web 地址 ),react (web 组件),以及其他外部集成,比如slack,team,discord 等,以下简单说明下 模式说明 web app 模式 阅读全文

posted @ 2024-10-11 07:20 荣锋亮 阅读(58) 评论(0) 推荐(0) 编辑

fastapi 通过依赖注入模式使用apscheduler
摘要:就是一个简单记录,方便后续使用 参考代码 api 服务 import uuid from fastapi import FastAPI,Header,Depends,HTTPException from typing import Annotated async def tenant_id(x_te 阅读全文

posted @ 2024-10-10 06:42 荣锋亮 阅读(39) 评论(0) 推荐(0) 编辑

fastapi apscheduler 通过函数引用添加job
摘要:主要是一个简单测试,同时集成fastapi,包含了简单参数传递 参考代码 import logging import uuid from fastapi import FastAPI from pytz import utc from apscheduler.schedulers.backgroun 阅读全文

posted @ 2024-10-09 06:35 荣锋亮 阅读(14) 评论(0) 推荐(0) 编辑

上一页 1 2 3 4 5 6 7 8 ··· 185 下一页

导航