随笔分类 -  持续集成

上一页 1 2 3 4 5 6 7 8 9 10 ··· 39 下一页

maestro ios 简单试用
摘要:主要是体验下maestro 的使用 预备 对于ios 需要以来facebook 的idb 需要安装 参考安装命令 brew tap facebook/fb brew install facebook/fb/idb-companion 试用 下载示例 直接使用maestro 自带的 maestro d 阅读全文

posted @ 2023-10-07 10:43 荣锋亮 阅读(29) 评论(0) 推荐(0) 编辑

maestro 移动ui 自动化测试框架
摘要:maestro 是一个移动ui 自动化测试框架,基于yaml 定义就可以快速的实现移动ui 的测试,支持ios,android,reactnatice,fluttermaestro 安装简单,就是一个二进制文件 说明 对于需要进行移动端自动化测试的团队maestro 是一个很值得使用的工具 参考资料 阅读全文

posted @ 2023-10-07 10:25 荣锋亮 阅读(142) 评论(0) 推荐(0) 编辑

使用pyenv 安装graalvm 23.1.0 试用
摘要:实际上graalvm 官方也有介绍基于pyenv 安装graalvm python 包的 安装 命令 pyenv install graalpy-23.1.0 效果 注意有些慢 使用 切换版本 pyenv local graalpy-23.1.0 执行python 代码 python app,py 阅读全文

posted @ 2023-10-06 22:43 荣锋亮 阅读(44) 评论(0) 推荐(0) 编辑

stepci 试用
摘要:stepci 是一个api 自动测试工具,以下是一个简单的试用 试用 支持的命令 package.json { "devDependencies": { "stepci": "^2.6.8" }, "scripts": { "app":"export STEPCI_DISABLE_ANALYTICS 阅读全文

posted @ 2023-10-06 10:16 荣锋亮 阅读(23) 评论(0) 推荐(0) 编辑

stepci 开源api 自动测试框架
摘要:stepci 是基于nodejs 开发的,开源api 自动测试框架 包含的特性 语言无关 可以基于yaml,json,js 定义 支持多种框架 rest,graphl,grpc,trpc,soap 自托管 可以集成到ci/cd中,同时可以自己部署与行 可集成 可以很好的与其他工具集成 说明 step 阅读全文

posted @ 2023-10-06 09:59 荣锋亮 阅读(22) 评论(0) 推荐(0) 编辑

gradio 机器学习应用共享框架
摘要:gradio 是一个机器学习应用共享框架,不少开源机器学习模型都基于gradio 提供了可以快速体验模型的ui 参考使用 安装 pip install gradio 简单代码 app.py import gradio as gr def greet(name): return "Hello " + 阅读全文

posted @ 2023-10-02 20:56 荣锋亮 阅读(208) 评论(0) 推荐(0) 编辑

dbt dbt-project-evaluator 扩展
摘要:dbt-project-evaluator 是官方提供的一个dbt 扩展,可以方便的自动帮助我们发现模型DAG的问题 支持的功能 协助模型的最佳实践 协助测试的最佳实践 协助文档的最佳实践 协助项目文件结构的最佳实践 协助模型物化最佳实践 协助模型治理最佳实践 目前支持的数据库 bigquery d 阅读全文

posted @ 2023-09-30 11:14 荣锋亮 阅读(22) 评论(0) 推荐(0) 编辑

feast 开源feature store
摘要:对于机器学习特征处理是一个比较重要,特征的质量会严重影响模型的质量,而且很多时候我们都是希望实时的特征数据feast 是一个开源的特征存储实现,包含了离线以及实时特征的存储以及获取(包含了sdk,可以进行特征的获取) 参考架构 包含的组件:registry: 对象存储,持久化特征,我们可以通过sdk 阅读全文

posted @ 2023-09-19 14:11 荣锋亮 阅读(202) 评论(0) 推荐(0) 编辑

embeddedkafka 方便测试的基于内存的kafka 实现
摘要:embeddedkafka 方便测试的基于内存的kafka 实现,可以用来方便的进行基于kafka 周边的测试目前embeddedkafka提供了stream,core,conenct 以及schema-registry,对于测试场景是一个不错的选择 参考资料 https://github.com/ 阅读全文

posted @ 2023-09-19 13:42 荣锋亮 阅读(53) 评论(0) 推荐(0) 编辑

spark on k8s 开发部署简单实践
摘要:实际上就是一个简单的实践,方便参考,对于开发以及运行,集成ci/cd 以及dophinscheduler 任务调度为了方便开发的spark 应用共享以及使用基于s3 进行文件存储(当然dophinscheduler 也是支持自己的资源库的) 参考图 玩法说明 基于gitlab 进行代码管理,通过ci 阅读全文

posted @ 2023-08-21 22:38 荣锋亮 阅读(123) 评论(0) 推荐(0) 编辑

python 新的包构建模式
摘要:实际上是PEP 517 的定义,主要是对于基于distutils以及setuptools 已经存在太久的时间了,需要一些调整了目前已经有了不少相关的实现了,同时也有不少python 包的开发就是基于了新的规范了,hatch 以及poetry 是一个不错的选择 说明 关于python包开发的,有一本很 阅读全文

posted @ 2023-08-12 12:35 荣锋亮 阅读(20) 评论(0) 推荐(0) 编辑

cookiecutter python 项目模版工具
摘要:cookiecutter python 项目模版工具,可以帮助我们快速基于模版生成python 项目(当然也支持c 项目)有不少python 项目都是基于此工具的比如dbt adapter 开发就基于此提供了方便的adapter 生成 dbt adapter 参考模版 cookiecutter 创建 阅读全文

posted @ 2023-08-06 21:10 荣锋亮 阅读(42) 评论(0) 推荐(0) 编辑

sqlfluff sql linter 以及自动格式化工具
摘要:sqlfluff sql linter 以及自动格式化工具 ,支持多数据库方言,以及模版代码,比较适合ELT 类型的数据分析应用,同时对于dbt 也是比较友好的 特性 多种数据库方言支持 支持模版(jinja,dbt) 可以很好的集成ci/cd dbt 参考效果 因为dbt 使用了jinja 模版引 阅读全文

posted @ 2023-08-04 22:56 荣锋亮 阅读(284) 评论(0) 推荐(0) 编辑

OpenFeature 特性flag 标准协议
摘要:OpenFeature 属于cncf 一个沙箱项目 OpenFeature 特性 社区驱动的标准协议 一个sdk 可以支持各种后端 目前包含了不少支持工具(包含了开源的以及商业工具) 支持不少客户端(目前支持了js,java,golang,c#,php) 核心概念 OpenFeature 提供了一些 阅读全文

posted @ 2023-07-10 10:14 荣锋亮 阅读(219) 评论(0) 推荐(0) 编辑

mutagen 快速文件同步&网络转发工具
摘要:mutagen 快速文件同步&网络转发工具,可以快速实现基于云的本地开发环境构建,提供了灵活的 传输协议,支持本地,server 以及容器基础设施(实际上就是本地,ssh,以及dokcer 容器) 参考使用(同步模式) mutagen 会有一个daemon 进程,这个是自动启动的,当然也有控制命令, 阅读全文

posted @ 2023-07-02 18:46 荣锋亮 阅读(125) 评论(0) 推荐(0) 编辑

kubeskoop 阿里开源的k8s 网络分析工具
摘要:kubeskoop 是阿里开源的k8s 网络分析工具,提供了一个完整的k8s 网络分析工具集,可以快速帮助我们分析容器网络问题,支持不少cni 插件 参考图 说明 kubeskoop 技术上利用了ebpf,功能还是很强大的,同时提供了可视化ui 工具,是一个很不错的k8s网络分析工具,很值得使用下 阅读全文

posted @ 2023-07-01 08:52 荣锋亮 阅读(191) 评论(0) 推荐(0) 编辑

squawk pg linter 工具
摘要:squawk 是一个pg linter 工具,主要作用是对于数据迁移的处理,基于rust 开发 说明 同时官方还提供了一个方便安全迁移的指南,很值得学习 参考资料 https://github.com/sbdchd/squawkhttps://squawkhq.com/https://benchli 阅读全文

posted @ 2023-06-25 14:36 荣锋亮 阅读(18) 评论(0) 推荐(0) 编辑

graalvm 新的免费许可协议
摘要:就在最近oracle 发布了一个新的graalvm 发行版(oracle graalvm),同时也调整了许可模型,大致上是除非你收费基于graalvm 开发的应用,基本上oraclegraalvm 分发版本的可以免费使用,包含了不少新特性 当前版本的特性 profile 指南优化,提供了更多的编译优 阅读全文

posted @ 2023-06-23 10:29 荣锋亮 阅读(265) 评论(0) 推荐(0) 编辑

gosec 基于ast 的golang 安全检查工具
摘要:gosec 基于ast 的golang 安全检查工具,核心是基于了一些rule 进行安全的处理 参考使用 安装 官方提供了对应操作系统的包,安装就可以了,也可以使用go install 命令安装 使用 当然gosec 还有其他命令可以选择,具体可以通过gosec 查看 gosec . 参考资料 ht 阅读全文

posted @ 2023-06-06 08:23 荣锋亮 阅读(151) 评论(0) 推荐(0) 编辑

adr 方便的架构决策记录方法
摘要:adr 是编译中方便的架构决策记录方法,同时也纳入了技术雷达中,是一个很值得使用的模式 包含的内容 一般会包含标题,状态,上下文,决策,以及影响,aws 官方包含了很不错的例子,值得学习下 格式 对于存储格式没明确要求,实际上github 有一个adr 的组织,包含了不少实现工具,很值得参考学习对于 阅读全文

posted @ 2023-05-31 21:11 荣锋亮 阅读(36) 评论(0) 推荐(0) 编辑

上一页 1 2 3 4 5 6 7 8 9 10 ··· 39 下一页

导航