随笔档案「2025年4月」 - qsBye

机器人仿真笔记[6]-基于视觉大模型的无人机室内自主侦察

摘要：

基于视觉语言大模型(VLM)的无人机室内自主侦察仿真.实现无人机自主起飞, 避开障碍物以及穿过门洞进入第二个房间, 移动到字母`B`前面发射激光. 阅读全文

posted @ 2025-04-25 12:08 qsBye 阅读(190) 评论(0) 推荐(0)

机器人仿真笔记[5]-webots无人机起飞悬停

摘要：在webots中仿真无人机的起飞和悬停, 并获取机身摄像头画面. 阅读全文

posted @ 2025-04-25 08:50 qsBye 阅读(360) 评论(0) 推荐(0)

折腾笔记[29]-使用gradio的api进行深度估计

摘要：

使用dokcer/podman本地部署基于深度学习的深度估计(depth estimate)模块, 从单目图像中获取深度信息, 使用gradio_client调用api获取深度信息. 阅读全文

posted @ 2025-04-22 12:36 qsBye 阅读(257) 评论(0) 推荐(0)

折腾笔记[28]-使用deepseek函数调用(FnCalling)进行自动化

摘要：

使用ollama调用minicpm-v模型进行视觉场景认知, 然后将结果传递到deepseek进行移动决策和函数调用, 实现模拟控制机器人在场景中移动. 阅读全文

posted @ 2025-04-19 04:34 qsBye 阅读(313) 评论(0) 推荐(0)

折腾笔记[27]-使用OCR检测和识别字母

摘要：使用docker容器离线部署OCR, 使用OCR在自然场景检测(定位文字)和识别字母. 阅读全文

posted @ 2025-04-18 05:56 qsBye 阅读(303) 评论(0) 推荐(0)

折腾笔记[26]-基于深度学习的图像关键点提取及特征匹配

摘要：使用docker容器离线部署图像关键点检测模块, 体验基于深度学习的图像关键点提取及特征匹配. 阅读全文

posted @ 2025-04-17 09:07 qsBye 阅读(583) 评论(0) 推荐(0)

折腾笔记[25]-使用VGGT进行基于图像的室内建图

摘要：使用VGGT进行基于单目图像(无imu)的室内建图.使用docker容器一键启动, 可用gradio API进行函数式调用. 阅读全文

posted @ 2025-04-17 06:54 qsBye 阅读(2355) 评论(0) 推荐(0)

折腾笔记[24]-使用rust基于光流法对比图像

摘要：使用rust推理onnx模型获取两张图片的光流信息, 比较图片之间的差异并使用色轮绘制差异部分. Use Rust to infer an ONNX model to obtain the optical flow information between two images, compare the differences between the images, and draw the different parts using a color wheel. 阅读全文

posted @ 2025-04-14 05:20 qsBye 阅读(273) 评论(0) 推荐(0)

折腾笔记[23]-使用rust进行图像分割

摘要：使用rust和ort库(onnxruntime后端)推理SAM2.1模型并获取图像分割结果. 阅读全文

posted @ 2025-04-12 13:44 qsBye 阅读(222) 评论(0) 推荐(0)

折腾笔记[22]-解决rust编译离奇报错

摘要：解决rust代码编译时的离奇报错. 阅读全文

posted @ 2025-04-12 10:16 qsBye 阅读(94) 评论(0) 推荐(0)

翻译[6]-onnx_opset22/23算子列表

摘要：列举onnx opset 22/23的所有算子. 阅读全文

posted @ 2025-04-09 02:05 qsBye 阅读(452) 评论(0) 推荐(0)

折腾笔记[21]-使用rust推理onnx模型

摘要：使用纯血rust推理onnx模型识别mnist手写数字. 阅读全文