javacv教程文档手册开发指南汇总篇

合集 - JavaCV(91)

1.javaCV入门指南：序章2018-09-282.JavaCV入门指南：帧抓取器(FrameGrabber)的原理与应用2020-06-193.JavaCV入门指南：帧录制器/推流器(FrameRecorder)的原理与应用2020-06-194.javaCV入门指南：调用FFmpeg原生API和JavaCV是如何封装了FFmpeg的音视频操作？2018-11-035.JavaCV入门指南：调用opencv原生API和JavaCV是如何封装了opencv的图像处理操作？2020-06-286.JavaCV入门指南：FrameConverter转换工具类及CanvasFrame图像预览工具类（javaCV教程完结篇）2020-06-287.JavaCV入门指南之快速上手篇：快速上手视频拉流、推流、录制文件、录屏、截图和编解码复用解复用等常用音视频处理操作2021-01-128.javacv开发详解之1：调用本机摄像头视频（建议使用javaCV最新版本）2016-06-139.javaCV开发详解之2：推流器实现，推本地摄像头视频到流媒体服务器以及摄像头录制视频功能实现(基于javaCV-FFMPEG、javaCV-openCV)2016-09-2710.javaCV开发详解之3：收流器实现，录制流媒体服务器的rtsp/rtmp视频文件(基于javaCV-FFMPEG)2016-09-2711.javaCV开发详解之4：转流器实现（也可作为本地收流器、推流器，新增添加图片及文字水印，视频图像帧保存），实现rtsp/rtmp/本地文件转发到rtmp流媒体服务器(基于javaCV-FFMPEG)2016-09-2812.javaCV开发详解之5：录制音频(录制麦克风)到本地文件/流媒体服务器(基于javax.sound、javaCV-FFMPEG)2016-09-2913.javaCV开发详解之6：本地音频(话筒设备)和视频(摄像头)抓取、混合并推送(录制)到服务器(本地)2016-10-1314.javaCV开发详解之7：让音频转换更加简单，实现通用音频编码格式转换、重采样等音频参数的转换功能（以pcm16le编码的wav转mp3为例）2016-10-3115.javaCV开发详解之8：转封装在rtsp转rtmp流中的应用（无须转码，更低的资源消耗）2018-10-1216.javaCV开发详解之9：基于gdigrab的windows屏幕画面抓取/采集（基于javacv的屏幕截屏、录屏功能）2020-04-2617.javaCV开发详解之10：基于dshow调用windows摄像头视频和音频，想要获取屏幕画面首选gdigrab2020-04-2918.javaCV开发详解之11：视频文件转gif动态图片实现，也支持摄像机、桌面屏幕、流媒体等视频源转gif2020-06-1019.javaCV开发详解之12：视频转apng动态图片实现，支持透明通道，也支持摄像机、桌面屏幕、流媒体等视频源转apng动态图2020-06-1120.javaCV开发详解之13：简单使用FFmpeg-Filter过滤器处理音视频，添加特殊效果2020-06-1921.javaCV开发详解之14：音频重采样2020-06-1922.javaCV开发详解之15：视频帧像素格式转换2020-06-1923.javaCV开发详解之16：使用一张图片推流和一张图片录制成视频文件2020-06-2824.javaCV开发详解之17：GIF和APNG动态图片推流和录制成视频文件（以gif转mp4和apng转mp4为例）2020-06-2825.javaCV开发详解之18：音视频转码（音频编解码和视频编解码）2020-07-0726.JavaCV开发详解之19：如何开启GPU硬件加速，使用JavaCV进行音视频的硬解码和硬编码（支持intel、amd和nvidia）2020-07-0727.JavaCV开发详解之20：如何使用JavaCV制作ico图标，图片和视频生成ico图标，视频流录制ico图标2020-08-2528.JavaCV开发详解之21：如何使用JavaCV接入gb28181的ps流并推流到流媒体服务和接入海康大华sdk回调h264/hevc裸流2021-01-1229.JavaCV开发详解之22：http-flv拉流和http-flv推流及rtmp拉流和rtmp推流实例和flv推流和flv录制，关于rtmp/flv支持h265补充说明2021-01-1230.JavaCV开发详解之23：hls视频录制，m3u8切片录制和fmp4切片录制详解2021-01-1231.JavaCV开发详解之24：使用javacv录制dash视频分片，mpeg-dash视频录制，mpd视频录制2021-01-1232.JavaCV开发详解之25：使用javacv保存raw视频像素格式(yuv或者rgb)，并使用ffplay播放raw2021-01-1233.JavaCV开发详解之26：使用javacv对视频进行连续截图和覆盖截图，支持png,jpg,bmp等格式快速连续截图，适用于rtsp/rtmp/flv/hls等流媒体和本地视频快照2021-01-1234.JavaCV开发详解之26补充篇：视频连续截图并按日期格式生成图片文件名称，支持png,jpg,bmp等格式快速连续截图2022-03-1635.JavaCV开发详解之27：使用javacv把视频切割成多个视频分片文件，以mp4为例，把视频切割成MP4分片文件2021-01-1236.JavaCV开发详解之28：如何使用javacv进行多图推流和多图合成视频文件,以批量jpg图片推流rtmp和jpg合成flv视频文件为例2021-01-1237.JavaCV开发详解之29：使用javacv将多个视频拼接合成单个视频，多个音频拼接合成单个音频，以多个mp4视频合成一个mp4为例2021-02-0538.JavaCV开发详解之30：使用javacv拉取rtsp视频流，rtsp解复用器详解。如何把rtsp调教的服服帖帖，让rtsp拉流不再丢包2021-02-0239.JavaCV开发详解之31：如何计算pts/dts时间戳，在视频转码和转复用中如何自行计算pts/dts时间戳2021-05-2040.JavaCV开发详解之32：使用filter滤镜实现中文字符叠加2021-07-0241.JavaCV开发详解之33：使用filter滤镜实现动态日期时间叠加2021-07-0242.JavaCV开发详解之34：使用filter滤镜实现字符滚动和无限循环滚动字符叠加，跑马灯特效制作2021-07-0243.JavaCV开发详解之36：使用delogo滤镜实现去除和屏蔽视频水印2022-11-1844.JavaCV开发详解之35：使用filter滤镜实现画中画，以屏幕画面叠加摄像头画面为例2021-07-0245.javaCV开发详解之GIF动态图片录制补充篇：windows桌面屏幕画面录制成gif动态图片，支持桌面屏幕任意区域生成gif，可扩展支持MacOS/安卓/linux等平台，可扩展支持apng动态图片2020-06-1146.如何在龙芯架构和国产化操作系统平台上运行javacv2021-07-0247.聊聊视频中的编解码器，你所不知道的h264、h265、vp8、vp9和av1编解码库2022-03-1648.JavaCV音视频开发宝典：vb8和vp9编码的webm格式视频文件转成mp4文件2022-11-1849.JavaCV升级1.5.6之后遇到h265/hevc编码的视频无法打开编解码器avcodec_open2() error -1:Could not open video codec异常解决办法2022-03-1650.JavaCV更新到1.5.x版本后的依赖问题说明以及如何精简依赖包大小2021-01-1451.JavaCV音视频开发宝典：使用JavaCV和springBoot实现websocket-flv直播服务,无需流媒体服务,浏览器网页flv.js播放器直接播放rtsp,rtmp等实时视频2022-03-1752.JavaCV音视频开发宝典：无需流媒体服务也无需转码(低资源消耗)，使用JavaCV和springBoot实现http-flv转封装直播服务，浏览器网页flv.js直接播放rtp、rtsp、rtmp实时视频2022-06-0153.JavaCV音视频开发宝典：使用JavaCV和springBoot实现http-flv直播服务,无需流媒体服务,浏览器网页flv.js转封装方式播放rtsp,rtmp和桌面投屏实时画面2022-03-1754.javacv开发详解补充篇：如何将rgb/bgr像素数据优雅高效的转换为BufferedImage2021-01-1255.javaCV开发详解之技术杂烩：javaCV能帮我们做什么？能实现什么功能？ffmpeg和openCV能实现功能，javaCV如何做到更快、更简单的实现相应的功能？等等一堆实用话题2016-11-0356.JavaCV音视频开发宝典：录制vp8和vp9编码的webm格式视频，以mp4转webm为例2022-03-1657.音视频处理、图像处理、图像识别和字符识别全能库JavaCV完整教程（包含完整JavaCV入门、JavaCV实战、ffmpeg、opencv和tesserac教程）2021-11-0858.JavaCV音视频开发宝典：使用JavaCV实现webm直播服务,无需流媒体服务,无需mse转封装插件（flv.js,hls.js）,浏览器原生video标签直接播放rtsp,rtmp和桌面投屏直播2022-03-1659.JavaCV音视频开发宝典：实现Base64编码图片转换成图片文件通用转换器，以base64转png图片文件为例，其他图片格式也全部支持2022-03-1660.JavaCV音视频开发宝典：JavaCV读取Base64编码图片并解析预览图片2022-03-1661.JavaCV音视频开发宝典：使用JavaCV采集windows桌面屏幕画面并录屏mp4视频文件(FFmpeg基于dshow方式采集windows系统桌面画面)2022-03-1662.JavaCV音视频开发宝典：使用JavaCV采集windows系统声音并录制成mp3音频文件(FFmpeg采集windows系统声音)2022-03-1663.JavaCV音视频开发宝典：视频转码和转封装有什么区别？使用rtsp拉流转推到rtmp案例来讲一下转码和转封装实现的区别2022-03-1664.JavaCV的gpl v2许可协议排雷，写在TikTok违反GPLv2许可使用OBS源码的当下2022-03-1665.JavaCV音视频开发宝典：使用javacv读取GB28181、海康大华平台和网络摄像头sdk回调视频码流并转码推流rtmp流媒体服务2022-03-1666.JavaCV音视频开发宝典：rtsp拉流转码方式转推到rtmp2022-03-1667.javacv开发详解补充篇：解决转流后视频画面快进慢放，时间跳动过大，监控视频时间戳重新计算pts和dts2021-01-1268.JavaCV音视频开发宝典：使用JavaCV读取海康平台或海康网络摄像头sdk回调视频TS码流并解析预览图像2023-06-1369.JavaCV进阶opencv图像检测识别：ffmpeg视频图像画面人脸检测2021-01-1270.JavaCV进阶opencv图像检测识别：摄像头图像人脸检测2021-01-1271.javaCV文字识别之2：视频文字识别和视频提取字幕文字字符2020-05-1372.javaCV文字识别之1：基于google的tesserac ocr识别图片中的文字，跨平台支持英文中文简体繁体等各种字符识别2020-05-1373.javaCV开发详解之补充篇：根据视频时间戳同步播放图像画面以及视频倍速播放实现2020-05-1374.javaCV开发详解补充篇：基于avfoundation的苹果Mac和ios获取屏幕画面及录屏/截屏以及摄像头画面和音频采样获取实现2020-05-1375.javacpp-FFmpeg系列补充：FFmpeg拉流截图实现在线演示demo（视频截图并返回base64图像，支持jpg/png/gif/bmp等多种格式）2018-09-2576.javacpp-FFmpeg系列之3： 像素图像数据转换（BGR与BufferdImage互转，RGB与BufferdImage互转，BufferdImage转Base64编码）2018-09-1977.javacpp-FFmpeg系列补充：FFmpeg解决avformat_find_stream_info检索时间过长问题2018-09-1878.javacpp-FFmpeg系列之2：通用拉流解码器，支持视频拉流解码并转换为YUV、BGR24或RGB24等图像像素数据2018-09-1879.javacpp-FFmpeg系列之1：视频拉流解码成YUVJ420P，并保存为jpg图片2018-09-1880.javacpp-opencv图像处理系列：国内车辆牌照检测识别系统（万份测试车牌识别准确率99.7%以上，单次平均耗时39ms）2017-06-1181.javacpp-opencv图像处理3：使用opencv原生方法遍历摄像头设备及调用(增加实时帧率计算方法)2017-02-2782.javacpp-opencv图像处理之2：实时视频添加图片水印，实现不同大小图片叠加，图像透明度控制，文字和图片双水印2016-11-2183.javacpp-opencv图像处理之1：实时视频添加文字水印并截取视频图像保存成图片，实现文字水印的字体、位置、大小、粗度、翻转、平滑等操作2016-11-2084.javaCV图像处理之Frame、Mat和IplImage三者相互转换(使用openCV进行Mat和IplImage转换)2016-11-1885.java音视频编解码问题：16/24/32位位音频byte[]转换为小端序short[],int[]，以byte[]转short[]为例2016-10-1186.音视频编解码问题：javaCV如何快速进行音频预处理和解复用编解码（基于javaCV-FFMPEG）2016-10-2087.JavaCV实战专栏文章目录（JavaCV速查手册）2021-06-2288.JavaCV复杂滤镜filter特效处理入门教程和常用案例汇总2021-05-20

89.javacv教程文档手册开发指南汇总篇2020-08-25

90.javacv实现实时视频截图和录像服务easyCV2018-10-2491.JavaCV入门指南教程目录2021-12-03

收起

本章作为javacv技术栈系列文章汇总

前言

写了不少关于javacv的文章，不敢说精通 ，只能说对javacv很熟悉。虽然偶尔也提交pull request做做贡献，但是javacv包含的库实在太多了。有些库也不太可能每个应用场景都会用到，所以平时主要还是以ffmpeg音视频处理为主，顺带着写一点opencv图像处理，图像检测识别和tessert文字识别等等。

javacv是什么？javacv技术栈能做什么？

一个老生常谈的问题，相信大家各种搜索引擎搜一下应该知道它能做了什么了。
首先是音视频处理，编解码，装封装，只要ffmpeg可以的javacv就可以，他们没有什么不同。
再者是图像处理和图像识别，可以借助opencv图像检测识别和tessert字符识别，他们也没有什么不同，只是javacv通过jni让它们跨平台了而已，不需要自己再去封装了。
剩下的包含矩阵计算，深度学习等方面的内容，了解不多，不多赘述。

javacv技术栈的应用场景

很多人好奇，现在javacv常被用在哪些应用场景下？
javacv跨平台，不仅可以在windows，linux，macos等服务器或者客户都安机器上工作，在各种嵌入式板子上也不在话下。

嵌入式领域：
很多人把javacv用在树莓派等等的一些基于arm芯片的板子上，外挂摄像头或者音频设备就可以实现音视频上传，图像处理，图像识别等等操作。

流媒体：
利用javacv的流媒体优势，可以轻松实现音视频采集，推流，编解码，装封装等等操作。

深度学习：
deeplearn4j为主的利用java大数据能力进行深度学习，这方面了解不多，但是它确实挺出名的。

人脸检测识别：
网上搜到javacv最多的文章就是关于人脸检测识别的了，javacv官网的首页demo就是人脸检测的例子，opencv能做到的它都可以。

文字识别：
利用Tesseract-OCR可以轻松实现字符库训练，字符识别。还可以借助javacv特有的流媒体属性和嵌入式开发特性实现摄像头的字符识别，视频图像的字符识别等场景。

JavaCV入门指南系列

• JavaCV入门指南：序章（看完本章后，不想看原理的小伙伴可直接跳转到《快速上手篇》）

• JavaCV入门指南：调用FFmpeg原生API和JavaCV是如何封装了FFmpeg的音视频操作

• JavaCV入门指南：调用opencv原生API和JavaCV是如何封装了opencv的图像处理操作

• JavaCV入门指南：帧抓取器(FrameGrabber)的原理与应用

• JavaCV入门指南：帧录制器/推流器(FrameRecorder)的原理与应用

• JavaCV入门指南：帧过滤器(FrameFilter)的原理与应用

• JavaCV入门指南：FrameConverter转换工具类及CanvasFrame图像预览工具类（完结篇） 

• 《快速上手篇》（为了区别，单独划分）：
• JavaCV入门指南之快速上手篇：快速上手视频拉流、推流、录制文件、录屏、截图和编解码复用解复用等常用音视频处理操作

javaCV实战系列

• javacv开发详解之1：调用本机摄像头视频

• javaCV开发详解之2：推流器实现，推本地摄像头视频到流媒体服务器以及摄像头录制视频功能实现(基于javaCV-FFMPEG、javaCV-openCV)

• javaCV开发详解之3：收流器实现，录制流媒体服务器的rtsp/rtmp视频文件(基于javaCV-FFMPEG)

• javaCV开发详解之4：转流器实现（也可作为本地收流器、推流器，新增添加图片及文字水印，视频图像帧保存），实现rtsp/rtmp/本地文件转发到rtmp流媒体服务器(基于javaCV-FFMPEG)

• javaCV开发详解之5：录制音频(录制麦克风)到本地文件/流媒体服务器(基于javax.sound、javaCV-FFMPEG)

• javaCV开发详解之6：本地音频(话筒设备)和视频(摄像头)抓取、混合并推送(录制)到服务器(本地)

• javaCV开发详解之7：让音频转换更加简单，实现通用音频编码格式转换、重采样等音频参数的转换功能（以pcm16le编码的wav转mp3为例）

• javaCV开发详解之8：转封装在rtsp转rtmp流中的应用（无须转码，更低的资源消耗，更好的性能，更低延迟）

• javaCV开发详解之9：基于gdigrab的windows屏幕画面抓取/采集（基于javacv的屏幕截屏、录屏功能）

• javaCV开发详解之10：基于dshow调用windows摄像头视频和音频，想要获取屏幕画面首选gdigrab

• javaCV开发详解之11：视频文件转gif动态图片实现，也支持摄像机、桌面屏幕、流媒体等视频源转gif

• javaCV开发详解之12：视频转apng动态图片实现，支持透明通道，支持摄像机、桌面屏幕、流媒体等视频源转apng动态图

• javaCV开发详解之13：使用FFmpeg Filter过滤器处理音视频

• javaCV开发详解之14：音频重采样

• javaCV开发详解之15：视频帧像素格式转换

• javaCV开发详解之16：使用一张图片推流和一张图片录制成视频文件

• javaCV开发详解之17：GIF和APNG动态图片推流和录制成视频文件（以gif转mp4为例）

• javaCV开发详解之18：音视频转码（音频编解码和视频编解码）

• JavaCV开发详解之19：如何开启GPU硬件加速，使用JavaCV进行音视频的硬解码和硬编码

• JavaCV开发详解之20：如何使用JavaCV制作ico图标，图片和视频生成ico图标，视频流录制ico图标

• JavaCV开发详解之21：如何使用JavaCV接入gb28181的ps流并推流到流媒体服务和接入海康大华sdk回调h264/hevc裸流

  JavaCV开发详解之22：http-flv拉流和http-flv推流及rtmp拉流和rtmp推流实例和flv,live_flv格式说明

  JavaCV开发详解之23：hls视频录制，m3u8切片录制和fmp4切片录制详解

  JavaCV开发详解之24：使用javacv录制dash视频分片，mpeg-dash视频录制和制作

  JavaCV开发详解之25：使用javacv保存raw视频像素格式(yuv或者rgb)，并使用ffplay播放raw
  JavaCV开发详解之26：使用javacv对视频进行连续截图和覆盖截图，支持png,jpg,bmp等格式快速连续截图，适用于视频快照
  JavaCV开发详解之27：使用javacv把视频切割成多个视频分片文件，以mp4为例，把视频切割成MP4分片文件

  JavaCV开发详解之28：如何使用javacv进行多图推流和多图合成视频文件,以批量jpg图片推流rtmp和jpg合成flv视频文件为例

• JavaCV开发详解之29：使用javacv将多个视频拼接合成单个视频，多个音频拼接合成单个音频

  JavaCV开发详解之27补充篇1：使用javacv把音视频切割成多个音频分片文件，以mp3为例，把视频切割成MP3分片文件

  JavaCV开发详解之30：如何使用javacv拉取rtsp视频流，rtsp解复用器详解。如何把rtsp调教的服服帖帖，让rtsp拉流不再丢包
  JavaCV开发详解之31：如何计算pts/dts时间戳，在视频转码和转复用中如何自行计算pts/dts时间戳

  javacv开发详解补充篇：解决转流后视频画面快进慢放，时间跳动过大，监控视频时间戳重新计算pts和dts

  JavaCV开发详解之32：使用filter滤镜实现中文字符叠加
  JavaCV开发详解之33：使用filter滤镜实现动态日期时间叠加
  JavaCV开发详解之34：使用filter滤镜实现无限循环滚动字符叠加，跑马灯特效
  JavaCV开发详解之35：使用filter滤镜实现画中画，以屏幕画面叠加摄像头画面为例

JavaCV及音视频相关补充篇

• javaCV开发详解补充篇：基于avfoundation的苹果Mac和ios获取屏幕画面及录屏/截屏以及摄像头画面和音频采样获取实现

• javaCV开发详解之GIF动态图片录制补充篇：windows桌面屏幕画面录制成gif动态图片，支持桌面任意取域生成gif，可扩展支持MacOS/安卓/linux等平台，可扩展支持apng动态图片

• 音视频编解码问题：javaCV如何快速进行音频预处理和解复用编解码（基于javaCV-FFMPEG）

• 音视频编解码问题：16/24/32位位音频byte[]转换为小端序short[],int[]，以byte[]转short[]为例

• 实现给图片增加图片水印或者文字水印（也支持视频图像帧添加水印）

• java原生实现屏幕设备遍历和屏幕采集（捕获）等功能

• 流媒体直播实时视频延迟时间排查和剖析

javacv进阶tesserac文字识别系列

• javaCV文字识别之1：基于google的tesserac ocr识别图片中的文字，跨平台支持英文中文简体繁体等各种字符识别

• javaCV文字识别之2：视频文字识别和视频提取字幕文字字符

javacv进阶ffmpeg系列

• javacpp-FFmpeg系列之1：视频拉流解码成YUVJ420P，并保存为jpg图片

• javacpp-FFmpeg系列之2：通用拉流解码器，支持视频拉流解码并转换为YUV、BGR24或RGB24等图像像素数据

• javacpp-FFmpeg系列之3： 图像数据转换（BGR与BufferdImage互转，RGB与BufferdImage互转）

• javacpp-FFmpeg系列补充：FFmpeg解决avformat_find_stream_info检索时间过长问题

javacv进阶opencv系列

• javaCV图像处理之1：实时视频添加文字水印并截取视频图像保存成图片，实现文字水印的字体、位置、大小、粗度、翻转、平滑等操作

• javaCV图像处理之2：实时视频添加图片水印，实现不同大小图片叠加，图像透明度控制

• javacv图像处理3：使用opencv原生方法遍历摄像头设备及调用（方便多摄像头遍历及调用，相比javacv更快的摄像头读取速度和效率，方便读取后的图像处理）

• javacv图像处理系列：国内车辆牌照检测识别系统（万份测试准确率99.7%以上）

javacv人脸检测识别

• JavaCV进阶opencv图像处理：摄像头图像人脸检测

• JavaCV进阶opencv图像处理：ffmpeg视频图像画面人脸检测

持续更新