Tio Boot DocsTio Boot Docs
Home
  • java-db
  • api-table
  • Enjoy
  • Tio Boot Admin
  • ai_agent
  • translator
  • knowlege_base
  • ai-search
  • 案例
Abount
  • Github
  • Gitee
Home
  • java-db
  • api-table
  • Enjoy
  • Tio Boot Admin
  • ai_agent
  • translator
  • knowlege_base
  • ai-search
  • 案例
Abount
  • Github
  • Gitee
  • 01_tio-boot 简介

    • tio-boot:新一代高性能 Java Web 开发框架
    • tio-boot 入门示例
    • Tio-Boot 配置 : 现代化的配置方案
    • tio-boot 整合 Logback
    • tio-boot 整合 hotswap-classloader 实现热加载
    • 自行编译 tio-boot
    • 最新版本
    • 开发规范
  • 02_部署

    • 使用 Maven Profile 实现分环境打包 tio-boot 项目
    • Maven 项目配置详解:依赖与 Profiles 配置
    • tio-boot 打包成 FastJar
    • 使用 GraalVM 构建 tio-boot Native 程序
    • 使用 Docker 部署 tio-boot
    • 部署到 Fly.io
    • 部署到 AWS Lambda
    • 到阿里云云函数
    • 使用 Deploy 工具部署
    • 胖包与瘦包的打包与部署
    • 使用 Jenkins 部署 Tio-Boot 项目
    • 使用 Nginx 反向代理 Tio-Boot
    • 使用 Supervisor 管理 Java 应用
  • 03_配置

    • 配置参数
    • 服务器监听器
    • 内置缓存系统 AbsCache
    • 使用 Redis 作为内部 Cache
    • 静态文件处理器
    • 基于域名的静态资源隔离
    • DecodeExceptionHandler
  • 04_原理

    • 生命周期
    • 请求处理流程
    • 重要的类
  • 05_json

    • Json
    • 接受 JSON 和响应 JSON
    • 响应实体类
  • 06_web

    • 概述
    • 文件上传
    • 接收请求参数
    • 接收日期参数
    • 接收数组参数
    • 返回字符串
    • 返回文本数据
    • 返回网页
    • 请求和响应字节
    • 文件下载
    • 返回视频文件并支持断点续传
    • http Session
    • Cookie
    • HttpRequest
    • HttpResponse
    • Resps
    • RespBodyVo
    • /zh/06_web/19.html
    • 全局异常处理器
    • 异步
    • 动态 返回 CSS 实现
    • 返回图片
    • Transfer-Encoding: chunked 实时音频播放
    • Server-Sent Events (SSE)
    • 接口访问统计
    • 接口请求和响应数据记录
    • 自定义 Handler 转发请求
    • 使用 HttpForwardHandler 转发所有请求
    • 跨域
    • 添加 Controller
    • 常用工具类
    • HTTP Basic 认证
    • WebJars
    • JProtobuf
  • 07_validate

    • 数据紧校验规范
    • 参数校验
  • 08_websocket

    • 使用 tio-boot 搭建 WebSocket 服务
    • WebSocket 聊天室项目示例
  • 09_java-db

    • java‑db
    • 操作数据库入门示例
    • SQL 模板
    • 数据源配置与使用
    • ActiveRecord
    • Model
    • 生成器与 Model
    • Db 工具类
    • 批量操作
    • 数据库事务处理
    • Cache 缓存
    • Dialect 多数据库支持
    • 表关联操作
    • 复合主键
    • Oracle 支持
    • Enjoy SQL 模板
    • Java-DB 整合 Enjoy 模板最佳实践
    • 多数据源支持
    • 独立使用 ActiveRecord
    • 调用存储过程
    • java-db 整合 Guava 的 Striped 锁优化
    • 生成 SQL
    • 通过实体类操作数据库
    • java-db 读写分离
    • Spring Boot 整合 Java-DB
    • like 查询
    • 常用操作示例
    • Druid 监控集成指南
    • SQL 统计
  • 10_api-table

    • ApiTable 概述
    • 使用 ApiTable 连接 SQLite
    • 使用 ApiTable 连接 Mysql
    • 使用 ApiTable 连接 Postgres
    • 使用 ApiTable 连接 TDEngine
    • 使用 api-table 连接 oracle
    • 使用 api-table 连接 mysql and tdengine 多数据源
    • EasyExcel 导出
    • EasyExcel 导入
    • TQL(Table SQL)前端输入规范
    • ApiTable 实现增删改查
    • 数组类型
    • 单独使用 ApiTable
  • 11_aop

    • JFinal-aop
    • Aop 工具类
    • 配置
    • 配置
    • 独立使用 JFinal Aop
    • @AImport
    • 原理解析
  • 12_cache

    • Caffine
    • Jedis-redis
    • hutool RedisDS
    • Redisson
    • Caffeine and redis
    • CacheUtils 工具类
    • 使用 CacheUtils 整合 caffeine 和 redis 实现的两级缓存
    • 使用 java-db 整合 ehcache
    • 使用 java-db 整合 redis
    • Java DB Redis 相关 Api
    • redis 使用示例
  • 13_认证和权限

    • hutool-JWT
    • FixedTokenInterceptor
    • 使用内置 TokenManager 实现登录
    • 用户系统
    • 重置密码
    • 匿名登录
    • Google 登录
    • 权限校验注解
    • Sa-Token
    • sa-token 登录注册
    • StpUtil.isLogin() 源码解析
    • 短信登录
    • 移动端微信登录实现指南
    • 移动端重置密码
  • 14_i18n

    • i18n
  • 15_enjoy

    • tio-boot 整合 Enjoy 模版引擎文档
    • 引擎配置
    • 表达式
    • 指令
    • 注释
    • 原样输出
    • Shared Method 扩展
    • Shared Object 扩展
    • Extension Method 扩展
    • Spring boot 整合
    • 独立使用 Enjoy
    • tio-boot enjoy 自定义指令 localeDate
    • PromptEngine
    • Enjoy 入门示例-擎渲染大模型请求体
    • Enjoy 使用示例
  • 16_定时任务

    • Quartz 定时任务集成指南
    • 分布式定时任务 xxl-jb
    • cron4j 使用指南
  • 17_tests

    • TioBootTest 类
  • 18_tio

    • TioBootServer
    • tio-core
    • 内置 TCP 处理器
    • 独立启动 UDPServer
    • 使用内置 UDPServer
    • t-io 消息处理流程
    • tio-运行原理详解
    • TioConfig
    • ChannelContext
    • Tio 工具类
    • 业务数据绑定
    • 业务数据解绑
    • 发送数据
    • 关闭连接
    • Packet
    • 监控: 心跳
    • 监控: 客户端的流量数据
    • 监控: 单条 TCP 连接的流量数据
    • 监控: 端口的流量数据
    • 单条通道统计: ChannelStat
    • 所有通道统计: GroupStat
    • 资源共享
    • 成员排序
    • ssl
    • DecodeRunnable
    • 使用 AsynchronousSocketChannel 响应数据
    • 拉黑 IP
    • 深入解析 Tio 源码:构建高性能 Java 网络应用
  • 19_aio

    • ByteBuffer
    • AIO HTTP 服务器
    • 自定义和线程池和池化 ByteBuffer
    • AioHttpServer 应用示例 IP 属地查询
    • 手写 AIO Http 服务器
  • 20_netty

    • Netty TCP Server
    • Netty Web Socket Server
    • 使用 protoc 生成 Java 包文件
    • Netty WebSocket Server 二进制数据传输
    • Netty 组件详解
  • 21_netty-boot

    • Netty-Boot
    • 原理解析
    • 整合 Hot Reload
    • 整合 数据库
    • 整合 Redis
    • 整合 Elasticsearch
    • 整合 Dubbo
    • Listener
    • 文件上传
    • 拦截器
    • Spring Boot 整合 Netty-Boot
    • SSL 配置指南
    • ChannelInitializer
    • Reserve
  • 22_MQ

    • Mica-mqtt
    • EMQX
    • Disruptor
  • 23_tio-utils

    • tio-utils
    • HttpUtils
    • Notification
    • 邮箱
    • JSON
    • 读取文件
    • Base64
    • 上传和下载
    • Http
    • Telegram
    • RsaUtils
    • EnvUtils 使用文档
    • 系统监控
    • 毫秒并发 ID (MCID) 生成方案
  • 24_tio-http-server

    • 使用 Tio-Http-Server 搭建简单的 HTTP 服务
    • tio-boot 添加 HttpRequestHandler
    • 在 Android 上使用 tio-boot 运行 HTTP 服务
    • tio-http-server-native
    • handler 常用操作
  • 25_tio-websocket

    • WebSocket 服务器
    • WebSocket Client
  • 26_tio-im

    • 通讯协议文档
    • ChatPacket.proto 文档
    • java protobuf
    • 数据表设计
    • 创建工程
    • 登录
    • 历史消息
    • 发消息
  • 27_mybatis

    • Tio-Boot 整合 MyBatis
    • 使用配置类方式整合 MyBatis
    • 整合数据源
    • 使用 mybatis-plus 整合 tdengine
    • 整合 mybatis-plus
  • 28_mongodb

    • tio-boot 使用 mongo-java-driver 操作 mongodb
  • 29_elastic-search

    • Elasticsearch
    • JavaDB 整合 ElasticSearch
    • Elastic 工具类使用指南
    • Elastic-search 注意事项
    • ES 课程示例文档
  • 30_magic-script

    • tio-boot 整合 magic-script
  • 31_groovy

    • tio-boot 整合 Groovy
  • 32_firebase

    • 整合 google firebase
    • Firebase Storage
    • Firebase Authentication
    • 使用 Firebase Admin SDK 进行匿名用户管理与自定义状态标记
    • 导出用户
    • 注册回调
    • 登录注册
  • 33_文件存储

    • 文件上传数据表
    • 本地存储
    • 使用 AWS S3 存储文件并整合到 Tio-Boot 项目中
    • 存储文件到 腾讯 COS
  • 34_spider

    • jsoup
    • 爬取 z-lib.io 数据
    • 整合 WebMagic
    • WebMagic 示例:爬取学校课程数据
    • Playwright
    • Flexmark (Markdown 处理器)
    • tio-boot 整合 Playwright
    • 缓存网页数据
  • 36_integration_thirty_party

    • tio-boot 整合 okhttp
    • 整合 GrpahQL
    • 集成 Mailjet
    • 整合 ip2region
    • 整合 GeoLite 离线库
    • 整合 Lark 机器人指南
    • 集成 Lark Mail 实现邮件发送
    • Thymeleaf
    • Swagger
    • Clerk 验证
  • 37_dubbo

    • 概述
    • dubbo 2.6.0
    • dubbo 2.6.0 调用过程
    • dubbo 3.2.0
  • 38_spring

    • Spring Boot Web 整合 Tio Boot
    • spring-boot-starter-webflux 整合 tio-boot
    • Tio Boot 整合 Spring Boot Starter
    • Tio Boot 整合 Spring Boot Starter Data Redis 指南
  • 39_spring-cloud

    • tio-boot spring-cloud
  • 40_mysql

    • 使用 Docker 运行 MySQL
    • /zh/42_mysql/02.html
  • 41_postgresql

    • PostgreSQL 安装
    • PostgreSQL 主键自增
    • PostgreSQL 日期类型
    • Postgresql 金融类型
    • PostgreSQL 数组类型
    • PostgreSQL 全文检索
    • PostgreSQL 查询优化
    • 获取字段类型
    • PostgreSQL 向量
    • PostgreSQL 优化向量查询
    • PostgreSQL 其他
  • 43_oceanbase

    • 快速体验 OceanBase 社区版
    • 快速上手 OceanBase 数据库单机部署与管理
    • 诊断集群性能
    • 优化 SQL 性能指南
    • /zh/43_oceanbase/05.html
  • 50_media

    • JAVE 提取视频中的声音
    • Jave 提取视频中的图片
    • /zh/50_media/03.html
  • 51_asr

    • Whisper-JNI
  • 54_native-media

    • java-native-media
    • JNI 入门示例
    • mp3 拆分
    • mp4 转 mp3
    • 使用 libmp3lame 实现高质量 MP3 编码
    • Linux 编译
    • macOS 编译
    • 从 JAR 包中加载本地库文件
    • 支持的音频和视频格式
    • 任意格式转为 mp3
    • 通用格式转换
    • 通用格式拆分
    • 视频合并
    • VideoToHLS
    • split_video_to_hls 支持其他语言
    • 持久化 HLS 会话
  • 55_telegram4j

    • 数据库设计
    • /zh/55_telegram4j/02.html
    • 基于 MTProto 协议开发 Telegram 翻译机器人
    • 过滤旧消息
    • 保存机器人消息
    • 定时推送
    • 增加命令菜单
    • 使用 telegram-Client
    • 使用自定义 StoreLayout
    • 延迟测试
    • Reactor 错误处理
    • Telegram4J 常见错误处理指南
  • 56_telegram-bots

    • TelegramBots 入门指南
    • 使用工具库 telegram-bot-base 开发翻译机器人
  • 60_LLM

    • 简介
    • AI 问答
    • /zh/60_LLM/03.html
    • /zh/60_LLM/04.html
    • 增强检索(RAG)
    • 结构化数据检索
    • 搜索+AI
    • 集成第三方 API
    • 后置处理
    • 推荐问题生成
    • 连接代码执行器
    • 避免 GPT 混乱
    • /zh/60_LLM/13.html
  • 61_ai_agent

    • 数据库设计
    • 示例问题管理
    • 会话管理
    • 历史记录
    • 对接 Perplexity API
    • 意图识别与生成提示词
    • 智能问答模块设计与实现
    • 文件上传与解析文档
    • 翻译
    • 名人搜索功能实现
    • Ai studio gemini youbue 问答使用说明
    • 自建 YouTube 字幕问答系统
    • 自建 获取 youtube 字幕服务
    • 通用搜索
    • /zh/61_ai_agent/15.html
    • 16
    • 17
    • 18
    • 在 tio-boot 应用中整合 ai-agent
    • 16
  • 62_translator

    • 简介
  • 63_knowlege_base

    • 数据库设计
    • 用户登录实现
    • 模型管理
    • 知识库管理
    • 文档拆分
    • 片段向量
    • 命中测试
    • 文档管理
    • 片段管理
    • 问题管理
    • 应用管理
    • 向量检索
    • 推理问答
    • 问答模块
    • 统计分析
    • 用户管理
    • api 管理
    • 存储文件到 S3
    • 文档解析优化
    • 片段汇总
    • 段落分块与检索
    • 多文档解析
    • 对话日志
    • 检索性能优化
    • Milvus
    • 文档解析方案和费用对比
    • 离线运行向量模型
  • 64_ai-search

    • ai-search 项目简介
    • ai-search 数据库文档
    • ai-search SearxNG 搜索引擎
    • ai-search Jina Reader API
    • ai-search Jina Search API
    • ai-search 搜索、重排与读取内容
    • ai-search PDF 文件处理
    • ai-search 推理问答
    • Google Custom Search JSON API
    • ai-search 意图识别
    • ai-search 问题重写
    • ai-search 系统 API 接口 WebSocket 版本
    • ai-search 搜索代码实现 WebSocket 版本
    • ai-search 生成建议问
    • ai-search 生成问题标题
    • ai-search 历史记录
    • Discover API
    • 翻译
    • Tavily Search API 文档
    • 对接 Tavily Search
    • 火山引擎 DeepSeek
    • 对接 火山引擎 DeepSeek
    • ai-search 搜索代码实现 SSE 版本
    • jar 包部署
    • Docker 部署
    • 爬取一个静态网站的所有数据
    • 网页数据预处理
    • 网页数据检索与问答流程整合
  • 65_java-linux

    • Java 执行 python 代码
    • 通过大模型执行 Python 代码
    • MCP 协议
    • Cline 提示词
    • Cline 提示词-中文版本
  • 66_manim

    • Manim 开发环境搭建
    • 生成场景提示词
    • 生成代码
    • 完整脚本示例
    • 语音合成系统
    • Fish.audio TTS 接口说明文档与 Java 客户端封装
    • 整合 fishaudio 到 java-uni-ai-server 项目
    • 执行 Python (Manim) 代码
    • 使用 SSE 流式传输生成进度的实现文档
    • 整合全流程完整文档
    • HLS 动态推流技术文档
    • manim 分场景生成代码
    • 分场景运行代码及流式播放支持
    • 分场景业务端完整实现流程
    • Maiim布局管理器
    • 仅仅生成场景代码
    • 使用 modal 运行 manim 代码
    • Python 使用 Modal GPU 加速渲染
    • Modal 平台 GPU 环境下运行 Manim
    • Modal Manim OpenGL 安装与使用
    • 优化 GPU 加速
    • 生成视频封面流程
    • Java 调用 manim 命令 执行代码 生成封面
    • Manim 图像生成服务客户端文档
    • /zh/66_manim/25.html
    • /zh/66_manim/26.html
    • /zh/66_manim/27.html
  • 70_tio-boot-admin

    • 入门指南
    • 初始化数据
    • token 存储
    • 与前端集成
    • 文件上传
    • 网络请求
    • 图片管理
    • /zh/70_tio-boot-admin/08.html
    • Word 管理
    • PDF 管理
    • 文章管理
    • 富文本编辑器
  • 71_tio-boot

    • /zh/71_tio-boot/01.html
    • Swagger 整合到 Tio-Boot 中的指南
    • HTTP/1.1 Pipelining 性能测试报告
  • 80_性能测试

    • 压力测试 - tio-http-serer
    • 压力测试 - tio-boot
    • 压力测试 - tio-boot-native
    • 压力测试 - netty-boot
    • 性能测试对比
    • TechEmpower FrameworkBenchmarks
    • 压力测试 - tio-boot 12 C 32G
  • 99_案例

    • 封装 IP 查询服务
    • tio-boot 案例 - 全局异常捕获与企业微信群通知
    • tio-boot 案例 - 文件上传和下载
    • tio-boot 案例 - 整合 ant design pro 增删改查
    • tio-boot 案例 - 流失响应
    • tio-boot 案例 - 增强检索
    • tio-boot 案例 - 整合 function call
    • tio-boot 案例 - 定时任务 监控 PostgreSQL、Redis 和 Elasticsearch
    • Tio-Boot 案例:使用 SQLite 整合到登录注册系统
    • tio-boot 案例 - 执行 shell 命令

添加水印

package com.litongjava.media;

public class NativeMedia {
    /**
     * 给视频添加右下角水印(支持中文),输出单独保存的视频。
     * @param inputVideoPath 输入视频文件路径
     * @param outputVideoPath 输出视频文件保存路径
     * @param watermarkText 水印文本,要求传入 UTF-8 编码的文本(支持中文)
     * @param fontFile 字体文件路径,如果为 null 或空字符串,则使用默认字体
     * @return 处理状态信息
     */
    public static native String addWatermarkToVideo(String inputVideoPath,
                                                    String outputVideoPath,
                                                    String watermarkText,
                                                    String fontFile);
}

添加 avfilter

按如下步骤修改你的 CMakeLists.txt:

  1. 查找 avfilter 的头文件路径
    添加:
    find_path(AVFILTER_INCLUDE_DIR libavfilter/avfilter.h)
    message(STATUS "AVFILTER_INCLUDE_DIR: ${AVFILTER_INCLUDE_DIR}")
    
  2. 查找 avfilter 的库文件
    添加:
    find_library(AVFILTER_LIBRARY avfilter)
    message(STATUS "AVFILTER_LIBRARY: ${AVFILTER_LIBRARY}")
    
  3. 将 avfilter 的 include 目录添加到 include_directories()
    修改 include_directories 部分:
    include_directories(
            ${AVCODEC_INCLUDE_DIR}
            ${AVFORMAT_INCLUDE_DIR}
            ${SWRESAMPLE_INCLUDE_DIR}
            ${AVUTIL_INCLUDE_DIR}
            ${AVFILTER_INCLUDE_DIR}  # 添加这一行
            jni
    )
    
  4. 在 target_link_libraries() 中链接 avfilter 库
    修改 target_link_libraries 部分:
    target_link_libraries(native_media
            ${JNI_LIBRARIES}
            ${AVCODEC_LIBRARY}
            ${AVFORMAT_LIBRARY}
            ${SWRESAMPLE_LIBRARY}
            ${AVUTIL_LIBRARY}
            ${AVFILTER_LIBRARY}  # 添加这一行
    )
    

这样修改之后,链接器就能找到 avfilter 中的函数了

安装字体文件

你可以通过系统包管理器安装 Noto Sans CJK 字体,下面给出几个常用发行版的安装方法:

Ubuntu / Debian 系列

你可以运行以下命令:

sudo apt update
sudo apt install fonts-noto-cjk

安装完成后,字体文件一般位于 /usr/share/fonts/opentype/noto/ 或 /usr/share/fonts/truetype/noto/ 目录下,你可以使用如下命令查看安装的字体文件:

fc-list | grep -i noto

Fedora

在 Fedora 上,可以运行:

sudo dnf install google-noto-cjk-fonts

安装后,同样可以用 fc-list 命令确认字体路径和名称。

Arch Linux

在 Arch Linux 上,你可以使用 Pacman 来安装:

sudo pacman -S noto-fonts-cjk

手动安装

如果你的发行版软件源中没有提供对应的包,也可以从 Google Noto Fonts 的 GitHub 仓库 或 Noto 官网 下载对应的字体文件(通常是 .ttf 或 .ttc 格式),然后将字体文件复制到系统字体目录(如 /usr/share/fonts 或当前用户下的 ~/.fonts),接着刷新字体缓存:

fc-cache -f -v

使用注意

如果在 native 代码中需要指定字体的全路径,可以使用 fc-list 查找实际安装的 Noto Sans CJK 字体文件的路径,例如:

fc-list | grep -i "NotoSansCJK"

假如查到的路径是 /usr/share/fonts/truetype/noto/NotoSansCJK-Regular.ttc,那么 native 代码中默认的字体路径就可以设为这个路径。

通过以上方法,你就可以在 Linux 环境下安装并使用 NotoSansCJK-Regular 字体,从而在视频水印中正确显示中文。

C 代码

说明:

  1. 代码中使用了 FFmpeg 的 libavformat、libavcodec 与 libavfilter 库实现视频解码、重新编码以及过滤器链处理。
  2. 水印采用 FFmpeg 内置的 drawtext 过滤器,在这里我们设置参数使水印出现在右下角(表达式 x=w-tw-10 与 y=h-th-10 表示离右边与底边各 10 像素),并采用 24 号字体、白色字体。
  3. 为了保证中文能正常显示,必须保证传入的字体文件(例如支持中文的 simhei.ttf 或者其他中文字体)能支持中文字符。
  4. 代码中对错误处理做了一定基本处理,但在生产环境中建议加入更完善的错误清理与日志打印。
  5. 请确认工程中已经链接相关 FFmpeg 库,并配置好 JNI 环境。

下面是完整的示例代码(可以保存为例如 jni_video_watermark.c):


#include "com_litongjava_media_NativeMedia.h"
#include <jni.h>
#include <stdio.h>
#include <stdlib.h>
#include <string.h>
#include <stdint.h>
#include <time.h>

// 包含 FFmpeg 头文件
#include <libavformat/avformat.h>
#include <libavcodec/avcodec.h>
#include <libavfilter/avfilter.h>
#include <libavfilter/buffersink.h>
#include <libavfilter/buffersrc.h>
#include <libavutil/opt.h>
#include <libavutil/pixdesc.h>

JNIEXPORT jstring JNICALL Java_com_litongjava_media_NativeMedia_addWatermarkToVideo
  (JNIEnv *env, jclass clazz, jstring inputVideoPathJ, jstring outputVideoPathJ, jstring watermarkTextJ, jstring fontFileJ) {
    // 从 Java 获取文件路径、水印文本和字体文件路径
    const char *inputPath     = (*env)->GetStringUTFChars(env, inputVideoPathJ, NULL);
    const char *outputPath    = (*env)->GetStringUTFChars(env, outputVideoPathJ, NULL);
    const char *watermarkText = (*env)->GetStringUTFChars(env, watermarkTextJ, NULL);
    const char *fontFile      = (*env)->GetStringUTFChars(env, fontFileJ, NULL);

    AVFormatContext *ifmt_ctx = NULL, *ofmt_ctx = NULL;
    AVCodecContext  *dec_ctx  = NULL, *enc_ctx = NULL;
    AVStream        *in_video_stream = NULL, *out_video_stream = NULL;
    int video_stream_index = -1;
    int ret = 0;

    // 以下变量用于 FFmpeg 滤镜
    AVFilterGraph *filter_graph = NULL;
    AVFilterContext *buffersrc_ctx = NULL, *buffersink_ctx = NULL;
    const AVFilter *buffersrc = NULL, *buffersink = NULL;
    AVFilterInOut *outputs = NULL, *inputs = NULL;
    char filter_descr[512] = {0};

    // 初始化 FFmpeg 库(新版 FFmpeg 可不调用,但为了兼容性建议调用)
    av_register_all();
    avfilter_register_all();

    // 打开输入文件
    if ((ret = avformat_open_input(&ifmt_ctx, inputPath, NULL, NULL)) < 0) {
        goto end_fail;
    }
    if ((ret = avformat_find_stream_info(ifmt_ctx, NULL)) < 0) {
        goto end_fail;
    }

    // 寻找视频流
    for (int i = 0; i < ifmt_ctx->nb_streams; i++) {
        if (ifmt_ctx->streams[i]->codecpar->codec_type == AVMEDIA_TYPE_VIDEO) {
            video_stream_index = i;
            in_video_stream = ifmt_ctx->streams[i];
            break;
        }
    }
    if (video_stream_index < 0) {
        ret = -1;
        goto end_fail;
    }

    // 打开视频解码器
    AVCodec *dec = avcodec_find_decoder(in_video_stream->codecpar->codec_id);
    if (!dec) {
        ret = -1;
        goto end_fail;
    }
    dec_ctx = avcodec_alloc_context3(dec);
    if (!dec_ctx) {
        ret = -1;
        goto end_fail;
    }
    ret = avcodec_parameters_to_context(dec_ctx, in_video_stream->codecpar);
    if (ret < 0) {
        goto end_fail;
    }
    if ((ret = avcodec_open2(dec_ctx, dec, NULL)) < 0) {
        goto end_fail;
    }

    // 创建输出文件上下文
    avformat_alloc_output_context2(&ofmt_ctx, NULL, NULL, outputPath);
    if (!ofmt_ctx) {
        ret = -1;
        goto end_fail;
    }

    // 为输出文件创建一个新视频流
    out_video_stream = avformat_new_stream(ofmt_ctx, NULL);
    if (!out_video_stream) {
        ret = -1;
        goto end_fail;
    }

    // 使用 H.264 编码器进行编码
    AVCodec *encoder = avcodec_find_encoder(AV_CODEC_ID_H264);
    if (!encoder) {
        ret = -1;
        goto end_fail;
    }
    enc_ctx = avcodec_alloc_context3(encoder);
    if (!enc_ctx) {
        ret = -1;
        goto end_fail;
    }
    // 设置编码参数,根据输入视频设置输出参数(这里保持分辨率一致)
    enc_ctx->height = dec_ctx->height;
    enc_ctx->width  = dec_ctx->width;
    enc_ctx->sample_aspect_ratio = dec_ctx->sample_aspect_ratio;
    // 选择 encoder 支持的像素格式(首选 encoder 的列表)
    enc_ctx->pix_fmt = encoder->pix_fmts ? encoder->pix_fmts[0] : dec_ctx->pix_fmt;
    // 时间基设置可以采用解码器的帧率倒数,或者直接使用输入流的时间基
    if (dec_ctx->framerate.num && dec_ctx->framerate.den)
        enc_ctx->time_base = av_inv_q(dec_ctx->framerate);
    else
        enc_ctx->time_base = in_video_stream->time_base;
    if (ofmt_ctx->oformat->flags & AVFMT_GLOBALHEADER)
        enc_ctx->flags |= AV_CODEC_FLAG_GLOBAL_HEADER;

    // 打开编码器
    AVDictionary *enc_opts = NULL;
    av_dict_set(&enc_opts, "preset", "veryfast", 0);
    if ((ret = avcodec_open2(enc_ctx, encoder, &enc_opts)) < 0) {
        av_dict_free(&enc_opts);
        goto end_fail;
    }
    av_dict_free(&enc_opts);

    // 将编码器参数复制到输出流
    ret = avcodec_parameters_from_context(out_video_stream->codecpar, enc_ctx);
    if (ret < 0) {
        goto end_fail;
    }
    out_video_stream->time_base = enc_ctx->time_base;

    // 打开输出文件(如果需要)
    if (!(ofmt_ctx->oformat->flags & AVFMT_NOFILE)) {
        ret = avio_open(&ofmt_ctx->pb, outputPath, AVIO_FLAG_WRITE);
        if (ret < 0) {
            goto end_fail;
        }
    }

    // -----------------------------
    //  1. 创建滤镜图(Filter Graph)
    // -----------------------------
    filter_graph = avfilter_graph_alloc();
    if (!filter_graph) {
        ret = -1;
        goto end_fail;
    }

    // 获取 buffer 源和 sink 滤镜
    buffersrc = avfilter_get_by_name("buffer");
    buffersink = avfilter_get_by_name("buffersink");
    if (!buffersrc || !buffersink) {
        ret = -1;
        goto end_fail;
    }

    // 构造 buffer 源的参数字符串
    char args[512] = {0};
    snprintf(args, sizeof(args),
             "video_size=%dx%d:pix_fmt=%d:time_base=%d/%d:pixel_aspect=%d/%d",
             dec_ctx->width, dec_ctx->height, dec_ctx->pix_fmt,
             in_video_stream->time_base.num, in_video_stream->time_base.den,
             dec_ctx->sample_aspect_ratio.num, dec_ctx->sample_aspect_ratio.den);
    ret = avfilter_graph_create_filter(&buffersrc_ctx, buffersrc, "in", args, NULL, filter_graph);
    if (ret < 0) {
        goto end_fail;
    }

    ret = avfilter_graph_create_filter(&buffersink_ctx, buffersink, "out", NULL, NULL, filter_graph);
    if (ret < 0) {
        goto end_fail;
    }

    // 设置 buffersink 的输出像素格式,仅接受编码器需要的格式
    enum AVPixelFormat pix_fmts[] = { enc_ctx->pix_fmt, AV_PIX_FMT_NONE };
    ret = av_opt_set_int_list(buffersink_ctx, "pix_fmts", pix_fmts, AV_PIX_FMT_NONE, AV_OPT_SEARCH_CHILDREN);
    if (ret < 0) {
        goto end_fail;
    }

    // 构造 drawtext 滤镜描述字符串
    // 注意:text 参数需要使用 UTF-8 编码(支持中文),fontfile 必须指定支持中文的字体文件
    snprintf(filter_descr, sizeof(filter_descr),
             "drawtext=fontfile='%s':text='%s':x=w-tw-10:y=h-th-10:fontsize=24:fontcolor=white",
             fontFile, watermarkText);

    // 初始化滤镜的输入输出端点
    outputs = avfilter_inout_alloc();
    inputs  = avfilter_inout_alloc();
    if (!outputs || !inputs) {
        ret = -1;
        goto end_fail;
    }

    outputs->name       = av_strdup("in");
    outputs->filter_ctx = buffersrc_ctx;
    outputs->pad_idx    = 0;
    outputs->next       = NULL;

    inputs->name       = av_strdup("out");
    inputs->filter_ctx = buffersink_ctx;
    inputs->pad_idx    = 0;
    inputs->next       = NULL;

    // 解析并构造滤镜链(在 buffersrc 与 buffersink 之间插入 drawtext 过滤器)
    ret = avfilter_graph_parse_ptr(filter_graph, filter_descr, &inputs, &outputs, NULL);
    if (ret < 0) {
        goto end_fail;
    }
    ret = avfilter_graph_config(filter_graph, NULL);
    if (ret < 0) {
        goto end_fail;
    }

    avfilter_inout_free(&inputs);
    avfilter_inout_free(&outputs);

    // -----------------------------
    // 写入输出文件的文件头
    ret = avformat_write_header(ofmt_ctx, NULL);
    if (ret < 0) {
        goto end_fail;
    }

    // 申请解码与滤镜使用的 AVFrame
    AVFrame *frame = av_frame_alloc();
    AVFrame *filt_frame = av_frame_alloc();
    if (!frame || !filt_frame) {
        ret = AVERROR(ENOMEM);
        goto end_fail;
    }

    AVPacket packet;
    av_init_packet(&packet);
    packet.data = NULL;
    packet.size = 0;

    // -----------------------------
    // 逐帧处理:解码 -> 送入滤镜 -> 从滤镜中取出 -> 编码 -> 写入文件
    while (av_read_frame(ifmt_ctx, &packet) >= 0) {
        if (packet.stream_index == video_stream_index) {
            ret = avcodec_send_packet(dec_ctx, &packet);
            if (ret < 0) {
                break;
            }
            while ((ret = avcodec_receive_frame(dec_ctx, frame)) >= 0) {
                // 将解码后的帧送入滤镜图
                if ((ret = av_buffersrc_add_frame(buffersrc_ctx, frame)) < 0) {
                    break;
                }
                // 从滤镜图中获取处理后的帧
                while ((ret = av_buffersink_get_frame(buffersink_ctx, filt_frame)) >= 0) {
                    // 将水印后的视频帧送入编码器
                    filt_frame->pict_type = AV_PICTURE_TYPE_NONE;
                    ret = avcodec_send_frame(enc_ctx, filt_frame);
                    if (ret < 0) {
                        break;
                    }
                    AVPacket enc_pkt;
                    av_init_packet(&enc_pkt);
                    enc_pkt.data = NULL;
                    enc_pkt.size = 0;
                    while ((ret = avcodec_receive_packet(enc_ctx, &enc_pkt)) >= 0) {
                        av_packet_rescale_ts(&enc_pkt, enc_ctx->time_base, out_video_stream->time_base);
                        enc_pkt.stream_index = out_video_stream->index;
                        ret = av_interleaved_write_frame(ofmt_ctx, &enc_pkt);
                        av_packet_unref(&enc_pkt);
                        if (ret < 0) {
                            break;
                        }
                    }
                    av_frame_unref(filt_frame);
                }
                av_frame_unref(frame);
            }
        }
        av_packet_unref(&packet);
    }

    // 刷出残留的解码和编码数据
    avcodec_send_packet(dec_ctx, NULL);
    while (avcodec_receive_frame(dec_ctx, frame) >= 0) {
        av_buffersrc_add_frame(buffersrc_ctx, frame);
        while (av_buffersink_get_frame(buffersink_ctx, filt_frame) >= 0) {
            filt_frame->pict_type = AV_PICTURE_TYPE_NONE;
            avcodec_send_frame(enc_ctx, filt_frame);
            AVPacket enc_pkt;
            av_init_packet(&enc_pkt);
            enc_pkt.data = NULL;
            enc_pkt.size = 0;
            while (avcodec_receive_packet(enc_ctx, &enc_pkt) >= 0) {
                av_packet_rescale_ts(&enc_pkt, enc_ctx->time_base, out_video_stream->time_base);
                enc_pkt.stream_index = out_video_stream->index;
                av_interleaved_write_frame(ofmt_ctx, &enc_pkt);
                av_packet_unref(&enc_pkt);
            }
            av_frame_unref(filt_frame);
        }
        av_frame_unref(frame);
    }

    // 刷出编码器
    avcodec_send_frame(enc_ctx, NULL);
    while (1) {
        AVPacket enc_pkt;
        av_init_packet(&enc_pkt);
        enc_pkt.data = NULL;
        enc_pkt.size = 0;
        ret = avcodec_receive_packet(enc_ctx, &enc_pkt);
        if (ret == AVERROR_EOF || ret == AVERROR(EAGAIN))
            break;
        if (ret < 0)
            break;
        av_packet_rescale_ts(&enc_pkt, enc_ctx->time_base, out_video_stream->time_base);
        enc_pkt.stream_index = out_video_stream->index;
        av_interleaved_write_frame(ofmt_ctx, &enc_pkt);
        av_packet_unref(&enc_pkt);
    }

    av_write_trailer(ofmt_ctx);

end_fail:
    {
        char resultMsg[256] = {0};
        if (ret < 0) {
            snprintf(resultMsg, sizeof(resultMsg), "Failed to add watermark, error code: %d", ret);
        } else {
            snprintf(resultMsg, sizeof(resultMsg), "Watermark added successfully, output saved to %s", outputPath);
        }
        // 清理释放分配的资源
        if (filter_graph)
            avfilter_graph_free(&filter_graph);
        if (dec_ctx)
            avcodec_free_context(&dec_ctx);
        if (enc_ctx)
            avcodec_free_context(&enc_ctx);
        if (ifmt_ctx)
            avformat_close_input(&ifmt_ctx);
        if (ofmt_ctx) {
            if (!(ofmt_ctx->oformat->flags & AVFMT_NOFILE))
                avio_closep(&ofmt_ctx->pb);
            avformat_free_context(ofmt_ctx);
        }
        av_frame_free(&frame);
        av_frame_free(&filt_frame);
        if (inputPath)
            (*env)->ReleaseStringUTFChars(env, inputVideoPathJ, inputPath);
        if (outputPath)
            (*env)->ReleaseStringUTFChars(env, outputVideoPathJ, outputPath);
        if (watermarkText)
            (*env)->ReleaseStringUTFChars(env, watermarkTextJ, watermarkText);
        if (fontFile)
            (*env)->ReleaseStringUTFChars(env, fontFileJ, fontFile);
        return (*env)->NewStringUTF(env, resultMsg);
    }
}

代码说明

  1. JNI 接口函数参数说明

    • inputVideoPathJ:输入视频文件路径。
    • outputVideoPathJ:输出视频文件保存路径。
    • watermarkTextJ:水印文字(支持中文,要求以 UTF-8 编码传入)。
    • fontFileJ:字体文件路径,必须是一个支持中文的字体(例如 simhei.ttf)。
  2. 视频解码与编码

    • 使用 avformat_open_input 打开输入文件,并寻找视频流。
    • 使用对应的视频解码器打开解码上下文;之后新建 H.264 编码器并设置输出视频参数(分辨率、像素格式、时间基等)。
  3. 滤镜图配置

    • 通过 avfilter_graph_create_filter 构造 buffer 源(输入滤镜)和 buffer sink(输出滤镜)。
    • 构造 drawtext 滤镜描述字符串:
      • 参数 x=w-tw-10 与 y=h-th-10 表示右下角留 10 像素边距。
      • 字体大小、颜色均可根据需要调整。
    • 调用 avfilter_graph_parse_ptr 与 avfilter_graph_config 生成完整滤镜图。
  4. 处理流程

    • 读取视频包并解码为 AVFrame,然后将 AVFrame 送入滤镜图;从滤镜中提取处理后的帧后,再送入编码器,最终写入输出文件。
    • 最后对残留帧进行 flush 操作,并写入输出 trailer。
  5. 清理与返回

    • 无论成功还是失败,均释放所有分配的资源,并返回一条状态消息到 Java 层。

通过以上代码,你可以实现一个给视频右下角添加中文水印,并将水印视频单独保存的新功能。请根据实际情况调整滤镜参数(例如字体大小、颜色、位置等),并确保提供的字体文件支持中文显示。

常见错误

No such filter: 'drawtext'

这个错误提示表明 FFmpeg 在运行时找不到 drawtext 滤镜,而 drawtext 滤镜依赖于 FreeType 库。如果 FFmpeg 没有启用 drawtext,就会出现类似 "No such filter: 'drawtext'" 的错误,进而导致后续的滤镜图构建失败和程序崩溃。

解决思路

  1. 确认 FFmpeg 是否支持 drawtext:
    在命令行下执行

    ffmpeg -filters | grep drawtext
    

    如果没有显示 drawtext 滤镜,那么你当前使用的 FFmpeg 版本没有启用该滤镜。

  2. 使用支持 drawtext 的 FFmpeg 构建版本:

    • 如果你使用的是预编译版 FFmpeg,请选择一个包含 drawtext 支持(通常需要启用 libfreetype)的版本。
    • 或者你可以自己编译 FFmpeg。在配置编译参数时,确保启用 libfreetype 支持。例如:
      ./configure --enable-libfreetype --enable-gpl
      make
      make install
      
      这样编译后,drawtext 滤镜就会被包含进来。
  3. 在 Windows 平台下使用:

    • 如果你是 Windows 用户,请检查你所使用的 FFmpeg 库或者动态链接库(dll)是否支持 drawtext。部分预编译的 FFmpeg 版本可能为了减小体积而禁用了该滤镜。你可以尝试从其他渠道下载一个完整支持 drawtext 的 Windows FFmpeg 构建包。
  4. 代码运行时的动态库问题:

    • 确保在运行 native 库时加载的 FFmpeg 动态库是你预期的那一版。如果系统中同时存在多个版本,可能会导致加载了不支持 drawtext 的版本。
    • 检查一下 CMake 或项目中链接和加载的库路径是否正确配置。

总结

错误主要源自于 FFmpeg 的 drawtext 滤镜不可用,而不是代码本身的问题。需要换用一个支持 drawtext 的 FFmpeg 库,或者重新编译 FFmpeg 并启用 libfreetype 支持。确认这一点后,再次运行程序就应该能够正确解析 drawtext 过滤器并添加水印了。

Edit this page
Last Updated:
Contributors: litongjava