Tio Boot DocsTio Boot Docs
Home
文档导航
  • java-db
  • api-table
  • jooq
  • mysql
  • postgresql
  • oceanbase
  • Enjoy
  • Tio Boot Admin
  • java-openai
  • ai_agent
  • knowlege_base
  • voice-agent
  • ai-search
  • ai-coding
  • ai-browser
  • 案例
Abount
AI 检索
  • Github
  • Gitee
Home
文档导航
  • java-db
  • api-table
  • jooq
  • mysql
  • postgresql
  • oceanbase
  • Enjoy
  • Tio Boot Admin
  • java-openai
  • ai_agent
  • knowlege_base
  • voice-agent
  • ai-search
  • ai-coding
  • ai-browser
  • 案例
Abount
AI 检索
  • Github
  • Gitee
  • 入门

    • 01 · 入门

      • 01_introduction
      • tio-boot:新一代高性能 Java Web 开发框架
      • tio-boot 入门示例
      • Tio-Boot 配置 : 现代化的配置方案
      • tio-boot 整合 hotswap-classloader 实现热加载
      • 自行编译 tio-boot
      • 最新版本
      • 开发规范
  • 部署与日志

    • 02 · 部署

      • 02_deployment
      • 使用 Maven Profile 实现分环境打包 tio-boot 项目
      • Maven 项目配置详解:依赖与 Profiles 配置
      • tio-boot 打包成 FatJar
      • 使用 GraalVM 构建 tio-boot Native 程序
      • 使用 Docker 部署 tio-boot
      • 部署到 Fly.io
      • 部署到 AWS Lambda
      • 到阿里云云函数
      • 使用 Deploy 工具部署
      • 使用Systemctl启动项目
      • 使用 Jenkins 部署 Tio-Boot 项目
      • 使用 Nginx 反向代理 Tio-Boot
      • 使用 Supervisor 管理 Java 应用
      • 历史部署页与替代方案
      • 胖包与瘦包的打包与部署
    • 03 · 日志

      • 日志
      • tio-boot 整合 Logback
  • 核心开发

    • 04 · 配置

      • 04_configuration
      • 配置参数
      • 服务器监听器
      • 内置缓存系统 AbsCache
      • 使用 Redis 作为内部 Cache
      • 静态文件处理器
      • 基于域名的静态资源隔离
      • DecodeExceptionHandler
      • 开启虚拟线程(Virtual Thread)
      • 框架级错误通知
    • 05 · JSON

      • 05_json
      • Json
      • 接受 JSON 和响应 JSON
      • 响应实体类
    • 06 · Web 开发

      • Web 开发
      • 路由与参数

        • 概述
        • 添加 Controller
        • handler入门
        • Handler 的请求方法与错误响应
        • 接收请求参数
        • 接收日期参数
        • 接收数组参数
        • HttpRequest
      • 响应与文件

        • 返回字符串
        • 返回文本数据
        • 返回网页
        • 请求和响应字节
        • 文件上传
        • 文件下载
        • 返回视频文件并支持断点续传
        • HttpResponse
        • Resps
        • RespBodyVo
        • 动态 返回 CSS 实现
        • 返回图片
        • 返回 multipart
        • 使用零拷贝发送大文件
        • 分片上传
        • WebJars
      • 会话与请求控制

        • http Session
        • Cookie
        • 重定向和转发
        • Controller拦截器
        • 请求拦截器
        • LoggingInterceptor
        • 全局异常处理器
        • 跨域
        • 自定义 Handler 转发请求
        • 使用 HttpForwardHandler 转发所有请求
        • HTTP Basic 认证
        • Http响应加密
      • 异步与流式输出

        • 异步处理
        • Transfer-Encoding: chunked 实时音频播放
        • Server-Sent Events (SSE)
      • 工具与监控

        • 常用工具类
        • 接口访问统计
        • 接口请求和响应数据记录
        • JProtobuf
        • 测速
        • Gzip Bomb:使用压缩炸弹防御恶意爬虫
    • 07 · 参数校验

      • 07_validation
      • 数据紧校验规范
      • 参数校验
    • 08 · WebSocket 应用开发

      • 08_websocket
      • 使用 tio-boot 搭建 WebSocket 服务
      • WebSocket 聊天室项目示例
    • 09 · AOP

      • 09_aop
      • JFinal-aop
      • Aop 工具类
      • 配置
      • 独立使用 JFinal Aop
      • @AImport
      • 自定义注解拦截器
      • 原理解析
    • 10 · 国际化

      • 10_i18n
      • i18n
    • 11 · Enjoy 模板

      • 11_enjoy
      • tio-boot 整合 Enjoy 模版引擎文档
      • Tio-Boot 整合 Java-DB 与 Enjoy 模板引擎示例
      • 引擎配置
      • 表达式
      • 指令
      • 注释
      • 原样输出
      • Shared Method 扩展
      • Shared Object 扩展
      • Extension Method 扩展
      • Spring boot 整合
      • 独立使用 Enjoy
      • tio-boot enjoy 自定义指令 localeDate
      • PromptEngine
      • Enjoy 入门示例-擎渲染大模型请求体
      • Tio Boot + Enjoy:分页与 SEO 实战指南
      • TioBoot + Enjoy 生成 robots.txt 与 sitemap.xml:实战与SEO指南
      • Enjoy 使用示例
    • 12 · 定时任务

      • 12_scheduling
      • Quartz 定时任务集成指南
      • 分布式定时任务 xxl-jb
      • cron4j 使用指南
    • 13 · 测试

      • 13_testing
      • TioBootTest:环境与 AOP 初始化
      • 真实 HTTP 集成测试
      • 数据库集成测试与隔离
    • 14 · tio-utils

      • 14_tio-utils
      • tio-utils
      • EnvUtils 配置工具
      • Notification
      • Email
      • JSON
      • File
      • Base64
      • 上传和下载
      • Http
      • Telegram
      • RsaUtils
      • HttpUtils
      • ByteBufferUtils
      • 系统监控
      • 线程
      • 虚拟线程
      • 毫秒并发 ID (MCID) 生成方案
  • 数据库与数据访问

    • 15 · java-db

      • 15_java-db
      • Db 工具类
      • java‑db
      • 操作数据库入门示例
      • SQL 模板 (SqlTemplates)
      • 数据源配置与使用
      • ActiveRecord
      • Db 工具类
      • 批量操作
      • Model
      • Model生成器
      • 注解
      • 异常处理
      • 数据库事务处理
      • Cache 缓存
      • Dialect 多数据库支持
      • 表关联操作
      • 复合主键
      • Oracle 支持
      • Enjoy SQL 模板
      • 整合 Enjoy 模板最佳实践
      • 多数据源支持
      • 独立使用 ActiveRecord
      • 调用存储过程
      • java-db 整合 Guava 的 Striped 锁优化
      • 生成 SQL
      • 通过实体类操作数据库
      • java-db 读写分离
      • Spring Boot 整合 Java-DB
      • like 查询
      • 常用操作示例
      • Druid 监控集成指南
      • SQL 统计
      • Db 与 PostgreSQL 业务实践
    • 16 · api-table

      • 16_api-table
      • ApiTable 概述
      • 使用 ApiTable 连接 SQLite
      • 使用 ApiTable 连接 Mysql
      • 使用 ApiTable 连接 Postgres
      • 使用 ApiTable 连接 TDEngine
      • 使用 api-table 连接 oracle
      • 使用 api-table 连接 mysql and tdengine 多数据源
      • EasyExcel 导出
      • EasyExcel 导入
      • ApiTable 的权限与业务边界
      • ApiTable 联调与故障定位
      • ApiTable 实现增删改查
      • 数组类型
      • 单独使用 ApiTable
      • TQL(Table SQL)前端输入规范
    • 17 · MyBatis

      • 17_mybatis
      • Tio-Boot 整合 MyBatis
      • 使用配置类方式整合 MyBatis
      • 整合数据源
      • 使用 mybatis-plus 整合 tdengine
      • 整合 mybatis-plus
    • 18 · jOOQ

      • 18_jooq
      • 使用配置类方式整合 jOOQ
      • tio-boot + jOOQ 事务管理
      • 批量操作与性能优化
      • 整合agroal
      • 代码生成与类型安全
      • 基于 Record / POJO 增删改查
      • UPSERT、批量更新、返回主键与高级 SQL
      • 的多表关联查询、DTO 投影、聚合统计与视图封装
      • 的窗口函数、CTE、JSON 查询与 PostgreSQL 高级 SQL 实战
      • tio-boot + jOOQ 的审计字段、乐观锁、数据权限与企业级 Repository 设计
      • 测试策略、SQL 日志、性能诊断与生产排障
      • 多租户、读写分离与多数据源设计
      • 代码生成治理、数据库迁移与团队协作规范实战
    • 19 · PostgreSQL

      • 19_postgresql
      • PostgreSQL 安装
      • PostgreSQL 主键自增
      • PostgreSQL 日期类型
      • Postgresql 金融类型
      • PostgreSQL 数组类型
      • 索引
      • PostgreSQL 查询优化
      • 获取字段类型
      • PostgreSQL 全文检索
      • PostgreSQL 向量
      • PostgreSQL 优化向量查询
      • PostgreSQL 其他
    • 20 · MySQL

      • 20_mysql
      • 使用 Docker 运行 MySQL
      • 常见问题
    • 21 · OceanBase

      • 21_oceanbase
      • 快速体验 OceanBase 社区版
      • 快速上手 OceanBase 数据库单机部署与管理
      • 诊断集群性能
      • 优化 SQL 性能指南
      • 待定
    • 22 · Oracle

      • 22_oracle
      • Oracle
    • 23 · SQL Server

      • 23_sqlserver
      • SQL Server
    • 24 · SQLite

      • 24_sqlite
      • SQLite
    • 25 · MongoDB

      • 25_mongodb
      • tio-boot 使用 mongo-java-driver 操作 mongodb
    • 26 · Elasticsearch

      • 26_elasticsearch
      • Elasticsearch
      • JavaDB 整合 ElasticSearch
      • Elastic 工具类使用指南
      • Elastic-search 注意事项
      • ES 课程示例文档
  • 缓存与消息队列

    • 27 · Cache

      • 27_cache
      • Caffeine
      • CacheUtils 工具类
      • 使用 java-db 整合 ehcache
    • 28 · Redis

      • 28_redis
      • 使用 Docker 安装 Redis
      • 使用 java-db 整合 Redis
      • Java DB Redis 相关 Api
      • redis 使用示例
      • 和 RedisTemplate 协作
      • 使用 Jedis 连接池接入 Redis
      • hutool RedisDS
      • Redisson
      • Caffeine 与 Redis 两级缓存
      • 使用 CacheUtils 整合 caffeine 和 redis 实现的两级缓存
    • 29 · 消息队列

      • 29_mq
      • Mica-mqtt
      • EMQX
      • Disruptor
    • 30 · Kafka

      • 30_kafka
      • Kafka
      • AWS MSK
  • 认证与账号体系

    • 31 · 认证与权限

      • 31_authentication
      • FixedTokenInterceptor
      • TokenManager
      • 数据表
      • 匿名登录
      • 个人中心
      • 权限校验注解
      • Sa-Token
      • sa-token 登录注册
      • StpUtil.isLogin() 源码解析
    • 32 · 第三方登录注册

      • 32_third-party-auth
      • 邮箱登录和注册
      • 邮箱重置密码
      • 腾讯云短信登录注册
      • 腾讯云短信重置密码
      • 阿里云短信登录和注册
      • 阿里云短信重置密码
      • 微信登录与绑定手机号
      • 支付宝登录与绑定手机号
      • 微信小程序手机号快捷登录
      • Google登录
      • 阿里云邮件推送验证邮箱
  • 网络通信

    • 33 · AIO

      • 33_aio
      • ByteBuffer
      • AIO HTTP 服务器
      • 自定义和线程池和池化 ByteBuffer
      • AioHttpServer 应用示例 IP 属地查询
      • 手写 AIO Http 服务器
      • Java 21 中的虚拟线程与 AIO
    • 34 · t-io

      • 34_tio
      • 认识 t-io

        • t-io 核心优势与应用价值
        • t-io 消息处理流程
      • 快速上手

        • TioBootServer
        • 独立端口启动 TCP 服务器
        • 内置 TCP 处理器
        • 独立启动 UDPServer
        • 使用内置 UDPServer
      • 核心概念

        • TioConfig
        • ChannelContext
        • Packet
        • Tio 工具类
      • 消息与文件传输

        • 发送数据
        • HTTP 长连接与高效文件传输
        • 使用 AsynchronousSocketChannel 响应数据
      • 连接管理

        • 业务数据绑定
        • 业务数据解绑
        • 关闭连接
        • 资源共享
        • 成员排序
        • 拉黑 IP
      • 加密通信

        • SSL
        • Https建立连接过程
      • 心跳与监控

        • 监控: 心跳
        • 监控: 客户端的流量数据
        • 监控: 单条 TCP 连接的流量数据
        • 监控: 端口的流量数据
        • 单条通道统计: ChannelStat
        • 所有通道统计: GroupStat
      • 深入原理

        • tio-运行原理详解
        • DecodeRunnable
        • t-io 稳定性设计与资源管理
        • 深入解析 Tio 源码:构建高性能 Java 网络应用
        • HTTP、WebSocket 与 TCP 的缓冲区复用
    • 35 · tio-http-server

      • 35_tio-http-server
      • 使用 Tio-Http-Server 搭建简单的 HTTP 服务
      • tio-boot 添加 HttpRequestHandler
      • 在 Android 上使用 tio-boot 运行 HTTP 服务
      • tio-http-server-native
      • handler 常用操作
      • tio-http-server 与 tio-boot 的使用边界
    • 36 · tio-websocket

      • 36_tio-websocket
      • WebSocket 服务器
      • WebSocket Client
      • TCP数据转发
    • 37 · Netty

      • 37_netty
      • Netty TCP Server
      • Netty Web Socket Server
      • 使用 protoc 生成 Java 包文件
      • Netty WebSocket Server 二进制数据传输
      • Netty 组件详解
    • 38 · netty-boot

      • 38_netty-boot
      • Netty-Boot
      • 原理解析
      • 整合 Hot Reload
      • 整合 数据库
      • 整合 Redis
      • 整合 Elasticsearch
      • 整合 Dubbo
      • Listener
      • 文件上传
      • 拦截器
      • Spring Boot 整合 Netty-Boot
      • SSL 配置指南
      • ChannelInitializer
      • Reserve
  • 集成与扩展

    • 39 · 第三方集成

      • 39_integrations
      • 整合 okhttp
      • 整合 GrpahQL
      • 集成 Mailjet
      • 整合 ip2region
      • 整合 GeoLite 离线库
      • 整合 Lark 机器人指南
      • 集成 Lark Mail 实现邮件发送
      • Thymeleaf
      • Swagger
      • Clerk 验证
      • 集成datadog
    • 40 · Magic Script

      • 40_magic-script
      • tio-boot 与 magic-script 集成指南
    • 41 · Groovy

      • 41_groovy
      • tio-boot 整合 Groovy
      • 调试常用脚本
    • 42 · 爬虫

      • 42_crawling
      • jsoup
      • 爬取 z-lib.io 数据
      • 整合 WebMagic
      • WebMagic 示例:爬取学校课程数据
      • Playwright
      • Flexmark (Markdown 处理器)
      • tio-boot 整合 Playwright
      • 缓存网页数据
    • 43 · Dubbo

      • 43_dubbo
      • 概述
      • dubbo 2.6.0
      • dubbo 2.6.0 调用过程
      • dubbo 3.2.0
    • 44 · Spring

      • 44_spring
      • Spring Boot Web 整合 Tio Boot
      • spring-boot-starter-webflux 整合 tio-boot
      • tio-boot 整合 spring-boot-starter
      • Tio Boot 整合 Spring Boot Starter db
      • Tio Boot 整合 Spring Boot Starter Data Redis 指南
    • 45 · Spring Cloud

      • 45_spring-cloud
      • tio-boot spring-cloud
    • 46 · Quarkus

      • 46_quarkus
      • Quarkus(无 HTTP)整合 tio-boot(有 HTTP)
      • tio-boot + Quarkus + Hibernate ORM Panache
      • tio-boot + Quarkus + Hibernate ORM Panache + jOOQ 整合方案
    • 47 · Telegram4J

      • 47_telegram4j
      • 数据库设计
      • 基于 HTTP 协议开发 Telegram 翻译机器人
      • 基于 MTProto 协议开发 Telegram 翻译机器人
      • 过滤旧消息
      • 保存机器人消息
      • 定时推送
      • 增加命令菜单
      • 使用 telegram-Client
      • 使用自定义 StoreLayout
      • 延迟测试
      • Reactor 错误处理
      • Telegram4J 常见错误处理指南
      • 处理回调查询
      • Reactor
      • 文档翻译
      • 使用 Tio-Boot 整合 tdlight
      • tio-boot 整合 TelegramBots
      • tio-boot 整合 Telegram-Bot-Utils
      • Telegram-Bot-Utils 使用指南
    • 48 · Telegram Bots

      • 48_telegram-bots
      • TelegramBots 入门指南
      • 使用工具库 telegram-bot-base 开发翻译机器人
    • 49 · 文件存储

      • 49_file-storage
      • 文件上传数据表
      • 本地存储
      • 存储到 亚马逊 S3
      • 存储到 Cloudflare R2
      • 存储到 腾讯 COS
      • 上传文件到阿里云 OSS
    • 50 · 支付

      • 支付集成
      • 微信小程序支付:普通支付
      • 微信支付:Native 扫码支付(PC 网页扫码)
      • 支付宝:电脑网站支付接入指南
  • Firebase 与 Clerk

    • 51 · Firebase

      • 51_firebase
      • 整合 google firebase
      • Firebase Storage
      • Firebase Authentication
      • 使用 Firebase Admin SDK 进行匿名用户管理与自定义状态标记
      • 导出用户
      • 登录注册
      • 注册回调
    • 52 · Clerk

      • 52_clerk
      • Clerk
  • 多媒体

    • 53 · 音视频处理

      • 53_media
      • JAVE 提取视频中的声音
      • Jave 提取视频中的图片
      • 待定
    • 54 · 语音识别

      • 54_asr
      • Whisper-JNI
    • 55 · 语音合成

      • 55_tts
    • 56 · 文字识别

      • 56_ocr
    • 57 · Native Media

      • 57_native-media
      • java-native-media
      • JNI 入门示例
      • mp3 拆分
      • mp4 转 mp3
      • 使用 libmp3lame 实现高质量 MP3 编码
      • Linux 编译
      • macOS 编译
      • 从 JAR 包中加载本地库文件
      • 支持的音频和视频格式
      • 任意格式转为 mp3
      • 通用格式转换
      • 通用格式拆分
      • 视频合并
      • VideoToHLS
      • split_video_to_hls 支持其他语言
      • 持久化 HLS 会话
      • 获取视频长度
      • 保存视频的最后一帧
      • 添加水印
      • linux版本
    • 58 · 计算机视觉

      • 58_computer-vision
      • 使用 Java 运行 YOLOv8 ONNX 模型进行目标检测
      • tio-boot整合yolo
      • ONNX Runtime 推理说明
      • Paddle Structure
      • tio-boot 整合 Paddle Structure
      • tio-boot整合Paddle Structure 提取图片
      • U2Net 图片去背景原理
      • tio-boot 整合 U2Net 实现图片去背景
  • AI 开发

    • 59 · java-openai

      • 59_java-openai
      • 简介
      • 流式生成
      • 图片多模态输入
      • Google Gemini接入
      • google Vertex AI 接入
      • Perplexity API
      • WhisperClient 语音识别
      • SupadataClient 获取视频字幕
      • GiteeClient 文档解析与图片 OCR
      • DeepSeekClient 官方模型查询
      • BailianTTSClient 语音合成
    • 60 · AI Agent

      • 60_ai-agent
      • 数据库设计
      • 示例问题管理
      • 会话管理
      • 历史记录
      • 意图识别
      • 智能问答
      • 文件上传与解析文档
      • 翻译
      • 名人搜索功能实现
      • Ai studio gemini youbue 问答使用说明
      • 自建 YouTube 字幕问答系统
      • 自建 获取 youtube 字幕服务
      • 使用 OpenAI ASR 实现语音识别接口(Java 后端示例)
      • 定向搜索
      • 16
      • 17
      • 18
      • 在 tio-boot 应用中整合 ai-agent
      • 接口文档
      • 自定义 ChatAskService
      • 请求记录
      • 限流和错误处理
      • 增强检索(RAG)
      • 结构化数据检索
      • AI 问答
      • 连接代码执行器
      • 待定
      • 模型编程能力评测
      • 音频会话 SDP 示例
    • 61 · 知识库

      • 61_knowledge-base
      • 学术论文
      • 数据库设计
      • 用户登录实现
      • 模型管理
      • 知识库管理
      • 文档拆分
      • 片段向量
      • 命中测试
      • 文档管理
      • 片段管理
      • 问题管理
      • 应用管理
      • 向量检索
      • 推理问答
      • 问答模块
      • 统计分析
      • 用户管理
      • api 管理
      • 存储文件到 S3
      • 文档解析优化
      • 片段汇总
      • 段落分块与检索
      • 多文档解析
      • 对话日志
      • 检索性能优化
      • Milvus
      • 文档解析方案和费用对比
      • 豫自然资办发〔2021〕18号文档解析实测
      • 离线运行向量模型
      • 爬取网页数据
    • 62 · AI 搜索

      • 62_ai-search
      • ai-search 项目简介
      • ai-search 数据库文档
      • ai-search SearxNG 搜索引擎
      • ai-search Jina Reader API
      • ai-search Jina Search API
      • ai-search 搜索、重排与读取内容
      • ai-search PDF 文件处理
      • ai-search 推理问答
      • Google Custom Search JSON API
      • ai-search 意图识别
      • ai-search 问题重写
      • ai-search 系统 API 接口 WebSocket 版本
      • ai-search 搜索代码实现 WebSocket 版本
      • ai-search 生成建议问
      • ai-search 生成问题标题
      • ai-search 历史记录
      • Discover API
      • 翻译
      • Tavily Search API 文档
      • 对接 Tavily Search
      • 火山引擎 DeepSeek
      • 对接 火山引擎 DeepSeek
      • ai-search 搜索代码实现 SSE 版本
      • jar 包部署
      • Docker 部署
      • 爬取一个静态网站的所有数据
      • 网页数据预处理
      • 网页数据检索与问答流程整合
    • 63 · 语音 Agent

      • 63_voice-agent
      • 整合Gemini realtime模型
      • Voice Agent 前端接入接口文档
      • 整合千问realtime模型
      • 打断支持
      • 主动介入
      • eleven labs
      • 基于 tio-boot + ElevenLabs 构建实时语音 Agent(支持打断与主动介入)
    • 64 · AI Coding

      • 64_ai-coding
      • Cline 提示词
      • Cline 提示词-中文版本
    • 65 · AI Browser

      • deepseek-browser-use:从入门到源码
      • deepseek-browser-use:概念与学习路线
      • 安装、启动与健康检查
      • 第一个任务:打开页面、读取结果与关闭
      • 客户端:dsb 命令行、Python 与 PowerShell
      • 统一命令接口与人机协作
      • 浏览器、profile 与登录态
      • 窗口尺寸与页面视口
      • 接入智能体:观察、执行与验证
      • 表单与多层弹窗排障:防止重复提交
      • 调用追踪、页面留档与文件上传
      • 站点配方、技能与异步作业
      • Windows OCR:本地图片与页面文字识别
      • 配置项与运维自省
      • 命令清单
      • 源码教程:从 HTTP 请求到命令执行
      • DOM 原理:前端如何生成可交互快照
      • DOM 原理:Java 模型与跨 Frame 索引
      • 正文提取与上层结构化处理
      • 源码教程:生命周期、导航与页签
      • 源码教程:DOM、页面状态与元素读取
      • 源码教程:点击、输入、键盘与鼠标
      • 源码教程:等待条件与 JavaScript 执行
      • 源码教程:文件上传、截图、PDF 与 OCR
      • 源码教程:Cookie、存储与页面设置
      • 源码教程:网络记录、请求拦截与控制台
      • 源码教程:原生对话框、DOM 弹窗与人机协作
      • 源码教程:批量、配方、后台作业与维护
      • 源码教程:Chrome 走 CDP 与 CDP 客户端
      • 请求响应关联与线程约束
  • 项目实战

    • 66 · java-uni-ai-server

      • 66_java-uni-ai-server
      • 语音合成系统
      • Fish.audio TTS 接口说明文档与 Java 客户端封装
      • 整合 fishaudio 到 java-uni-ai-server 项目
      • 待定
    • 67 · java-llm-proxy

      • 67_java-llm-proxy
      • 使用tio-boot搭建多模型LLM代理服务
    • 68 · java-kit-server

      • 68_java-kit-server
      • Java 执行 python 代码
      • 通过大模型执行 Python 代码
      • 执行 Python (Manim) 代码
      • 待定
      • 待定
      • 待定
      • 视频下载增加水印说明文档
    • 69 · tio-im

      • 69_tio-im
      • 通讯协议文档
      • ChatPacket.proto 文档
      • java protobuf
      • 数据表设计
      • 创建工程
      • 登录
      • 历史消息
      • 发消息
    • 70 · tio-mail-wing

      • 70_tio-mail-wing
      • tio-mail-wing简介
      • 任务1:实现POP3系统
      • 使用 getmail 验证 tio-mail-wing POP3 服务
      • 任务2:实现 SMTP 服务
      • 数据库初始化文档
      • 用户管理
      • 邮件管理
      • 任务3:实现 SMTP 服务 数据库版本
      • 任务4:实现 POP3 服务(数据库版本)
      • IMAP 协议
      • 拉取多封邮件
      • 任务5:实现 IMAP 服务(数据库版本)
      • IMAP实现讲解
      • IMAP 手动测试脚本
      • IMAP 认证机制
      • 主动推送
      • namesapce
      • CONDSTORE and QRESYNC
    • 71 · tio-mcp-server

      • 71_tio-mcp-server
      • 实现 MCP Server 开发指南
      • MCP 协议
      • /zh/71_tio-mcp-server/11.html
    • 72 · tio-log-server

      • 72_tio-log-server
      • 简介
      • 收集 docker 日志
      • 入库
    • 73 · tio-sip

      • 73_tio-sip
      • SIP Server 第一版原理说明
      • SIP Server 第一版实战
      • 一、Windows 平台测试
      • SIP Server 第二版实战
      • SIP Server 第三版实战
      • 性能优化
      • 基于 MediaProcessor 对接 Realtime 模型说明
      • 对接大语言模型
      • 支持 G722 宽带语音
      • G722编码和解码
      • 会话级采样率转换
      • 增加 9196 回声测试分机
      • 语音系统链路说明
      • 一、Gemini Realtime 的打断机制
    • 74 · tio-boot-admin

      • 74_tio-boot-admin
      • 入门指南:使用框架内置配置
      • 手动初始化数据库
      • 配置职责、生效条件与扩展边界
      • 整合数据库
      • 与前端集成
      • 文件上传
      • 网络请求
      • 单图片管理(只读模式)
      • 多图片管理
      • 布尔值管理
      • 字段联动
      • Word 管理
      • PDF 管理
      • 文章管理
      • 富文本编辑器
      • 整合 Enjoy 模版引擎
      • 历史可选方案:Token 存储与 Sa-Token
      • 业务 API 与 H5 / 小程序联调
      • 方法路由与业务鉴权
      • 整合 Redis
      • 整合 Elasticsearch
      • 后端开发规范:tio-boot、java-db 与 Kv
      • 多表实现文件数据存储
    • 75 · 案例

      • 75_examples
      • 封装 IP 查询服务
      • tio-boot 案例 - 全局异常捕获与企业微信群通知
      • tio-boot 案例 - 文件上传和下载
      • tio-boot 案例 - 整合 ant design pro 增删改查
      • tio-boot 案例 - 流失响应
      • tio-boot 案例 - 增强检索
      • tio-boot 案例 - 整合 function call
      • tio-boot 案例 - 定时任务 监控 PostgreSQL、Redis 和 Elasticsearch
      • Tio-Boot 案例:使用 SQLite 整合到登录注册系统
      • tio-boot 案例 - 执行 shell 命令
      • /zh/75_examples/11.html
      • /zh/75_examples/12.html
      • /zh/75_examples/13.html
  • 性能、原理与源码

    • 76 · 性能测试

      • 76_performance
      • 压力测试 - tio-http-serer
      • 压力测试 - tio-boot
      • 压力测试 - tio-boot-native
      • 压力测试 - netty-boot
      • 性能测试对比
      • TechEmpower FrameworkBenchmarks
      • 压力测试 - tio-boot 12 C 32G
      • HTTP/1.1 Pipelining 性能测试报告
      • tio-boot vs Quarkus 性能对比测试报告
    • 77 · 原理

      • 77_internals
      • 生命周期
      • 请求处理流程
      • 重要的类
    • 78 · 源码解析

      • 78_source-code
      • 源码阅读入口
      • Swagger 整合到 Tio-Boot 中的指南
      • 启动与关闭生命周期
      • HTTP 请求分发与路由优先级
      • 高性能网络编程中的 ByteBuffer 分配与回收策略
      • TioBootServerHandler 源码解析

的窗口函数、CTE、JSON 查询与 PostgreSQL 高级 SQL 实战

  • 2.1 示例表设计
  • 2.2 为什么推荐 JSONB 而不是 JSON
  • 2.3 Codegen 后 JSONB 字段是什么样
  • 3.1 基础写入
  • 3.2 JSONB + UPSERT
  • 3.3 JSONB + UPSERT + RETURNING
  • 4.1 按字段提取:age >= 18
    • 这个写法为什么推荐
  • 4.2 查询嵌套字段:device.os = 'ios'
  • 4.3 判断 JSON 数组包含 vip 标签
    • 为什么 @> 很重要
  • 4.4 JSONB 字段存在性判断
  • 5.1 通用索引:GIN(profile)
  • 5.2 表达式索引:针对热点字段
  • 5.3 JSONB 设计建议
  • 6.1 基础 UPSERT
  • 6.2 使用 excluded(...)
  • 6.3 带条件的 UPSERT
  • 6.4 UPSERT + RETURNING
  • 7.1 示例表:用户积分流水
  • 7.2 排名:row_number、rank、dense_rank
    • row_number
    • 语义
    • rank
    • dense_rank
  • 7.3 分组 TopN:每个用户最近 3 条记录
    • jOOQ 写法
    • 逻辑拆解
  • 7.4 分页 + 总数:一次 SQL 返回 total
    • 说明
    • 优点
    • 注意
  • 8.1 最简单的 CTE 思路
  • 8.2 jOOQ 中的 CTE 写法
    • 这个例子说明什么
  • 8.3 为什么复杂查询推荐 CTE
  • 9.1 查询每个用户最新 profile,且 age >= 18
  • 10.1 DAO 层:只负责 SQL
  • 10.2 Service 层:负责事务与业务编排
  • 10.3 Controller 层:只处理输入输出
  • 12.1 JSONB 很灵活,但不要把一切都塞进去
  • 12.2 @> 查询很常用,但前提是 JSON 结构要稳定
  • 12.3 窗口函数很强,但不是所有查询都该上
  • 12.4 CTE 的价值首先是可读性,不一定总是性能优化
  • 12.5 PostgreSQL 高级能力是“方言优势”,不是缺点

在前几篇中,我们已经逐步完成了:

  • tio-boot + jOOQ 基础整合
  • 事务管理
  • 连接池整合
  • Codegen 类型安全
  • Record / POJO CRUD
  • 批量、分页、动态 SQL
  • PostgreSQL UPSERT、returning
  • 多表关联查询、DTO 投影、聚合统计与视图封装

到这里,已经具备了完整的“常规工程级数据库访问能力”。

但如果项目进入真正的复杂业务阶段,只会单表 CRUD 还远远不够。 这时候最常见、也最能体现 PostgreSQL 能力的高级特性,往往是:

  • JSONB:半结构化数据存储与检索
  • CTE:把复杂 SQL 拆成可组合、可读的查询块
  • 窗口函数:排行、TopN、滚动统计、分页总数
  • PostgreSQL 高级表达式:returning、on conflict、JSON 操作符、exists、分组统计

而 jOOQ 的价值恰恰就在这里:

不是把 SQL 藏起来,而是把 PostgreSQL 的高级 SQL 能力,以强类型 DSL 的方式保留下来。

本文会系统讲清:

  • JSONB 的写入、查询、索引建议
  • PostgreSQL UPSERT 的正确打开方式
  • 窗口函数在排行榜、分组 TopN、分页总数中的使用
  • CTE 在复杂查询中的组织方式
  • 在 tio-boot + jOOQ 项目中的推荐落地方式

一、为什么这一篇是“真正的 jOOQ 高阶能力”

很多人刚接触 jOOQ 时,会先把它当成:

  • 比 MyBatis XML 更现代的 SQL 写法
  • 比字符串拼接更安全的 DSL
  • 一个适合 CRUD 的工具

这些理解都没错,但还只是 jOOQ 的“基础层”。

jOOQ 真正强的地方在于:

当 SQL 进入复杂阶段时,依然能保持:

  • 强类型
  • 可组合
  • 可重构
  • 接近原生 SQL 的表达力

特别是在 PostgreSQL 生态里,下面这些能力会非常高频:

  • 用 JSONB 存扩展属性
  • 用 UPSERT 解决并发写入竞争
  • 用窗口函数做排名、TopN、滚动统计
  • 用 CTE 拆解复杂报表 SQL
  • 用 returning 避免“写后再查一次”

这正是本篇的重点。


二、JSONB:关系型表中的半结构化能力

在真实业务里,常会遇到这种情况:

有些字段结构稳定,例如:

  • id
  • user_id
  • created_at

但有些字段经常变化,例如:

  • 用户标签
  • 个性化偏好
  • 设备信息
  • AB 实验参数
  • 业务扩展属性

如果每次扩展都去改表结构,成本会很高。 这时候 PostgreSQL 的 JSONB 就很适合。


2.1 示例表设计

CREATE TABLE user_profile (
  id BIGSERIAL PRIMARY KEY,
  user_id BIGINT NOT NULL UNIQUE,
  profile JSONB NOT NULL DEFAULT '{}'::jsonb,
  updated_at TIMESTAMP NOT NULL DEFAULT now()
);

CREATE INDEX idx_user_profile_profile_gin
ON user_profile USING GIN (profile);

这里:

  • user_id 是业务唯一键
  • profile 用 JSONB 存扩展属性
  • updated_at 记录更新时间
  • GIN(profile) 用于加速 JSONB 查询

例如 profile 里可能存:

{
  "tags": ["vip", "sports"],
  "age": 18,
  "device": {
    "os": "ios",
    "ver": "17.2"
  },
  "ab": {
    "expA": "B"
  }
}

2.2 为什么推荐 JSONB 而不是 JSON

PostgreSQL 里同时有 JSON 和 JSONB。

一般工程里更推荐:

JSONB

原因很简单:

  • 支持更强的操作符
  • 支持更成熟的索引能力
  • 查询性能更好
  • 更适合生产查询场景

可以把它理解为:

  • JSON 更像“原始 JSON 文本”
  • JSONB 更像“可查询的二进制 JSON 结构”

2.3 Codegen 后 JSONB 字段是什么样

如果启用了 jOOQ codegen,通常会生成类似:

USER_PROFILE.PROFILE

字段类型一般会映射为:

org.jooq.JSONB

这样在 Java 里,写入时就可以直接:

JSONB.valueOf(json)

三、JSONB 写入:插入与 UPSERT

在生产里,JSONB 很少是“只插一次永不更新”的。 更常见的是:

  • 首次写入
  • 再次上报时覆盖或合并
  • 用唯一键 user_id 做 upsert

所以最常见的写法其实是:

JSONB + UPSERT 一起用


3.1 基础写入

import static demo.jooq.gen.Tables.USER_PROFILE;

import org.jooq.DSLContext;
import org.jooq.JSONB;

public int insertProfile(DSLContext dsl, long userId, String json) {
  return dsl.insertInto(USER_PROFILE)
      .set(USER_PROFILE.USER_ID, userId)
      .set(USER_PROFILE.PROFILE, JSONB.valueOf(json))
      .execute();
}

这里的重点是:

JSONB.valueOf(json)

它把 JSON 字符串包装成 jOOQ 的 JSONB 类型。

实际项目里,通常不建议手写 JSON 字符串,而是由:

  • fastjson2
  • Jackson

这样的库先把对象序列化为 JSON,再传给 jOOQ。


3.2 JSONB + UPSERT

这是最常见的生产写法。

import static demo.jooq.gen.Tables.USER_PROFILE;

import org.jooq.DSLContext;
import org.jooq.JSONB;

public int saveProfile(DSLContext dsl, long userId, String json) {
  return dsl.insertInto(USER_PROFILE)
      .set(USER_PROFILE.USER_ID, userId)
      .set(USER_PROFILE.PROFILE, JSONB.valueOf(json))
      .onConflict(USER_PROFILE.USER_ID)
      .doUpdate()
      .set(USER_PROFILE.PROFILE, JSONB.valueOf(json))
      .set(USER_PROFILE.UPDATED_AT, dsl.currentTimestamp())
      .execute();
}

这段逻辑等价于:

  • user_id 不存在:插入
  • user_id 已存在:更新 profile 和 updated_at

它解决了“先查再写”的问题,也避免了并发竞争条件。


3.3 JSONB + UPSERT + RETURNING

如果业务在写入后希望立刻拿到最终结果,可以继续配合 returning()。

public Long saveProfileAndReturnId(DSLContext dsl, long userId, String json) {
  return dsl.insertInto(USER_PROFILE)
      .set(USER_PROFILE.USER_ID, userId)
      .set(USER_PROFILE.PROFILE, JSONB.valueOf(json))
      .onConflict(USER_PROFILE.USER_ID)
      .doUpdate()
      .set(USER_PROFILE.PROFILE, JSONB.valueOf(json))
      .set(USER_PROFILE.UPDATED_AT, dsl.currentTimestamp())
      .returning(USER_PROFILE.ID)
      .fetchOne(USER_PROFILE.ID);
}

这样就不需要:

  • 先写
  • 再额外 select 一次

四、JSONB 查询:按字段提取

JSONB 真正的价值在于“不只是能存,还能查”。


4.1 按字段提取:age >= 18

PostgreSQL 原生 SQL 常写成:

(profile->>'age')::int >= 18

在 jOOQ 中,一个非常实用的写法是使用表达式字段:

import static demo.jooq.gen.Tables.USER_PROFILE;

import org.jooq.Field;
import org.jooq.impl.DSL;

Field<Integer> age =
    DSL.field("({0} ->> 'age')::int", Integer.class, USER_PROFILE.PROFILE);

var list = dsl.select(USER_PROFILE.USER_ID, USER_PROFILE.PROFILE)
    .from(USER_PROFILE)
    .where(age.ge(18))
    .fetch();

这个写法为什么推荐

因为:

  • {0} 不是字符串拼接,而是安全占位
  • USER_PROFILE.PROFILE 仍然是强类型字段引用
  • 外层条件仍然保留 jOOQ DSL 结构

这是一种非常适合 PostgreSQL JSON 表达式的折中写法。


4.2 查询嵌套字段:device.os = 'ios'

可以继续用类似方式:

Field<String> os =
    DSL.field("{0} -> 'device' ->> 'os'", String.class, USER_PROFILE.PROFILE);

var rows = dsl.select(USER_PROFILE.USER_ID)
    .from(USER_PROFILE)
    .where(os.eq("ios"))
    .fetch();

这对应 PostgreSQL 语义:

profile -> 'device' ->> 'os' = 'ios'

4.3 判断 JSON 数组包含 vip 标签

PostgreSQL 里非常经典的 JSONB 检索方式是:

profile @> '{"tags":["vip"]}'::jsonb

jOOQ 写法:

import org.jooq.JSONB;
import org.jooq.impl.DSL;

var vipUsers = dsl.select(USER_PROFILE.USER_ID)
    .from(USER_PROFILE)
    .where(
        DSL.condition(
            "{0} @> {1}::jsonb",
            USER_PROFILE.PROFILE,
            JSONB.valueOf("{\"tags\":[\"vip\"]}")
        )
    )
    .fetchInto(Long.class);

为什么 @> 很重要

因为它通常比“逐层拆 key 比较”更适合走 GIN 索引。

所以在 JSONB 查询里,很多时候可以优先思考:

能不能把查询改写成 @> 包含关系

这通常会更适合 PostgreSQL 优化。


4.4 JSONB 字段存在性判断

有时候业务只关心某个 key 是否存在。

PostgreSQL 常用:

profile ? 'age'

jOOQ 可以写成:

var rows = dsl.select(USER_PROFILE.USER_ID)
    .from(USER_PROFILE)
    .where(DSL.condition("{0} ? 'age'", USER_PROFILE.PROFILE))
    .fetch();

如果 key 是动态传入,也可以这样:

public List<Long> findUsersHasKey(DSLContext dsl, String key) {
  return dsl.select(USER_PROFILE.USER_ID)
      .from(USER_PROFILE)
      .where(DSL.condition("{0} ? {1}", USER_PROFILE.PROFILE, DSL.inline(key)))
      .fetchInto(Long.class);
}

五、JSONB 索引建议

JSONB 查询能不能快,很大程度上取决于索引设计。


5.1 通用索引:GIN(profile)

最常见的起步配置就是:

CREATE INDEX idx_user_profile_profile_gin
ON user_profile USING GIN (profile);

适合:

  • @> 包含查询
  • key 存在性判断
  • 通用 JSONB 检索

这是最推荐的第一步。


5.2 表达式索引:针对热点字段

如果某个 JSON key 查询非常高频,例如年龄:

CREATE INDEX idx_user_profile_age
ON user_profile (((profile->>'age')::int));

这样对:

(profile->>'age')::int >= 18

这种查询性能会明显更好。

也就是说:

  • 通用检索:GIN
  • 热点 key 条件:表达式索引

这两者并不冲突。


5.3 JSONB 设计建议

JSONB 很强,但也不要滥用。

推荐用 JSONB 的场景:

  • 扩展属性不稳定
  • 字段结构变动频繁
  • 查询模式相对明确

不太推荐的场景:

  • 每个 key 都要高频 join
  • 每个 key 都要严格约束
  • 每个 key 都是核心统计维度

因为这些场景,本质上更像关系型字段,而不是扩展属性。


六、UPSERT:避免“先查再写”

这一部分和第 7 篇有衔接,但这里结合 PostgreSQL 高级能力再系统讲一遍。

UPSERT 的意义主要有两点:

  1. 避免双 SQL
  2. 避免并发竞争条件

6.1 基础 UPSERT

import static demo.jooq.gen.Tables.SYSTEM_ADMIN;

public int upsertAdmin(DSLContext dsl, String loginName, String password) {
  return dsl.insertInto(SYSTEM_ADMIN)
      .set(SYSTEM_ADMIN.LOGIN_NAME, loginName)
      .set(SYSTEM_ADMIN.PASSWORD, password)
      .onConflict(SYSTEM_ADMIN.LOGIN_NAME)
      .doUpdate()
      .set(SYSTEM_ADMIN.PASSWORD, password)
      .execute();
}

语义:

  • login_name 不存在:新增
  • login_name 已存在:更新密码

6.2 使用 excluded(...)

如果更新值来自“本次插入尝试值”,推荐写成:

public int upsertAdmin2(DSLContext dsl, String loginName, String password) {
  return dsl.insertInto(SYSTEM_ADMIN)
      .set(SYSTEM_ADMIN.LOGIN_NAME, loginName)
      .set(SYSTEM_ADMIN.PASSWORD, password)
      .onConflict(SYSTEM_ADMIN.LOGIN_NAME)
      .doUpdate()
      .set(SYSTEM_ADMIN.PASSWORD, DSL.excluded(SYSTEM_ADMIN.PASSWORD))
      .execute();
}

它更贴近 PostgreSQL 原生 SQL 语义。


6.3 带条件的 UPSERT

有些业务要求:

  • 只有更“新”的数据才能覆盖旧数据
  • 旧版本不能覆盖新版本

这时可以在 doUpdate() 后加 where(...)。

public int upsertProfileWithTs(DSLContext dsl, long userId, String json) {
  return dsl.insertInto(USER_PROFILE)
      .set(USER_PROFILE.USER_ID, userId)
      .set(USER_PROFILE.PROFILE, org.jooq.JSONB.valueOf(json))
      .set(USER_PROFILE.UPDATED_AT, dsl.currentTimestamp())
      .onConflict(USER_PROFILE.USER_ID)
      .doUpdate()
      .set(USER_PROFILE.PROFILE, org.jooq.JSONB.valueOf(json))
      .set(USER_PROFILE.UPDATED_AT, dsl.currentTimestamp())
      .where(USER_PROFILE.UPDATED_AT.lt(dsl.currentTimestamp()))
      .execute();
}

实际项目里,更常见的是比较:

  • 请求带来的版本号
  • 请求带来的更新时间
  • 数据库当前版本

但这里先用思路说明。


6.4 UPSERT + RETURNING

如果业务希望写完就拿结果:

public Integer upsertAndReturnId(DSLContext dsl, String loginName, String password) {
  return dsl.insertInto(SYSTEM_ADMIN)
      .set(SYSTEM_ADMIN.LOGIN_NAME, loginName)
      .set(SYSTEM_ADMIN.PASSWORD, password)
      .onConflict(SYSTEM_ADMIN.LOGIN_NAME)
      .doUpdate()
      .set(SYSTEM_ADMIN.PASSWORD, password)
      .returning(SYSTEM_ADMIN.ID)
      .fetchOne()
      .getId();
}

这种写法非常适合:

  • 外部同步任务
  • 幂等写入
  • 写后立即依赖主键继续业务

七、窗口函数:真正解决“分组内排序与统计”

窗口函数是 PostgreSQL 也是 SQL 世界非常重要的一类能力。 它特别适合解决:

  • 排行榜
  • TopN
  • 每组最近几条
  • 滚动统计
  • 分页总数
  • 排名与并列处理

很多原本写起来很绕的 SQL,一旦换成窗口函数,会立刻变得清晰。


7.1 示例表:用户积分流水

CREATE TABLE user_score_log (
  id BIGSERIAL PRIMARY KEY,
  user_id BIGINT NOT NULL,
  score INT NOT NULL,
  created_at TIMESTAMP NOT NULL DEFAULT now()
);

CREATE INDEX idx_user_score_log_user_time
ON user_score_log(user_id, created_at DESC);

7.2 排名:row_number、rank、dense_rank

先看最经典的排行榜场景。

row_number

import static demo.jooq.gen.Tables.USER_SCORE_LOG;
import org.jooq.Field;
import org.jooq.impl.DSL;

Field<Integer> rn = DSL.rowNumber()
    .over(DSL.orderBy(USER_SCORE_LOG.SCORE.desc()))
    .as("rn");

var top20 = dsl.select(USER_SCORE_LOG.USER_ID, USER_SCORE_LOG.SCORE, rn)
    .from(USER_SCORE_LOG)
    .orderBy(USER_SCORE_LOG.SCORE.desc())
    .limit(20)
    .fetch();

语义

  • 分数高的排前面
  • 序号严格递增
  • 即使分数相同,也不会并列

rank

Field<Integer> r = DSL.rank()
    .over(DSL.orderBy(USER_SCORE_LOG.SCORE.desc()))
    .as("r");

特点:

  • 相同分数并列
  • 后续名次跳号

例如:

  • 100 分:第 1 名
  • 100 分:第 1 名
  • 90 分:第 3 名

dense_rank

Field<Integer> dr = DSL.denseRank()
    .over(DSL.orderBy(USER_SCORE_LOG.SCORE.desc()))
    .as("dr");

特点:

  • 相同分数并列
  • 后续名次不跳号

例如:

  • 100 分:第 1 名
  • 100 分:第 1 名
  • 90 分:第 2 名

7.3 分组 TopN:每个用户最近 3 条记录

这是窗口函数最经典、也最有用的场景之一。

如果不用窗口函数,通常会写得非常绕。

jOOQ 写法

import static demo.jooq.gen.Tables.USER_SCORE_LOG;
import org.jooq.Table;
import org.jooq.impl.DSL;

var rn = DSL.rowNumber()
    .over(
        DSL.partitionBy(USER_SCORE_LOG.USER_ID)
           .orderBy(USER_SCORE_LOG.CREATED_AT.desc())
    )
    .as("rn");

Table<?> t = dsl
    .select(
        USER_SCORE_LOG.ID,
        USER_SCORE_LOG.USER_ID,
        USER_SCORE_LOG.SCORE,
        USER_SCORE_LOG.CREATED_AT,
        rn
    )
    .from(USER_SCORE_LOG)
    .asTable("t");

var result = dsl.selectFrom(t)
    .where(DSL.field("rn", Integer.class).le(3))
    .orderBy(
        DSL.field("user_id"),
        DSL.field("created_at").desc()
    )
    .fetch();

逻辑拆解

第一步:

  • 按 user_id 分区
  • 每个用户内部按 created_at desc 排序
  • 用 row_number() 编号

第二步:

  • 外层只保留 rn <= 3

于是就得到:

每个用户最近 3 条记录

这是窗口函数最值得掌握的模板之一。


7.4 分页 + 总数:一次 SQL 返回 total

后台分页通常会写两条 SQL:

  1. 查询当前页数据
  2. 查询总数

但有时也可以用窗口函数一次搞定。

import static demo.jooq.gen.Tables.SYSTEM_ADMIN;
import org.jooq.Field;
import org.jooq.impl.DSL;

int pageNo = 1;
int pageSize = 20;

Field<Integer> total = DSL.count().over().as("total");

var rows = dsl.select(
      SYSTEM_ADMIN.ID,
      SYSTEM_ADMIN.LOGIN_NAME,
      total
    )
    .from(SYSTEM_ADMIN)
    .orderBy(SYSTEM_ADMIN.ID.desc())
    .limit(pageSize)
    .offset((pageNo - 1) * pageSize)
    .fetch();

说明

这里:

count().over()

会给当前结果集里的每一行都附带一个总数。

所以:

  • 列表数据有了
  • 总数也有了
  • 取第一行的 total 即可

优点

  • 少一次 count SQL
  • 数据一致性更自然
  • 对中等规模分页场景很实用

注意

超大表上,count(*) 本身仍可能昂贵。 所以窗口函数不是“免费午餐”,只是让表达更集中。


八、CTE:把复杂 SQL 拆成可读的查询块

CTE,也就是:

WITH ...

它的最大价值不是“更快”,而是:

让复杂 SQL 更可读、更可维护、更适合分阶段组织。

在多层统计、复杂报表、分组筛选里非常有用。


8.1 最简单的 CTE 思路

例如,我们先把“每个用户的最近记录”做成一个中间结果,再从中筛选。

SQL 逻辑类似:

with latest_score as (
  ...
)
select * from latest_score where ...

8.2 jOOQ 中的 CTE 写法

下面继续用 user_score_log 举例: 需求是查询“每个用户最新一条积分记录”。

import static demo.jooq.gen.Tables.USER_SCORE_LOG;
import org.jooq.CommonTableExpression;
import org.jooq.Field;
import org.jooq.Name;
import org.jooq.Record4;
import org.jooq.impl.DSL;

Field<Integer> rn = DSL.rowNumber()
    .over(
        DSL.partitionBy(USER_SCORE_LOG.USER_ID)
           .orderBy(USER_SCORE_LOG.CREATED_AT.desc())
    )
    .as("rn");

CommonTableExpression<Record4<Long, Integer, java.sql.Timestamp, Integer>> latestScore =
    DSL.name("latest_score")
       .fields("user_id", "score", "created_at", "rn")
       .as(
           dsl.select(
                 USER_SCORE_LOG.USER_ID,
                 USER_SCORE_LOG.SCORE,
                 USER_SCORE_LOG.CREATED_AT,
                 rn
               )
              .from(USER_SCORE_LOG)
       );

var result = dsl.with(latestScore)
    .select()
    .from(latestScore)
    .where(DSL.field(DSL.name("latest_score", "rn"), Integer.class).eq(1))
    .fetch();

这个例子说明什么

CTE 非常适合和窗口函数结合:

  • 先在 CTE 里算排名
  • 再在外层筛选 rn = 1
  • 逻辑很清楚

8.3 为什么复杂查询推荐 CTE

因为如果所有逻辑都堆在一个巨长的 SQL 里,会出现几个问题:

  • 难读
  • 难调试
  • 难复用
  • 难映射到 DAO 方法含义

而 CTE 的优势是:

  • 把 SQL 分阶段命名
  • 每一段都有业务语义
  • 方便继续组合

在 jOOQ 中尤其适合:

  • 复杂统计
  • 分组筛选
  • 多层子查询
  • 报表类查询

九、JSONB + CTE + 窗口函数的组合思路

真实项目里,高级 SQL 往往不是单独出现的,而是组合使用。

例如一个查询可能是:

  • 从 JSONB 里提取 age
  • 用窗口函数给每个用户按更新时间排名
  • 再用 CTE 包装成中间结果
  • 最后筛出每个用户最新一条且年龄 >= 18 的记录

这正是 jOOQ 高阶能力的体现:

不是某一个 API,而是让复杂 SQL 的结构依然清晰。

下面给一个组合思路示例。


9.1 查询每个用户最新 profile,且 age >= 18

假设有一张带历史版本的 profile 表:

CREATE TABLE user_profile_history (
  id BIGSERIAL PRIMARY KEY,
  user_id BIGINT NOT NULL,
  profile JSONB NOT NULL,
  created_at TIMESTAMP NOT NULL DEFAULT now()
);

jOOQ 思路:

  1. 从 JSONB 提取 age
  2. 用 row_number() over(partition by user_id order by created_at desc) 排序
  3. 放进 CTE
  4. 外层过滤 rn = 1 and age >= 18

这类查询在普通 ORM 里会很痛苦,但在 jOOQ 中是很自然的延伸。


十、在 tio-boot + jOOQ 项目中的推荐分层

到了高级 SQL 阶段,分层更重要。


10.1 DAO 层:只负责 SQL

DAO 层应该做的事:

  • 封装 JSONB 查询
  • 封装 UPSERT
  • 封装窗口函数查询
  • 封装 CTE 报表 SQL

不要把:

  • 事务控制
  • HTTP 参数处理
  • 业务流程判断

塞进 DAO。


10.2 Service 层:负责事务与业务编排

例如:

  • 先 UPSERT profile
  • 再写审计日志
  • 再触发别的表更新

这些应该放在 Service 层统一控制事务。


10.3 Controller 层:只处理输入输出

Controller 更适合做:

  • 参数解析
  • DTO 封装
  • 返回对象构建

不要让 Controller 直接拼复杂 SQL。


十一、一个完整的 DAO 示例

下面给出一个把 JSONB、UPSERT、窗口函数、存在性判断串起来的 DAO 示例。

package demo.jooq.dao;

import static demo.jooq.gen.Tables.SYSTEM_ADMIN;
import static demo.jooq.gen.Tables.USER_PROFILE;
import static demo.jooq.gen.Tables.USER_SCORE_LOG;

import java.util.List;

import org.jooq.DSLContext;
import org.jooq.Field;
import org.jooq.JSONB;
import org.jooq.impl.DSL;

import nexus.io.annotation.Inject;

import demo.jooq.tx.TransactionContext;

public class PgAdvancedDao {

  @Inject
  private DSLContext dsl;

  private DSLContext useDsl() {
    DSLContext txDsl = TransactionContext.get();
    return txDsl != null ? txDsl : dsl;
  }

  public int saveProfile(long userId, String json) {
    return useDsl().insertInto(USER_PROFILE)
        .set(USER_PROFILE.USER_ID, userId)
        .set(USER_PROFILE.PROFILE, JSONB.valueOf(json))
        .onConflict(USER_PROFILE.USER_ID)
        .doUpdate()
        .set(USER_PROFILE.PROFILE, JSONB.valueOf(json))
        .set(USER_PROFILE.UPDATED_AT, useDsl().currentTimestamp())
        .execute();
  }

  public Long saveProfileAndReturnId(long userId, String json) {
    return useDsl().insertInto(USER_PROFILE)
        .set(USER_PROFILE.USER_ID, userId)
        .set(USER_PROFILE.PROFILE, JSONB.valueOf(json))
        .onConflict(USER_PROFILE.USER_ID)
        .doUpdate()
        .set(USER_PROFILE.PROFILE, JSONB.valueOf(json))
        .set(USER_PROFILE.UPDATED_AT, useDsl().currentTimestamp())
        .returning(USER_PROFILE.ID)
        .fetchOne(USER_PROFILE.ID);
  }

  public List<Long> findAdultUsers() {
    Field<Integer> age =
        DSL.field("({0} ->> 'age')::int", Integer.class, USER_PROFILE.PROFILE);

    return useDsl().select(USER_PROFILE.USER_ID)
        .from(USER_PROFILE)
        .where(age.ge(18))
        .fetchInto(Long.class);
  }

  public List<Long> findVipUsers() {
    return useDsl().select(USER_PROFILE.USER_ID)
        .from(USER_PROFILE)
        .where(
            DSL.condition(
                "{0} @> {1}::jsonb",
                USER_PROFILE.PROFILE,
                JSONB.valueOf("{\"tags\":[\"vip\"]}")
            )
        )
        .fetchInto(Long.class);
  }

  public boolean existsAdminByLoginName(String loginName) {
    return useDsl().fetchExists(
        useDsl()
            .selectOne()
            .from(SYSTEM_ADMIN)
            .where(SYSTEM_ADMIN.LOGIN_NAME.eq(loginName))
    );
  }

  public List<?> top20ScoreRank() {
    Field<Integer> rn = DSL.rowNumber()
        .over(DSL.orderBy(USER_SCORE_LOG.SCORE.desc()))
        .as("rn");

    return useDsl().select(USER_SCORE_LOG.USER_ID, USER_SCORE_LOG.SCORE, rn)
        .from(USER_SCORE_LOG)
        .orderBy(USER_SCORE_LOG.SCORE.desc())
        .limit(20)
        .fetch();
  }

  public List<?> latest3ScoreByUser() {
    var rn = DSL.rowNumber()
        .over(
            DSL.partitionBy(USER_SCORE_LOG.USER_ID)
               .orderBy(USER_SCORE_LOG.CREATED_AT.desc())
        )
        .as("rn");

    var t = useDsl()
        .select(
            USER_SCORE_LOG.ID,
            USER_SCORE_LOG.USER_ID,
            USER_SCORE_LOG.SCORE,
            USER_SCORE_LOG.CREATED_AT,
            rn
        )
        .from(USER_SCORE_LOG)
        .asTable("t");

    return useDsl().selectFrom(t)
        .where(DSL.field("rn", Integer.class).le(3))
        .orderBy(DSL.field("user_id"), DSL.field("created_at").desc())
        .fetch();
  }
}

十二、几个非常容易踩的坑


12.1 JSONB 很灵活,但不要把一切都塞进去

JSONB 适合扩展属性,不适合替代整个关系模型。

如果某字段:

  • 高频 join
  • 高频分组统计
  • 有强约束
  • 是核心关系字段

那它更适合做成真实列。


12.2 @> 查询很常用,但前提是 JSON 结构要稳定

如果 JSON 结构本身非常混乱,例如:

  • 有时是数组
  • 有时是对象
  • key 名不统一

那查询会越来越难维护。

所以 JSONB 灵活不等于可以无约束。


12.3 窗口函数很强,但不是所有查询都该上

如果只是简单分页、简单排序,就不要为了“高级”而硬上窗口函数。

窗口函数最适合的,是普通 SQL 很难优雅表达的场景:

  • 分组 TopN
  • 排名
  • 滚动统计
  • 一次返回总数

12.4 CTE 的价值首先是可读性,不一定总是性能优化

有些人会误以为 WITH 天然更快。 其实它首先解决的是:

  • 结构清晰
  • 逻辑分层
  • 易于维护

性能仍然要看实际 SQL、数据量、索引和执行计划。


12.5 PostgreSQL 高级能力是“方言优势”,不是缺点

像:

  • JSONB
  • on conflict
  • returning
  • 窗口函数增强
  • 表达式索引

都明显带有 PostgreSQL 方言特色。

这不是问题,反而是优势。 前提是你要明确项目目标:

如果你的数据库就是 PostgreSQL,那就应该主动拥抱 PostgreSQL 的强项。

而 jOOQ 正是最适合做这件事的 Java 工具之一。


十三、本篇总结

这一篇真正进入了 jOOQ 的高阶能力区间。

通过本文,我们完成了:

  • 使用 JSONB 存储扩展属性
  • 使用 JSONB.valueOf(...) 写入 JSONB
  • 使用 ->>、@>、? 等 PostgreSQL JSON 能力进行查询
  • 理解 GIN 索引和表达式索引的适用场景
  • 使用 onConflict(...).doUpdate() 实现 PostgreSQL UPSERT
  • 使用 returning(...) 实现写后读
  • 使用 row_number、rank、dense_rank 做排行榜
  • 使用窗口函数完成“每组 TopN”
  • 使用 count().over() 一次返回分页总数
  • 使用 CTE 把复杂 SQL 拆成可读的阶段化查询

一句话总结:

jOOQ 的真正价值,不是在 Java 里“模拟 ORM”,而是在 Java 里优雅地表达 PostgreSQL 的原生高级 SQL。

到这里,整个 tio-boot + jOOQ 系列已经覆盖了:

  • 基础整合
  • 事务控制
  • 强类型 codegen
  • CRUD
  • 批量与分页
  • UPSERT
  • 多表查询与 DTO
  • JSONB
  • 窗口函数
  • CTE 与高级 PostgreSQL SQL

这已经是一套相当完整的现代 Java 数据访问方案。

Edit this page
Last Updated: 10/1/26, 4:55 AM
Contributors: litongjava
Prev
的多表关联查询、DTO 投影、聚合统计与视图封装
Next
tio-boot + jOOQ 的审计字段、乐观锁、数据权限与企业级 Repository 设计