当前位置: 首页 > news >正文

Flink SQL 的 JAR 语句ADD JAR / SHOW JARS / REMOVE JAR(SQL CLI 实战 + 避坑指南)

1. JAR 语句是干什么的?

官方定义:

JAR 语句用于在运行时把用户 jar 加入 classpath、从 classpath 移除,或查看已经添加的 jar。

它们主要面向SQL CLI的交互式会话使用。

2. SQL CLI 示例:三连击(ADD → SHOW → REMOVE)

2.1 添加本地 jar

FlinkSQL>ADDJAR'/path/hello.jar';[INFO]Executestatement succeeded.

2.2 添加远程 jar(例如 HDFS)

FlinkSQL>ADDJAR'hdfs:///udf/common-udf.jar';[INFO]Executestatement succeeded.

2.3 查看已添加 jar

FlinkSQL>SHOWJARS;+----------------------------+|jars|+----------------------------+|/path/hello.jar||hdfs:///udf/common-udf.jar |+----------------------------+

2.4 移除 jar

FlinkSQL>REMOVE JAR'/path/hello.jar';[INFO]The specified jarisremovedfromsessionclassloader.

3. ADD JAR:语法与能力

3.1 语法

ADDJAR'<path_to_filename>.jar'

3.2 能力说明

  • 将指定 jar 加入资源列表(会话 classpath)
  • 支持本地文件系统远程文件系统路径
  • 加完后可通过SHOW JARS查看

4. 重要限制:不要用 ADD JAR 去加载 Hive 相关(避坑必读)

官方限制(非常关键):

不要使用ADD JAR来加载 Hive source/sink/function/catalog。
这是 Hive connector 的已知限制,未来版本会修复。当前推荐按官方 Hive 集成指引进行 Hive 集成。

这句话的含义是:
即便你把 Hive 相关依赖 jar “塞进” classpath,也可能出现各种奇怪问题(类冲突、发现不到、行为不一致等)。Hive 集成通常要走更“规范”的方式(例如按官方集成步骤配置 Hive 相关依赖与模块/目录结构)。

5. SHOW JARS:查看当前会话 jar 列表

5.1 语法

SHOWJARS

5.2 作用

列出所有通过ADD JAR添加的 jar。

适用场景:

  • 确认 jar 是否加成功(路径是否正确)
  • 排查“类找不到 / UDF 找不到”时确认环境
  • 会话复用时确认是否被别人加过 jar(避免污染)

6. REMOVE JAR:移除指定 jar(仅 SQL CLI)

6.1 语法

REMOVE JAR'<path_to_filename>.jar'

6.2 说明

  • 移除指定的、由ADD JAR添加的 jar
  • 注意:REMOVE JAR 只在 SQL CLI 中生效(官方强调)

适用场景:

  • 临时调试用 jar,用完清理
  • 发生依赖冲突,移除某个 jar 做 A/B 验证
  • 会话长期复用,防止 jar 越加越多导致不可控

7. 一套实战工作流:用 JAR 语句管理 UDF

你在 SQL CLI 里注册 UDF 的常见节奏一般是:

1)添加 jar(本地或远程)

ADDJAR'/path/my-udf.jar';

2)确认 jar 已加载

SHOWJARS;

3)创建函数(示意)

CREATEFUNCTIONmy_funcAS'com.example.MyFunc';

4)验证函数可用

SHOWUSERFUNCTIONS;SELECTmy_func(col)FROMt;

5)调试结束清理

REMOVE JAR'/path/my-udf.jar';

这套流程的价值:可控、可复现、可回滚。

8. 总结

  • Flink SQL 目前支持三种 JAR 语句:ADD JARSHOW JARSREMOVE JAR
  • 核心作用:管理SQL CLI 会话 classloader中的用户 jar
  • ADD JAR支持本地/远程文件系统路径
  • 重要限制:不要用ADD JAR加载 Hive source/sink/function/catalog(Hive connector 已知限制)
  • REMOVE JAR仅在 SQL CLI 生效
http://www.cnnetsun.cn/news/173756.html

相关文章:

  • Open-AutoGLM工作流监控实战指南(实时可视化监控体系搭建全解析)
  • 别让“小眼镜”挡住清晰世界!儿童近视防控,家长必知的科学指南
  • AI赋能会议管理,Open-AutoGLM预约系统深度解析
  • 打开Simulink工程时总得先泡杯咖啡——电池模型搭建这事儿,手动调参太费劲。不过这次咱们直接用二阶RC等效电路模型开搞,毕竟既要考虑极化效应又要平衡计算量
  • 读懂HikariCP一百行代码,多线程就是个孙子
  • SMP语言基础知识-应用系统,开发的痛点,开发者的痛点
  • 【Open-AutoGLM收益监控终极方案】:5分钟搭建实时收益提醒系统
  • 揭秘Open-AutoGLM体检数据查询机制:5步实现高效精准调用
  • Open-AutoGLM实战指南:7步搭建企业级智能会议纪要系统
  • 还在手动查收益?AutoGLM自动化查询方案让你效率提升10倍,省时又精准
  • 【Java毕设全套源码+文档】基于springboot的大学生家教兼职管理系统的设计与实现(丰富项目+远程调试+讲解+定制)
  • 从数据到决策,Open-AutoGLM如何重构车辆生命周期管理
  • 【Open-AutoGLM体检报告查询全解析】:手把手教你快速获取与解读AI健康报告
  • 社保数据天天查,你还在人工操作?Open-AutoGLM自动化方案已全面上线
  • (稀缺资源)Open-AutoGLM社保机器人部署教程:仅限内部流传的配置参数曝光
  • 2026年职场暗流:HR不会告诉你的CAIE证书真相,零基础如何破局?
  • 【高效出行必备技能】:利用Open-AutoGLM实现智能加油站实时检索
  • 为什么90%的预约系统都失败了?:Open-AutoGLM三大设计原则全公开
  • 【Open-AutoGLM加油站查询实战指南】:手把手教你快速定位全国油站信息
  • Android Qualcomm USB 专题系列【篇一:UsbHost模式配置】
  • 9 个降AI率工具,研究生必备!
  • SCI :Letter发表攻略:好发与否全解析
  • 预约总是失败?,深度剖析Open-AutoGLM服务排队机制与抢号策略
  • Open-AutoGLM维修服务预约实战技巧(90%用户不知道的隐藏通道)
  • 【Java毕设源码分享】基于springboot+vue的大学生爱心互助代购网站设计与实现(程序+文档+代码讲解+一条龙定制)
  • STP实验
  • 只用一个 GPT 客户端,如何实现一个可控、可审计的投资决策 Runtime?
  • 网页如何设计.NET Core大文件上传的日志记录与监控系统?
  • Open-AutoGLM 对比传统查询引擎:性能提升8倍的秘密是什么?
  • 揭秘Open-AutoGLM核心算法:1秒匹配最优家政服务员的底层逻辑