当前位置: 首页 > news >正文

蓝易云 - ubuntu22安装和部署Kettle8.2

蓝易云:Ubuntu 22.04 安装与部署 Kettle 8.2(PDI 8.2)全流程

Kettle(Pentaho Data Integration / PDI)8.2 常见交付形态包含:图形界面 Spoon、命令行执行器 Kitchen/Pan、轻量 HTTP 服务 Carte。PDI 相关构建/运行链路通常以 Java 8 作为基线要求(JDK 1.8)。(SourceForge)


部署方式对比表(先选路,再动手)✅

方式适用场景启动入口优点风险点
Spoon(GUI)有桌面/远程桌面开发调试spoon.sh开发效率高需 X/图形依赖
Kitchen/Pan(CLI)服务器跑作业/定时调度kitchen.sh/pan.sh最稳、最轻需要规范日志与参数
Carte(服务化)远程触发、分布式/集群carte.sh易做平台化需鉴权、端口治理 (pentaho-public.atlassian.net)

1)基础环境准备:安装 Java 8 + 常用依赖 🔧

sudo apt update sudo apt install -y unzip fontconfig sudo apt install -y openjdk-8-jdk java -version

解释(逐行):

  • apt update:刷新软件索引,避免“装不到包/版本不对”。

  • unzip:解压 PDI 压缩包必备。

  • fontconfig:GUI/字体渲染常用依赖,服务器也建议装,减少 SWT/字体类异常概率。

  • openjdk-8-jdk:安装 JDK 8(Ubuntu 22.04 的 openjdk-8 在发行包体系中可用)。(Launchpad)

  • java -version:确认“当前生效的 Java”确实是 1.8,而不是 11/17。

如果你的环境因仓库策略无法直接装到 JDK 8,务实方案是改用企业可控的 JDK 8 发行版(例如 Temurin 8)并显式指定PENTAHO_JAVA_HOME,避免“装了多个 Java 但实际跑错版本”。


2)获取并解压 PDI 8.2 安装包 📦

PDI 8.2 社区版常见包名为:pdi-ce-8.2.0.0-342.zip。(SourceForge)

sudo mkdir -p /opt/pdi sudo unzip pdi-ce-8.2.0.0-342.zip -d /opt/pdi ls -l /opt/pdi

解释:

  • /opt/pdi:建议作为标准化安装目录,便于权限、备份、运维脚本统一。

  • unzip ... -d:解压到目标目录,解压后通常会得到data-integration/目录(后续命令都在里面执行)。


3)设置运行环境变量(让“版本与路径”可控)🧩

sudo tee /etc/profile.d/kettle.sh >/dev/null <<'EOF' export PENTAHO_JAVA_HOME=/usr/lib/jvm/java-8-openjdk-amd64 export KETTLE_HOME=/opt/pdi/data-integration export PATH=$KETTLE_HOME:$PATH EOF source /etc/profile.d/kettle.sh

解释:

  • PENTAHO_JAVA_HOME:强制 PDI 使用指定的 Java 8,避免系统默认 Java 被升级后“无声故障”。

  • KETTLE_HOME:统一指向data-integration目录,后续脚本更简洁。

  • profile.d:全局生效,适合服务器多用户运维。


4)三种“上线姿势”:CLI 执行 / Carte 服务化 / GUI 启动 🚀

A. 服务器跑作业(推荐:Kitchen)🙂

cd /opt/pdi/data-integration ./kitchen.sh -file=/data/etl/demo.kjb -level=Basic -log=/var/log/kettle/demo.log

解释:

  • kitchen.sh:执行作业(.kjb)。

  • -file=:指定作业文件绝对路径,避免相对路径导致的“找不到资源”。

  • -level=Basic:日志级别,建议从 Basic 起步,排障再提高。

  • -log=:把日志落盘,便于告警与追溯(生产必配)。

B. 服务器跑转换(Pan)

cd /opt/pdi/data-integration ./pan.sh -file=/data/etl/demo.ktr -level=Basic -log=/var/log/kettle/demo-pan.log

解释:

  • pan.sh:执行转换(.ktr),其余参数语义与 Kitchen 一致。

C. Carte 服务化(用于远程触发/集群)🌐

Carte 支持命令行启动,也支持 XML 配置启动:sh carte.sh localhost 8080sh carte.sh configuration.xml。(pentaho-public.atlassian.net)

示例:创建配置文件

sudo tee /opt/pdi/carte-config.xml >/dev/null <<'EOF' <slave_config> <slaveserver> <name>carte-1</name> <hostname>0.0.0.0</hostname> <port>8080</port> <master>Y</master> </slaveserver> </slave_config> EOF

解释:

  • hostname=0.0.0.0:监听所有网卡,适合服务器对外提供服务(同时要做防火墙与鉴权)。

  • port=8080:服务端口;与业务端口冲突就换,原则是“端口治理可审计”。

启动:

cd /opt/pdi/data-integration ./carte.sh /opt/pdi/carte-config.xml

解释:

  • 通过配置文件启动,便于把配置纳入版本管理与运维基线。


5)把 Carte 做成 systemd 服务(生产交付建议)🛠️

sudo tee /etc/systemd/system/kettle-carte.service >/dev/null <<'EOF' [Unit] Description=Kettle Carte Service After=network.target [Service] Type=simple User=root WorkingDirectory=/opt/pdi/data-integration Environment=PENTAHO_JAVA_HOME=/usr/lib/jvm/java-8-openjdk-amd64 ExecStart=/opt/pdi/data-integration/carte.sh /opt/pdi/carte-config.xml Restart=on-failure RestartSec=3 [Install] WantedBy=multi-user.target EOF sudo systemctl daemon-reload sudo systemctl enable --now kettle-carte sudo systemctl status kettle-carte --no-pager

解释:

  • After=network.target:确保网络就绪再起服务。

  • Environment=...:把 Java 版本锁死在服务级,避免 profile 失效导致漂移。

  • Restart=on-failure:失败自动拉起,提升可用性。

  • enable --now:开机自启并立即启动;status用于确认健康状态。


部署工作流图(vditor Mermaid)📌

flowchart TD A[安装 JDK 8 与依赖] --> B[解压 PDI 8.2 到 /opt/pdi] B --> C[设置 PENTAHO_JAVA_HOME / KETTLE_HOME] C --> D{交付形态} D -->|开发调试| E[Spoon GUI] D -->|定时/批处理| F[Kitchen/Pan CLI] D -->|平台化/远程触发| G[Carte + systemd]

一句落地建议(少走弯路)

如果你是生产服务器,我的建议很明确:优先用 Kitchen/Pan 做“可控批处理”,需要平台化再上 Carte;GUI 只留给开发机或带桌面的跳板机。这样你的交付成本最低、稳定性最高,也最容易做标准化。

http://www.cnnetsun.cn/news/118910.html

相关文章:

  • Nginx gzip压缩完整配置指南:如何快速提升网站性能
  • [深度学习] 大模型学习5-高效微调框架Unsloth使用指北
  • WIndows安装MongoDB数据库
  • NiceGUI之Button操作(ElementPlus组件库)
  • Claude code学习笔记(一)-环境安装claude code+ccr
  • WordPress中文完全教程:从菜鸟到神人的终极指南
  • EmotiVoice语音合成引擎的更新日志与版本迭代规划
  • 纪念日回忆录语音生成:温情科技应用
  • Flutter富文本渲染性能优化终极指南:长文本处理与资源回收策略
  • Ditto剪贴板管理器架构深度解析:从用户痛点到技术实现
  • Qwen3-4B终极指南:如何快速上手新一代AI语言模型
  • 5 款 AI 写论文哪个好?深度横评后,才发现虎贲等考 AI 是学术圈隐藏的 “六边形战士”!
  • EmotiVoice vs 传统TTS:情感表达能力的代际差异分析
  • POV-Ray 光线追踪终极指南:从零开始掌握专业渲染
  • EmotiVoice支持语音情感风格迁移学习
  • 定期第三方安全审计:EmotiVoice质量保证
  • 不同职业人群对EmotiVoice的应用需求分析
  • 手机系统预装应用包彻底删除
  • EmotiVoice能否实现多人对话同步生成?技术可行性评估
  • FusionCompute 8.0 实验环境搭建:完整资源获取与部署指南
  • AI主播直播间搭建:EmotiVoice语音部分实现
  • 静态代码扫描服务 100分(python、java、c++、js、c
  • Directus周起始日难题:3步从周日切换到周一的技术解决方案
  • 33、网络管理与UUCP使用指南
  • C++核心语法复盘:数据结构编程的底层基石
  • 43、Exim邮件服务器配置与管理全解析
  • 48、互联网新闻服务器INN与NNTP的使用与配置指南
  • 我发现动态时间戳对齐破解跨境急诊预警延迟
  • 面试官:如何提升AIGC生成的可控性?
  • 如何在5分钟内用Mermaid语法轻松生成专业流程图?