当前位置: 首页 > news >正文

批量压缩对象存储中视频

脚本说明与注意事项

  1. 运行环境:此脚本需要在能访问到视频文件的服务器(如转码服务器)上运行。
  2. 对象存储挂载
    • 如果您的对象存储(MinIO/Ceph)已经挂载为本地目录(例如通过 S3FS 挂载到了/mnt/video_source),直接配置路径即可。
    • 如果是纯API对接,需要配合mc(MinIO Client) 先下载后上传。本脚本默认采用“本地目录/挂载盘”模式,这是最通用的方式。
  3. 关键优化
    • 主动帮您加上了-movflags +faststart参数。虽然您提供的命令里没写,但作为点播系统,必须加这个参数,否则浏览器无法“边下边播”。
    • 增加了幂等性检查:如果目标文件已存在且大小正常,会自动跳过,防止重复跑。

脚本内容 (batch_transcode.sh)

您可以直接复制以下内容保存为batch_transcode.sh

#!/bin/bash# ================= 配置区域 =================# 源视频目录 (对象存储挂载目录或原始文件目录)SOURCE_DIR="/data/videos/raw"# 输出视频目录 (转码后的存放目录,建议与源分开,确认无误后再替换)OUTPUT_DIR="/data/videos/optimized"# 日志文件路径LOG_FILE="./transcode_task.log"# 设置并发数量 (H.265非常消耗CPU,建议设置为 CPU核心数 / 2)# 如果服务器要同时响应其他请求,请设为 1 保持单线程处理MAX_JOBS=1# ===========================================# 检查 FFmpeg 是否安装if!command-v ffmpeg&>/dev/null;thenecho"错误: 未找到 ffmpeg,请先安装。"exit1fi# 创建输出目录mkdir-p"$OUTPUT_DIR"echo"=== 开始批量压缩任务 ==="|tee-a"$LOG_FILE"echo"源目录:$SOURCE_DIR"|tee-a"$LOG_FILE"echo"输出目录:$OUTPUT_DIR"|tee-a"$LOG_FILE"echo"开始时间:$(date)"|tee-a"$LOG_FILE"# 统计计数器count_success=0count_skip=0count_fail=0# 递归查找所有 .mp4 文件# 注意:处理文件名中的空格find"$SOURCE_DIR"-type f -name"*.mp4"|whileread-r input_file;do# 1. 构建输出文件路径# 获取相对路径,保持原有的目录结构relative_path="${input_file#$SOURCE_DIR/}"output_file="$OUTPUT_DIR/$relative_path"output_dir_path=$(dirname"$output_file")# 自动创建子目录mkdir-p"$output_dir_path"# 2. 检查是否已处理(防止重复跑)if[-f"$output_file"];then# 如果目标文件存在,且大小大于 1KB (防止之前的空文件),则跳过if[$(stat-c%s"$output_file")-gt1024];thenecho"[跳过] 文件已存在:$relative_path"|tee-a"$LOG_FILE"continuefifiecho"------------------------------------------------"|tee-a"$LOG_FILE"echo"[正在处理]$input_file..."|tee-a"$LOG_FILE"# 3. 执行 FFmpeg 命令# -y: 覆盖输出文件# -nostdin: 防止ffmpeg吞掉while循环的标准输入# -movflags +faststart: 必须加!确保Web端能秒开播放ffmpeg -y -nostdin -i"$input_file"\-c:v libx265\-preset medium\-crf28\-r15\-tag:v hvc1\-c:a aac -b:a 64k\-movflags +faststart\"$output_file"</dev/null>>"$LOG_FILE"2>&1# 4. 检查转码结果if[$?-eq0];then# 获取压缩率orig_size=$(du-h"$input_file"|cut-f1)new_size=$(du-h"$output_file"|cut-f1)echo"[成功]$relative_path(原:$orig_size-> 新:$new_size)"|tee-a"$LOG_FILE"# 可以在这里添加删除源文件的命令,但建议人工确认后再删# rm "$input_file"elseecho"[失败]$relative_path- 请查看日志详情"|tee-a"$LOG_FILE"# 如果生成了错误的空文件,删除它rm-f"$output_file"fidoneecho"================================================"|tee-a"$LOG_FILE"echo"任务结束时间:$(date)"|tee-a"$LOG_FILE"echo"日志已保存至:$LOG_FILE"

如何使用

  1. 保存脚本:将上述代码保存为transcode.sh
  2. 赋予权限
    chmod+x transcode.sh
  3. 修改路径
    使用vim transcode.sh修改前几行的配置:
    • SOURCE_DIR: 指向您存放原始大文件的目录。
    • OUTPUT_DIR: 指定您希望存放处理后文件的目录。
  4. 后台运行(推荐):
    由于视频压缩非常耗时(H.265可能只有 2-5倍 实时速度),建议使用nohup挂在后台运行,防止SSH断开导致任务中断。
    nohup./transcode.sh>/dev/null2>&1&
  5. 查看进度
    tail-f transcode_task.log

特别提醒:关于 H.265 的浏览器兼容性

您既然决定使用H.265 (HEVC),请务必告知前端开发人员注意以下事项:

  1. 浏览器支持现状
    • Safari (iOS/Mac):完美支持(原生硬件解码)。
    • Chrome / Edge:104+ 版本才开始较好支持,且通常依赖硬件加速。
    • Firefox:支持较差。
  2. 解决方案
    您之前提到的XGPlayer (西瓜播放器)支持集成 H.265 软解插件。
    务必让前端引入xgplayer-h265插件,否则部分旧电脑的 Chrome 浏览器可能会出现“只有声音没画面”的情况。

如果为了绝对的兼容性而不使用插件,请改回 H.264,但如果能控制前端播放器环境,H.265 是节省带宽的最佳选择。

http://www.cnnetsun.cn/news/134067.html

相关文章:

  • ytDownloader视频下载全攻略:从入门到精通的完整指南
  • OPC Data Client+MQTT协议:工业数据连接与传输一体化解决方案
  • 【雷达检测】基于Swerling目标模型的雷达信号检测附Matlab代码和报告
  • 分布式数据集成平台终极指南:可视化数据同步与大数据处理完整教程
  • 储能辅助火电机组二次调频控制策略及容量优化配置研究Simulink实现
  • I2C与SPI
  • 配电网中的拥塞管理Congestion Management in Distribution Networks
  • 中华人民共和国劳动合同法
  • Kotaemon HTTPS 部署教程:SSL证书配置全流程
  • 【dz-956】基于单片机的公交车系统
  • SECS/GEM通信实战指南:Python实现半导体设备智能监控系统
  • Chrome测试版本128.0.6613.137:跨平台自动化测试的终极解决方案
  • CMA/CNAS软件测评机构:【Gatling数据库性能关联测试JDBC连接和SQL执行时间监控】
  • 微信自动化助手:零成本Windows部署全攻略
  • PCB激光钻孔:CO₂激光VS紫外激光,谁更胜一筹?
  • 数据质量革命:Great Expectations如何重塑企业数据治理格局
  • AI如何帮你快速解决SQL Server连接问题
  • torch.matmul性能优化:比传统方法快10倍的技巧
  • OpenModScan 完全指南:掌握工业自动化调试的必备利器
  • 深度学习压缩技术实战:CompressAI框架的5大核心应用场景
  • 10分钟快速上手:Android离线语音识别的终极解决方案
  • 高效PLC通信框架:S7NetPlus实用开发指南
  • 如何快速上手Semantic UI Calendar:终极前端日期选择器指南
  • 电商平台如何用Kafka工具实现实时订单处理
  • Rustup深度解析:告别版本管理烦恼的终极指南
  • FlyFish:企业级数据可视化的低代码革命
  • RobotGo事件监听:构建智能GUI自动化系统的核心技术
  • 超实用教程:Mikan Project带你轻松玩转动漫资源管理
  • Ubuntu输入法实战:打造个性化中文输入环境
  • 3大核心技巧:充分发挥Windows终端扩展能力