Tdarr流处理中的缓存文件优化策略

在Tdarr媒体处理系统中，用户经常使用流(flow)功能对视频文件进行多步骤预处理。然而当前版本(v2.27.02)存在一个显著的性能问题：每个经典插件处理步骤都会生成新的缓存文件副本，导致存储空间呈倍数增长。

问题现象分析

当处理大型媒体文件时，例如一个28GB的蓝光视频，经过8个处理步骤的流处理后，系统会生成8个完整的文件副本，总计消耗约224GB的临时存储空间。这不仅造成存储资源浪费，还会：

1. 显著降低并发处理能力
2. 增加SSD等高速存储设备的磨损
3. 延长整体处理时间
4. 可能导致存储空间耗尽而中断处理任务

技术解决方案

Tdarr开发团队针对此问题提供了专门的缓存清理插件。该插件允许用户在流处理过程中选择性清除不再需要的中间缓存文件，仅保留当前正在处理的文件版本。

插件提供两种清理模式：

1. 任务缓存清理：仅清除当前任务缓存目录中的非活动文件
2. 库缓存清理：清除整个库缓存目录中的非活动文件

最佳实践建议

对于需要多步骤处理的复杂流，建议在以下位置插入缓存清理插件：

1. 在内存密集型处理步骤之后
2. 在产生大体积中间文件的步骤之后
3. 在流处理的中间阶段（避免频繁清理影响性能）

典型的优化流结构示例：

输入文件 → 预处理步骤1 → 缓存清理 → 
预处理步骤2 → 转码步骤 → 缓存清理 → 
后处理步骤 → 输出

注意事项

1. 清理缓存是破坏性操作，确保后续步骤不需要之前的中间文件
2. 对于需要回溯处理的复杂流，需谨慎使用此功能
3. 建议先在测试环境验证清理策略
4. 监控系统存储使用情况，合理设置清理频率

通过合理使用缓存清理功能，用户可以显著提升Tdarr的处理效率，特别是在处理大型媒体文件库时。这一优化使得在有限存储空间下运行多个并发任务成为可能，同时降低了存储设备的I/O压力。