YTsaurus QueryTracker 0.0.9版本发布:增强查询管理与监控能力
YTsaurus是一个分布式数据处理平台,其QueryTracker组件负责管理和跟踪系统内的查询执行情况。最新发布的0.0.9版本为QueryTracker带来了多项重要改进,显著提升了查询管理的灵活性、监控能力和系统稳定性。
核心功能增强
本次更新在查询管理方面引入了多项实用功能。首先是查询代理(QT/YQLA)的禁用机制,管理员现在可以根据需要临时禁用特定的查询代理,这在系统维护或故障排查时非常有用。其次,新增了自定义指标功能,允许用户为查询代理定义特定的监控指标,便于更精细地观察系统运行状态。
对于YQL查询,0.0.9版本增加了动态配置支持,使系统能够在不重启的情况下调整查询代理的行为。同时新增了ClickHouse UDF(用户定义函数)支持,扩展了查询处理能力。另一个重要改进是允许为YQL查询指定额外的凭证信息,增强了安全性。
查询处理优化
在查询处理方面,新版本支持为每个查询配置默认的YQL集群,提供了更大的灵活性。对于使用SPYT(Spark on YTsaurus)的查询,现在完全支持Unicode字符,解决了之前可能存在的编码问题。同时新增了SPYT查询结果截断功能,防止过大结果导致系统问题。
性能方面也有显著提升,优化了QueryTracker API调用,减少了不必要的开销。系统现在会限制每个YQL代理同时处理的查询数量,防止资源过载。此外,还对动态表的压缩进行了专门配置,提高了存储效率。
稳定性改进
0.0.9版本修复了多个影响系统稳定性的问题。其中最重要的是解决了YQL查询中止机制的问题,确保查询能够被正确终止。对于结果超过16MB的大型查询,现在能够可靠地完成处理。系统还修复了当负责的QueryTracker崩溃时查询无法完成的问题,以及YQL代理可能出现的死锁情况。
兼容性说明
需要注意的是,此版本仅与24.1.0及以上版本的代理、0.23.1及以上版本的Operator兼容。用户在升级时应当确保整个系统组件的版本匹配,以获得最佳稳定性和功能支持。
总体而言,YTsaurus QueryTracker 0.0.9版本通过新增功能、性能优化和稳定性修复,为大规模数据处理环境提供了更强大、更可靠的查询管理解决方案。这些改进将帮助用户更高效地管理和监控他们的数据处理任务。
atomcodeClaude Code 的开源替代方案。连接任意大模型,编辑代码,运行命令,自动验证 — 全自动执行。用 Rust 构建,极致性能。 | An open-source alternative to Claude Code. Connect any LLM, edit code, run commands, and verify changes — autonomously. Built in Rust for speed. Get StartedRust0199
cann-learning-hubCANN 学习中心仓,支持在线互动运行、边学边练,提供教程、示例与优化方案,一站式助力昇腾开发者快速上手。Jupyter Notebook0130
MiMo-V2.5-Pro-FP4-DFlashMiMo-V2.5-Pro-FP4-DFlash 是驱动 MiMo-V2.5-Pro-UltraSpeed 的底层模型: FP4 量化骨干网络:对 MoE 专家采用 MXFP4 量化,同时保持模型其他部分的更高精度,在几乎无损质量的前提下,显著减小模型体积并降低内存带宽压力。 BF16 DFlash 草稿生成器:用于块扩散推测解码,每次前向传播可生成一整个块的 tokens,并让骨干网络一步完成验证。 两者协同作用,既降低了每参数的位宽,又减少了骨干网络前向传播的次数,而这两者正是万亿参数模型解码过程中的两大主要成本来源。Python00
JoyAI-EchoJoyAI-Echo,这是一个独立的、仅用于推理的版本,旨在实现分钟级多镜头音视频生成。它采用了经过蒸馏的DMD生成器、配对的跨模态记忆以及故事级别的一致性。其性能的核心在于,一个跨模态视听记忆库能够在长达五分钟的视频中保持角色外观和语音音色的一致性。同时,一个训练后处理流程将基于记忆的强化学习与分布匹配蒸馏相结合,实现了7.5倍的速度提升,显著增强了视觉质量和对齐效果。00
AstrBot✨ 易上手的多平台 LLM 聊天机器人及开发框架 ✨ 平台支持 QQ、QQ频道、Telegram、微信、企微、飞书 | OpenAI、DeepSeek、Gemini、硅基流动、月之暗面、Ollama、OneAPI、Dify 等。附带 WebUI。Python08
handy-ollama动手学Ollama,CPU玩转大模型部署,在线阅读地址:https://datawhalechina.github.io/handy-ollama/Jupyter Notebook07