ScubaGear项目优化:替换Entra Id导出提供程序以提高性能
背景与动机
在ScubaGear项目中,Entra Id(原Azure AD)提供程序是M365服务审计过程中性能最慢的组件。随着项目的发展,团队发现通过直接调用Graph REST API而非使用PowerShell模块中的cmdlets,可以显著提升执行效率。这不仅改善了终端用户体验,还能加速自动化流程(如GitHub Actions),同时减少了开发人员的等待时间。
技术实现方案
现有问题分析
当前实现中,ScubaGear使用了三个Microsoft Graph PowerShell模块:
- Microsoft.Graph.Beta.Identity.SignIns
- Microsoft.Graph.Beta.Users
- Microsoft.Graph.Beta.Groups
这些模块虽然功能完善,但在性能上存在瓶颈。通过分析发现,直接调用底层Graph REST API可以绕过中间层,获得更快的响应速度。
改造方案
-
识别替换目标:首先需要扫描ExportAADProvider.psm1文件,确定需要替换的cmdlets
-
建立映射关系:为每个cmdlet确定对应的Graph REST URI,例如:
- Get-MgBetaUser → /beta/users/{id}
- Get-MgBetaRoleManagementDirectoryRoleEligibilityScheduleInstance → /beta/roleManagement/directory/roleEligibilityScheduleInstances
-
实现调用转换:将原有的cmdlet调用替换为自定义函数Invoke-GraphDirectly
-
数据结构适配:由于REST API返回的字段命名与cmdlet返回对象不同(主要是首字母大小写差异),需要调整代码中对这些字段的引用
-
测试保障:需要同步更新Rego规则集、单元测试和PowerShell测试,确保功能完整性
具体实现示例
以替换Get-MgBetaUser为例:
- 首先在$GraphEndpoints哈希表中添加映射:
$GraphEndpoints = @{
"Get-MgBetaUser" = "/beta/users"
# 其他映射...
}
- 然后修改原有调用代码:
$graphArgs = @{
"commandlet" = "Get-MgBetaUser"
"queryParams" = @{'$UserId' = $ObjectId}
"M365Environment" = $M365Environment
}
$AADUser = Invoke-GraphDirectly @graphArgs
- 注意字段名调整:
- DisplayName → displayName
- OnPremisesImmutableId → onPremisesImmutableId
技术挑战与解决方案
字段命名差异处理
REST API返回的JSON属性通常采用camelCase命名规范,而PowerShell cmdlet返回的对象属性则采用PascalCase。这种差异需要在代码转换时特别注意,确保所有引用点都得到更新。
依赖管理
完成替换后,可以从RequiredVersions.ps1中移除不再需要的PowerShell模块依赖,简化项目部署环境。
测试验证
为确保改造不影响现有功能,需要:
- 更新Rego规则集中引用的字段名
- 修改对应的单元测试
- 进行端到端的功能验证
预期收益
通过这项改造,预计将带来以下改进:
- 执行速度提升30-50%
- 减少内存占用(避免加载完整PowerShell模块)
- 简化部署依赖
- 提高代码可维护性(直接与底层API交互)
总结
ScubaGear项目通过优化Entra Id导出提供程序的实现方式,展示了如何通过技术重构提升系统性能。这种从高层封装到底层API的直接调用转变,不仅适用于此特定场景,也为类似项目提供了性能优化的参考模式。关键在于保持功能一致性的同时,通过技术选型和实现方式的调整获得性能提升。
Kimi-K2.5Kimi K2.5 是一款开源的原生多模态智能体模型,它在 Kimi-K2-Base 的基础上,通过对约 15 万亿混合视觉和文本 tokens 进行持续预训练构建而成。该模型将视觉与语言理解、高级智能体能力、即时模式与思考模式,以及对话式与智能体范式无缝融合。Python00
GLM-4.7-FlashGLM-4.7-Flash 是一款 30B-A3B MoE 模型。作为 30B 级别中的佼佼者,GLM-4.7-Flash 为追求性能与效率平衡的轻量化部署提供了全新选择。Jinja00
VLOOKVLOOK™ 是优雅好用的 Typora/Markdown 主题包和增强插件。 VLOOK™ is an elegant and practical THEME PACKAGE × ENHANCEMENT PLUGIN for Typora/Markdown.Less00
PaddleOCR-VL-1.5PaddleOCR-VL-1.5 是 PaddleOCR-VL 的新一代进阶模型,在 OmniDocBench v1.5 上实现了 94.5% 的全新 state-of-the-art 准确率。 为了严格评估模型在真实物理畸变下的鲁棒性——包括扫描伪影、倾斜、扭曲、屏幕拍摄和光照变化——我们提出了 Real5-OmniDocBench 基准测试集。实验结果表明,该增强模型在新构建的基准测试集上达到了 SOTA 性能。此外,我们通过整合印章识别和文本检测识别(text spotting)任务扩展了模型的能力,同时保持 0.9B 的超紧凑 VLM 规模,具备高效率特性。Python00
KuiklyUI基于KMP技术的高性能、全平台开发框架,具备统一代码库、极致易用性和动态灵活性。 Provide a high-performance, full-platform development framework with unified codebase, ultimate ease of use, and dynamic flexibility. 注意:本仓库为Github仓库镜像,PR或Issue请移步至Github发起,感谢支持!Kotlin07
compass-metrics-modelMetrics model project for the OSS CompassPython00