首页
/ OmniXAI 使用教程

OmniXAI 使用教程

2024-09-14 03:45:14作者:廉皓灿Ida

1. 项目介绍

OmniXAI(全称 Omni eXplainable AI)是一个用于可解释人工智能(XAI)的 Python 库,旨在为数据科学家、机器学习研究人员和从业者提供一个全面的工具箱,以简化可解释 AI 的实现。OmniXAI 支持多种数据类型(如表格数据、图像、文本和时间序列)、多种机器学习模型(包括 Scikit-learn 中的传统模型和 PyTorch/TensorFlow 中的深度学习模型),并集成了多种解释方法,包括模型特定的和模型无关的解释方法(如特征归属解释、反事实解释、基于梯度的解释等)。

OmniXAI 的主要特点包括:

  • 支持多种数据类型和模型。
  • 提供统一的接口,方便用户生成解释。
  • 包含一个图形用户界面(GUI)仪表板,用于可视化解释结果。
  • 易于扩展,用户可以轻松添加新的解释方法。

2. 项目快速启动

安装

你可以通过 pip 安装 OmniXAI:

pip install omnixai

快速启动示例

以下是一个简单的示例,展示如何使用 OmniXAI 对表格数据进行解释。

from omnixai.data.tabular import Tabular
from omnixai.explainers.tabular import TabularExplainer
from omnixai.preprocessing.tabular import TabularTransform

# 加载数据集
feature_names = [
    "Age", "Workclass", "fnlwgt", "Education", "Education-Num", "Marital Status",
    "Occupation", "Relationship", "Race", "Sex", "Capital Gain", "Capital Loss",
    "Hours per week", "Country", "label"
]
df = pd.DataFrame(np.genfromtxt('adult.data', delimiter=' ', dtype=str), columns=feature_names)
tabular_data = Tabular(
    df,
    categorical_columns=[feature_names[i] for i in [1, 3, 5, 6, 7, 8, 9, 13]],
    target_column='label'
)

# 数据预处理
transformer = TabularTransform()
transformer.fit(tabular_data)
class_names = transformer.class_names
x = transformer.transform(tabular_data)

# 分割训练和测试数据集
train, test, train_labels, test_labels = \
    sklearn.model_selection.train_test_split(x[:, :-1], x[:, -1], train_size=0.80)

# 训练一个 XGBoost 模型
model = xgboost.XGBClassifier(n_estimators=300, max_depth=5)
model.fit(train, train_labels)

# 初始化 TabularExplainer
explainer = TabularExplainer(
    explainers=["lime", "shap", "mace", "pdp", "ale"],
    mode="classification",
    data=train_data,
    model=model,
    preprocess=lambda z: transformer.transform(z),
    params=[
        "mace": ["ignored_features": ["Sex", "Race", "Relationship", "Capital Loss"]]
    ]
)

# 生成解释
test_instances = test_data[:5]
local_explanations = explainer.explain(X=test_instances)
global_explanations = explainer.explain_global(
    params=["pdp": ["features": ["Age", "Education-Num", "Capital Gain", "Capital Loss", "Hours per week", "Education", "Marital Status", "Occupation"]]]
)

3. 应用案例和最佳实践

应用案例

OmniXAI 可以应用于多种场景,包括但不限于:

  • 表格数据分类:如收入预测、信用评分等。
  • 图像分类:如图像识别、目标检测等。
  • 文本分类:如情感分析、垃圾邮件检测等。
  • 时间序列分析:如异常检测、预测等。

最佳实践

  • 选择合适的解释方法:根据任务类型和数据特点选择合适的解释方法。例如,对于表格数据,可以使用 LIME 和 SHAP;对于图像数据,可以使用 Grad-CAM 和 Integrated Gradient。
  • 使用仪表板进行可视化:OmniXAI 提供了一个仪表板,可以直观地查看解释结果,帮助用户更好地理解模型的决策过程。
  • 扩展和定制:OmniXAI 设计灵活,用户可以根据需要添加新的解释方法或定制现有的解释方法。

4. 典型生态项目

OmniXAI 可以与其他开源项目结合使用,以增强其功能和应用范围。以下是一些典型的生态项目:

  • BentoML:用于模型部署和服务的开源框架,可以与 OmniXAI 结合,将解释器部署到生产环境中。
  • Scikit-learn:用于传统机器学习的库,OmniXAI 可以解释 Scikit-learn 中的模型。
  • PyTorch/TensorFlow:用于深度学习的库,OmniXAI 可以解释这些库中的模型,并提供基于梯度的解释方法。

通过结合这些生态项目,OmniXAI 可以更好地满足不同场景下的需求,提供更全面和强大的可解释 AI 解决方案。

热门项目推荐

项目优选

收起
Python-100-DaysPython-100-Days
Python - 100天从新手到大师
Python
263
53
国产编程语言蓝皮书国产编程语言蓝皮书
《国产编程语言蓝皮书》-编委会工作区
64
16
open-eBackupopen-eBackup
open-eBackup是一款开源备份软件,采用集群高扩展架构,通过应用备份通用框架、并行备份等技术,为主流数据库、虚拟化、文件系统、大数据等应用提供E2E的数据备份、恢复等能力,帮助用户实现关键数据高效保护。
HTML
85
63
openHiTLSopenHiTLS
旨在打造算法先进、性能卓越、高效敏捷、安全可靠的密码套件,通过轻量级、可剪裁的软件技术架构满足各行业不同场景的多样化要求,让密码技术应用更简单,同时探索后量子等先进算法创新实践,构建密码前沿技术底座!
C
53
44
Cangjie-ExamplesCangjie-Examples
本仓将收集和展示高质量的仓颉示例代码,欢迎大家投稿,让全世界看到您的妙趣设计,也让更多人通过您的编码理解和喜爱仓颉语言。
Cangjie
195
45
HarmonyOS-ExamplesHarmonyOS-Examples
本仓将收集和展示仓颉鸿蒙应用示例代码,欢迎大家投稿,在仓颉鸿蒙社区展现你的妙趣设计!
Cangjie
268
69
xxl-jobxxl-job
XXL-JOB是一个分布式任务调度平台,其核心设计目标是开发迅速、学习简单、轻量级、易扩展。现已开放源代码并接入多家公司线上产品线,开箱即用。
Java
9
0
RuoYi-VueRuoYi-Vue
🎉 基于SpringBoot,Spring Security,JWT,Vue & Element 的前后端分离权限管理系统,同时提供了 Vue3 的版本
Java
171
41
RuoYi-Cloud-Vue3RuoYi-Cloud-Vue3
🎉 基于Spring Boot、Spring Cloud & Alibaba、Vue3 & Vite、Element Plus的分布式前后端分离微服务架构权限管理系统
Vue
38
24
qwerty-learnerqwerty-learner
为键盘工作者设计的单词记忆与英语肌肉记忆锻炼软件 / Words learning and English muscle memory training software designed for keyboard workers
TSX
332
27