Azure OpenAI Python 企业日志项目教程
2024-09-12 06:58:50作者:滑思眉Philip
项目介绍
openai-python-enterprise-logging 是一个开源项目,旨在为使用 Azure OpenAI 的企业提供全面的日志记录功能。该项目框架集成了最新的 OpenAI 库,支持企业级日志记录,包括 OpenAI 使用指标、提示输入、用户统计和提示响应等。通过该项目的实施,企业可以确保其 OpenAI 模型的使用符合企业政策和合规要求。
项目快速启动
前提条件
在开始之前,请确保您已经具备以下条件:
- Azure 订阅
- Azure OpenAI 应用程序
安装和配置
-
克隆项目仓库
git clone https://github.com/Azure-Samples/openai-python-enterprise-logging.git cd openai-python-enterprise-logging -
安装依赖
pip install -r requirements.txt -
配置 Azure OpenAI 在 Azure 门户中创建一个 Azure OpenAI 资源,并部署您选择的模型。
-
配置 Azure Key Vault 创建一个 Azure Key Vault 资源,并将 Azure OpenAI 实例的 Key1 添加为密钥。
-
配置 API 管理 通过 Azure 门户配置 API 管理服务,并按照文档设置访问权限和后端服务。
示例代码
以下是一个简单的示例代码,展示了如何使用该项目记录 OpenAI 的完成请求:
import openai
openai.api_type = "azure"
openai.api_base = "https://xxxxxxxxx.azure-api.net/" # APIM Endpoint
openai.api_version = "2023-05-15"
openai.api_key = "APIM SUBSCRIPTION KEY" # DO NOT USE ACTUAL AZURE OPENAI SERVICE KEY
response = openai.Completion.create(
engine="modelname",
prompt="prompt text",
temperature=1,
max_tokens=200,
top_p=0.5,
frequency_penalty=0,
presence_penalty=0,
stop=None
)
print(response)
应用案例和最佳实践
应用案例
- 企业内部使用:企业可以使用该项目来监控和记录内部员工对 OpenAI 模型的使用情况,确保合规性和数据安全。
- 高可用性需求:通过配置多个 Azure OpenAI 实例,企业可以确保在流量高峰期或单点故障时,服务仍然可用。
最佳实践
- 日志记录策略:确保所有关键操作和用户交互都被记录,以便后续审计和分析。
- 安全配置:使用 Azure Key Vault 和 API 管理来保护敏感数据和 API 密钥。
- 性能监控:定期检查日志以监控模型性能和使用情况,及时调整资源分配。
典型生态项目
- Azure API Management:用于管理和保护 OpenAI API 的访问。
- Azure Monitor:用于监控和分析 OpenAI 模型的使用情况。
- Azure Key Vault:用于安全存储和管理 API 密钥。
- Azure Virtual Network:用于确保所有网络流量通过私有网络进行,增强安全性。
通过这些生态项目的集成,企业可以构建一个安全、可靠且易于管理的 OpenAI 使用环境。
登录后查看全文
热门项目推荐
atomcodeClaude Code 的开源替代方案。连接任意大模型,编辑代码,运行命令,自动验证 — 全自动执行。用 Rust 构建,极致性能。 | An open-source alternative to Claude Code. Connect any LLM, edit code, run commands, and verify changes — autonomously. Built in Rust for speed. Get StartedRust0237
GLM-5.2智谱开源 GLM-5.2,这是针对长文本任务的最新旗舰模型。相较于前代产品 GLM-5.1,它在长文本任务处理能力上实现了显著飞跃,并且首次在稳定的 100 万 token 上下文中提供这一能力。Jinja00
JoyAI-VL-Interaction-Preview京东开源首个开源、视觉驱动的实时交互模型——它能实时监控视频流,并自主决定何时发言、保持沉默或委托任务。Jinja00
cann-learning-hubCANN 学习中心仓,支持在线互动运行、边学边练,提供教程、示例与优化方案,一站式助力昇腾开发者快速上手。Jupyter Notebook0165
kornia🐍 空间人工智能的几何计算机视觉库Python02
PaddleParallel Distributed Deep Learning: Machine Learning Framework from Industrial Practice (『飞桨』核心框架,深度学习&机器学习高性能单机、分布式训练和跨平台部署)C++02
热门内容推荐
最新内容推荐
项目优选
收起
暂无描述
Dockerfile
783
5.13 K
本项目是CANN提供的transformer类大模型算子库,实现网络在NPU上加速计算。
C++
893
2.06 K
Ascend Extension for PyTorch
Python
764
983
本项目是CANN提供的神经网络类计算算子库,实现网络在NPU上加速计算。
C++
713
1.44 K
deepin linux kernel
C
32
16
openEuler内核是openEuler操作系统的核心,既是系统性能与稳定性的基石,也是连接处理器、设备与服务的桥梁。
C
471
477
CANN 学习中心仓,支持在线互动运行、边学边练,提供教程、示例与优化方案,一站式助力昇腾开发者快速上手。
Jupyter Notebook
468
165
本项目是CANN提供的数学类基础计算算子库,实现网络在NPU上加速计算。
C++
1.11 K
1.16 K
JiuwenSwarm 是一款基于openJiuwen开发的智能AI Agent,它能够将大语言模型的强大能力,通过你日常使用的各类通讯应用,直接延伸至你的指尖。
Python
2.42 K
683
昇腾LLM分布式训练框架
Python
187
239