首页
/ Griptape框架v1.5.0版本发布:多模态嵌入与序列化增强

Griptape框架v1.5.0版本发布:多模态嵌入与序列化增强

2025-06-20 07:58:18作者:平淮齐Percy

Griptape是一个用于构建AI应用的Python框架,它提供了构建、编排和部署AI工作流所需的核心组件。该框架以其模块化设计和强大的功能集著称,支持从简单的提示工程到复杂的多步骤工作流等各种AI应用场景。

多模态嵌入支持

本次1.5.0版本最显著的改进之一是全面增强了多模态嵌入能力。框架现在支持对图像内容进行向量化处理,这为构建能够理解和处理视觉信息的AI系统奠定了基础。

具体实现上,框架扩展了EmbeddingDriver接口,新增了对ImageArtifact类型的支持。这意味着开发者现在可以将图片与文本一起嵌入到相同的向量空间中,实现跨模态的相似性搜索和检索。Titan和VoyageAI这两个嵌入驱动已率先实现了这一功能。

LocalVectorDriver也进行了相应升级,现在能够持久化存储包含多模态数据的向量条目。这一改进使得开发者可以在本地环境中构建完整的多模态应用,而无需依赖外部服务。

序列化系统增强

序列化是框架中一个关键但常被忽视的组件。1.5.0版本对序列化系统进行了重要改进,增加了serializable_overridestypes_overrides参数,为开发者提供了更精细的控制权。

这些新参数允许开发者在对象序列化为字典或JSON时,覆盖默认的序列化行为;在反序列化时,则可以指定自定义的类型映射。这一改进特别适合需要特殊序列化逻辑的复杂对象,或者在分布式系统中传递对象时保持类型信息的场景。

模型驱动更新

框架中的模型驱动也获得了多项更新:

  1. Gemini驱动配置现在默认使用gemini-2.0-flash作为提示驱动模型,这是一个更轻量级但性能优异的模型变体。嵌入驱动模型也同步更新至最新版本。

  2. Anthropic和Bedrock驱动配置更新了默认模型版本,确保开发者能够自动使用这些平台提供的最新和最强大的模型。

  3. 新增了PerplexityPromptDriver和PerplexityWebSearchDriver,为开发者提供了更多模型选择。

工具使用优化

PromptTask中新增了reflect_on_tool_use标志,允许开发者禁用LLM对工具使用的反思功能。这一改进为性能敏感型应用提供了优化空间,可以在不需要LLM自我评估的场景下减少计算开销。

开发者体验改进

本次更新还包括多项开发者体验的优化:

  1. 修复了Chunker在处理空块时的中点计算问题,提高了文本分块的准确性。

  2. 改进了OpenAIPromptDriver对GenericArtifacts的处理,现在会自动转换为文本而不是抛出错误,提高了兼容性。

  3. 向量驱动相关的元数据处理得到优化,避免了不必要的对象变更。

  4. 类型提示在@observable装饰器上得到保留,改善了代码的静态分析体验。

文档全面升级

框架文档在本版本中获得了显著改进:

  1. 新增了浅色/深色模式切换功能,提升了阅读体验。

  2. 重新组织了导航结构,驱动程序文档现在按类别分组,更易于查找。

  3. 增加了详细的序列化专题文档,帮助开发者更好地理解和使用这一核心功能。

  4. 示例代码现在都包含日志输出展示,使学习过程更加直观。

  5. 框架概述和入门指南内容得到扩充和优化,新用户能够更快上手。

依赖管理优化

框架放宽了依赖版本的上限约束,这一变化减少了与其他库的版本冲突可能性,使Griptape能够更灵活地集成到各种Python环境中。

总体而言,Griptape 1.5.0版本在多模态支持、序列化控制和开发者体验等方面都做出了重要改进,进一步巩固了其作为构建生产级AI应用首选框架的地位。特别是对图像嵌入的支持,为开发视觉相关的AI应用开辟了新的可能性。

登录后查看全文
热门项目推荐
相关项目推荐

项目优选

收起
kernelkernel
deepin linux kernel
C
27
11
docsdocs
OpenHarmony documentation | OpenHarmony开发者文档
Dockerfile
466
3.47 K
nop-entropynop-entropy
Nop Platform 2.0是基于可逆计算理论实现的采用面向语言编程范式的新一代低代码开发平台,包含基于全新原理从零开始研发的GraphQL引擎、ORM引擎、工作流引擎、报表引擎、规则引擎、批处理引引擎等完整设计。nop-entropy是它的后端部分,采用java语言实现,可选择集成Spring框架或者Quarkus框架。中小企业可以免费商用
Java
10
1
leetcodeleetcode
🔥LeetCode solutions in any programming language | 多种编程语言实现 LeetCode、《剑指 Offer(第 2 版)》、《程序员面试金典(第 6 版)》题解
Java
65
19
flutter_flutterflutter_flutter
暂无简介
Dart
715
172
giteagitea
喝着茶写代码!最易用的自托管一站式代码托管平台,包含Git托管,代码审查,团队协作,软件包和CI/CD。
Go
23
0
kernelkernel
openEuler内核是openEuler操作系统的核心,既是系统性能与稳定性的基石,也是连接处理器、设备与服务的桥梁。
C
203
82
RuoYi-Vue3RuoYi-Vue3
🎉 (RuoYi)官方仓库 基于SpringBoot,Spring Security,JWT,Vue3 & Vite、Element Plus 的前后端分离权限管理系统
Vue
1.27 K
695
rainbondrainbond
无需学习 Kubernetes 的容器平台,在 Kubernetes 上构建、部署、组装和管理应用,无需 K8s 专业知识,全流程图形化管理
Go
15
1
apintoapinto
基于golang开发的网关。具有各种插件,可以自行扩展,即插即用。此外,它可以快速帮助企业管理API服务,提高API服务的稳定性和安全性。
Go
22
1