首页
/ Griptape框架v1.5.0版本发布:多模态嵌入与序列化增强

Griptape框架v1.5.0版本发布:多模态嵌入与序列化增强

2025-06-20 18:31:47作者:平淮齐Percy

Griptape是一个用于构建AI应用的Python框架,它提供了构建、编排和部署AI工作流所需的核心组件。该框架以其模块化设计和强大的功能集著称,支持从简单的提示工程到复杂的多步骤工作流等各种AI应用场景。

多模态嵌入支持

本次1.5.0版本最显著的改进之一是全面增强了多模态嵌入能力。框架现在支持对图像内容进行向量化处理,这为构建能够理解和处理视觉信息的AI系统奠定了基础。

具体实现上,框架扩展了EmbeddingDriver接口,新增了对ImageArtifact类型的支持。这意味着开发者现在可以将图片与文本一起嵌入到相同的向量空间中,实现跨模态的相似性搜索和检索。Titan和VoyageAI这两个嵌入驱动已率先实现了这一功能。

LocalVectorDriver也进行了相应升级,现在能够持久化存储包含多模态数据的向量条目。这一改进使得开发者可以在本地环境中构建完整的多模态应用,而无需依赖外部服务。

序列化系统增强

序列化是框架中一个关键但常被忽视的组件。1.5.0版本对序列化系统进行了重要改进,增加了serializable_overridestypes_overrides参数,为开发者提供了更精细的控制权。

这些新参数允许开发者在对象序列化为字典或JSON时,覆盖默认的序列化行为;在反序列化时,则可以指定自定义的类型映射。这一改进特别适合需要特殊序列化逻辑的复杂对象,或者在分布式系统中传递对象时保持类型信息的场景。

模型驱动更新

框架中的模型驱动也获得了多项更新:

  1. Gemini驱动配置现在默认使用gemini-2.0-flash作为提示驱动模型,这是一个更轻量级但性能优异的模型变体。嵌入驱动模型也同步更新至最新版本。

  2. Anthropic和Bedrock驱动配置更新了默认模型版本,确保开发者能够自动使用这些平台提供的最新和最强大的模型。

  3. 新增了PerplexityPromptDriver和PerplexityWebSearchDriver,为开发者提供了更多模型选择。

工具使用优化

PromptTask中新增了reflect_on_tool_use标志,允许开发者禁用LLM对工具使用的反思功能。这一改进为性能敏感型应用提供了优化空间,可以在不需要LLM自我评估的场景下减少计算开销。

开发者体验改进

本次更新还包括多项开发者体验的优化:

  1. 修复了Chunker在处理空块时的中点计算问题,提高了文本分块的准确性。

  2. 改进了OpenAIPromptDriver对GenericArtifacts的处理,现在会自动转换为文本而不是抛出错误,提高了兼容性。

  3. 向量驱动相关的元数据处理得到优化,避免了不必要的对象变更。

  4. 类型提示在@observable装饰器上得到保留,改善了代码的静态分析体验。

文档全面升级

框架文档在本版本中获得了显著改进:

  1. 新增了浅色/深色模式切换功能,提升了阅读体验。

  2. 重新组织了导航结构,驱动程序文档现在按类别分组,更易于查找。

  3. 增加了详细的序列化专题文档,帮助开发者更好地理解和使用这一核心功能。

  4. 示例代码现在都包含日志输出展示,使学习过程更加直观。

  5. 框架概述和入门指南内容得到扩充和优化,新用户能够更快上手。

依赖管理优化

框架放宽了依赖版本的上限约束,这一变化减少了与其他库的版本冲突可能性,使Griptape能够更灵活地集成到各种Python环境中。

总体而言,Griptape 1.5.0版本在多模态支持、序列化控制和开发者体验等方面都做出了重要改进,进一步巩固了其作为构建生产级AI应用首选框架的地位。特别是对图像嵌入的支持,为开发视觉相关的AI应用开辟了新的可能性。

登录后查看全文
热门项目推荐

热门内容推荐

项目优选

收起
ohos_react_nativeohos_react_native
React Native鸿蒙化仓库
C++
179
263
RuoYi-Vue3RuoYi-Vue3
🎉 (RuoYi)官方仓库 基于SpringBoot,Spring Security,JWT,Vue3 & Vite、Element Plus 的前后端分离权限管理系统
Vue
871
515
openGauss-serveropenGauss-server
openGauss kernel ~ openGauss is an open source relational database management system
C++
130
184
openHiTLSopenHiTLS
旨在打造算法先进、性能卓越、高效敏捷、安全可靠的密码套件,通过轻量级、可剪裁的软件技术架构满足各行业不同场景的多样化要求,让密码技术应用更简单,同时探索后量子等先进算法创新实践,构建密码前沿技术底座!
C
345
378
Cangjie-ExamplesCangjie-Examples
本仓将收集和展示高质量的仓颉示例代码,欢迎大家投稿,让全世界看到您的妙趣设计,也让更多人通过您的编码理解和喜爱仓颉语言。
Cangjie
333
1.09 K
harmony-utilsharmony-utils
harmony-utils 一款功能丰富且极易上手的HarmonyOS工具库,借助众多实用工具类,致力于助力开发者迅速构建鸿蒙应用。其封装的工具涵盖了APP、设备、屏幕、授权、通知、线程间通信、弹框、吐司、生物认证、用户首选项、拍照、相册、扫码、文件、日志,异常捕获、字符、字符串、数字、集合、日期、随机、base64、加密、解密、JSON等一系列的功能和操作,能够满足各种不同的开发需求。
ArkTS
30
0
CangjieCommunityCangjieCommunity
为仓颉编程语言开发者打造活跃、开放、高质量的社区环境
Markdown
1.08 K
0
kernelkernel
deepin linux kernel
C
22
5
WxJavaWxJava
微信开发 Java SDK,支持微信支付、开放平台、公众号、视频号、企业微信、小程序等的后端开发,记得关注公众号及时接受版本更新信息,以及加入微信群进行深入讨论
Java
829
22
cherry-studiocherry-studio
🍒 Cherry Studio 是一款支持多个 LLM 提供商的桌面客户端
TypeScript
601
58