Spring AI 整体介绍_关键组件快速入门_prompt_embedding等

Spring AI:Java开发者的AI集成新利器

在过去,Java开发者在构建AI应用时面临着缺乏统一框架的问题,导致不同AI服务的集成过程复杂且耗时。Spring AI应运而生,旨在为基于Java的应用程序提供一个标准化、高效且易于使用的AI开发平台。它继承了Spring生态系统的设计原则,如可移植性和模块化,使得开发者能够利用熟悉的POJOs(Plain Old Java Objects)来快速搭建智能应用。通过Spring AI,开发者只需编写一次代码,就能轻松切换不同的AI服务提供商,极大简化了项目迁移和技术栈升级的过程。此外,Spring AI还提供了对多种生成式AI模型的支持,包括文本生成、图像处理等,并引入了诸如Prompt Template等功能以增强人机交互体验,完美融合了现代AI技术与传统的Java面向对象编程范式。

Spring AI核心能力概览

Spring AI 拥有以下主要能力,这些能力旨在简化AI应用的开发过程,并确保开发者能够高效地利用不同AI服务和模型。

关键概念一句话介绍:

模型(Model)

一句话说明:支持多种生成式模型的接入与切换。

  • 输入:用户提供的文本、图片或语音等数据。

  • 输出:基于所选模型生成的对应类型的数据,如对话回复、图片或语音文件。

  • 关键要素:支持阿里云通义系列模型,包括但不限于对话、文生图、文生语音等。

提示(Prompt)与提示词模板(Prompt Template)

一句话说明:通过预定义的模板生成特定格式的提示,以指导模型产生期望的结果。

  • 输入:动态参数值。

  • 输出:根据模板生成的具体提示字符串。

  • 关键要素:使用@Value加载模板文件,并通过PromptTemplate.create()方法结合实际参数生成最终的提示。

嵌入(Embedding)

一句话说明:将文本转换成固定长度的向量表示。

  • 输入:任意长度的文本。

  • 输出:一个定长的浮点数数组。

  • 关键要素:适用于需要进行语义相似度计算或分类任务的场景,虽然在提供的资料中没有直接提及,但这是许多AI框架的基本功能之一。

结构化输出(Structured Output)

一句话说明:从模型返回的非结构化文本中提取结构化信息。

  • 输入:模型产生的原始输出。

  • 输出:按照预设格式组织好的结构化数据。

  • 关键要素:利用OutputParser实现自动从字符串到POJO对象的映射,简化了后续处理步骤。

检索增强生成(RAG)

一句话说明:结合外部知识库检索和生成模型,提供更准确的答案。

  • 输入:查询请求以及相关文档内容。

  • 输出:基于检索结果和上下文生成的回答。

  • 关键要素:需设置VectorStore用于存储和检索向量表示的知识项,同时配置DocumentRetriever以获取最相关的文档片段。

函数调用(Function Calling)

一句话说明:允许模型调用外部定义的功能,以执行特定的任务。

  • 输入:符合函数签名要求的参数。

  • 输出:函数执行后的返回值。

  • 关键要素:定义Java函数并通过@Bean注解注册,然后在聊天时告知模型可用的功能列表,模型将决定何时调用它们。

向量存储

一句话说明:为RAG等高级特性提供必要的基础设施支持。

  • 输入:待索引的文档或其他形式的数据。

  • 输出:可被快速检索的向量数据库条目。

  • 关键要素:向量相似度作为Key的一个key value存储 ,负责管理所有已索引项目的向量表示。

Spring Cloud Alibaba子项目:AI集成利器

Spring AI Alibaba是Spring Cloud Alibaba的一个子项目,专为集成AI能力而设计。它基于Spring生态系统的设计原则,旨在简化与不同AI提供商(如阿里云、OpenAI等)的接口对接过程。通过Spring AI Alibaba,开发者可以实现一次编码、多模型支持的目标,只需调整配置即可切换不同的AI服务提供者。其核心优势在于标准化了各种AI服务的调用方式,极大降低了开发和迁移成本。此外,Spring AI Alibaba还支持流式输出及多种实用功能,如Prompt Template、OutputParser等,进一步丰富了应用开发的可能性。

Spring AI Alibaba打造聊天应用详细体感例子

为了实现一个基于Spring AI Alibaba、支持Prompt和流式返回的聊天API,您需要遵循以下步骤。这些步骤将指导您从环境配置到具体代码实现,以确保可以成功集成Spring AI Alibaba完成目标功能。

1. 确认开发环境
  • JDK版本:至少为JDK 17。
  • Spring Boot版本:推荐使用3.3.x或更高版本。
2. 在阿里云申请通义千问的API Key

访问阿里云百炼页面,登录账号并按照指引开通“百炼大模型推理”服务。获取API Key后,请妥善保存,因为后续配置中需要用到它。

3. 配置系统变量

在本地环境中设置AI_DASHSCOPE_API_KEY环境变量,并将其值设为您刚才获得的API Key。例如,在Linux或MacOS上,您可以运行:

export AI_DASHSCOPE_API_KEY=您的API-Key

同时,通过application.properties文件注入此API Key:

spring.ai.dashscope.api-key=${AI_DASHSCOPE_API_KEY}
4. 添加Maven仓库与依赖

由于Spring AI Alibaba当前版本可能未被添加至主流Maven仓库,因此需额外指定Spring官方的仓库地址。在您的pom.xml中加入如下配置:

<repositories>
    <repository>
        <id>sonatype-snapshots</id>

        <url>https://oss.sonatype.org/content/repositories/snapshots</url>

        <snapshots>
            <enabled>true</enabled>

        </snapshots>

    </repository>

    <repository>
        <id>spring-milestones</id>

        <name>Spring Milestones</name>

        <url>https://repo.spring.io/milestone</url>

        <snapshots>
            <enabled>false</enabled>

        </snapshots>

    </repository>

    <repository>
        <id>spring-snapshots</id>

        <name>Spring Snapshots</name>

        <url>https://repo.spring.io/snapshot</url>

        <releases>
            <enabled>false</enabled>

        </releases>

    </repository>

</repositories>

接着,添加对spring-ai-alibaba-starter及其所需其他依赖项的支持:

<dependencies>
    <dependency>
        <groupId>com.alibaba.cloud.ai</groupId>

        <artifactId>spring-ai-alibaba-starter</artifactId>

        <version>1.0.0-M2</version>

    </dependency>

    <!-- Spring Boot starter web for REST API -->
    <dependency>
        <groupId>org.springframework.boot</groupId>

        <artifactId>spring-boot-starter-web</artifactId>

    </dependency>

</dependencies>
5. 创建ChatController处理请求

定义一个ChatController类来处理用户的输入,并利用ChatClient进行响应。这里展示了一个基本示例,包括如何使用Prompt模板以及如何流式地返回结果给客户端。

@RestController
@RequestMapping("/chat")
public class ChatController {

    private final ChatClient chatClient;
    @Value("classpath:prompt-template.st")
    private Resource promptResource;

    public ChatController(ChatClient.Builder builder) {
        this.chatClient = builder.build();
    }

    @GetMapping(value = "/stream", produces = MediaType.TEXT_EVENT_STREAM_VALUE)
    public Flux<String> chatStream(@RequestParam String input) {
        PromptTemplate promptTemplate = new PromptTemplate(promptResource);
        Prompt prompt = promptTemplate.create(Map.of("input", input));
        return chatClient.prompt(prompt).stream().content();
    }
}

其中,prompt-template.st是放置在src/main/resources下的提示词模板文件,内容如下所示:

You are a helpful assistant. Respond to the following message:
{input}
6. 启动应用

现在,您已经完成了所有必要的配置与编码工作。启动您的Spring Boot应用程序,并通过访问http://localhost:8080/chat/stream?input=您的消息来测试您的聊天API是否按预期工作。

以上步骤详尽地介绍了如何构建一个具备Prompt处理能力并且能够以流形式返回聊天结果的应用程序。确保每一步都准确无误地执行,特别是环境变量设置和依赖管理部分,这对于项目的顺利运行至关重要。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:/a/893657.html

如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈qq邮箱809451989@qq.com,一经查实,立即删除!

相关文章

用PHP爬虫API数据获取商品SKU信息实战指南

在电子商务的精细化运营中&#xff0c;SKU&#xff08;Stock Keeping Unit&#xff0c;库存单位&#xff09;信息是商品管理的核心。它不仅包含了商品的规格、价格、库存等关键数据&#xff0c;还直接影响到库存管理、价格策略和市场分析等多个方面。本文将介绍如何使用PHP爬虫…

Java程序设计:spring boot(3)——spring boot核心配置

目录 1 设置 Banner 图标 1.1 Banner 图标⾃定义 1.2 Banner 图标关闭 2 Spring Boot 配置⽂件 3 Starter 坐标 & ⾃动化配置 3.1 Starter坐标配置 3.1.1 Web starter 3.1.2 Freemarker Starter & Thymeleaf starter 3.1.3 JavaMail邮件发送 Starter 3.1.4 引…

mysql--表的约束

目录 理解表的约束和操作 如何理解&#xff1f; 1、空属性null 2、默认值default 3、列描述comment 4、自动填充zorefill 5、主键primary key &#xff08;1&#xff09;创建表时指定可以 &#xff08;2&#xff09;创建表后指定key &#xff08;3&#xff09;删除主…

注册函数和回调函数使用讲解

1.概念 注册和回调函数在C语言编程中非常常见&#xff0c;也经常用到。注册和回调的机制也大量使用在Linux内核中。学会使用注册和回调函数是C语言开发者应当掌握的一项编程技能。 函数的本质在内存上体现的是地址。我们知道函数的地址后&#xff0c;就能够调用这个函数。 …

ESP32移植Openharmony外设篇(1)MQ-2烟雾传感器

外设篇 实验箱介绍 旗舰版实验箱由2部分组成&#xff1a;鸿蒙外设模块&#xff08;支持同时8个工作&#xff09;、鸿蒙平板。 其中&#xff0c;鸿蒙平板默认采用RK3566方案。 OpenHarmony外设模块采用底板传感器拓展板方式&#xff0c;底板默认采用ESP32方案&#xff0c;也…

部署Qwen2.5-7b大模型详解

部署Qwen2.5-7b大模型详解 本文参考教程&#xff1a;https://qwen.readthedocs.io/en/latest/getting_started/quickstart.html 下载模型 https://modelscope.cn/organization/qwen 搜索 qwen2.5-7b 可以看到它提供了六个模型&#xff0c;以满足不同的需求&#xff0c;从下…

HBuilder X中搭建Vue-cli项目组件和路由以及UI库使用(二)

一、创建组件 &#xff08;1&#xff09;在vj1项目src|右键|vue文件 &#xff08;2&#xff09;组件常用模版 <!--该标签用于写HTML代码,必须有一个根标签,如下<div>是根标签--> <template> <div>首页</div> </template><!--该标签用…

c++算法第3天

本篇文章包含三道算法题&#xff0c;难度由浅入深&#xff0c;适合新手练习哟 目录 第一题 题目链接 题目解析 代码原理 代码编写 本题总结 第二题 题目链接 题目解析 代码原理 代码编写 第三题 题目链接 题目解析 代码原理 代码编写 第一题 题目链接 [NOIP2…

【word】页眉横线无法取消

小伙伴们日常想在页眉里加横线&#xff0c;直接双击页眉&#xff0c;然后在页眉横线里选择自己喜欢的横线样式就可以了。 但今天我遇到的这个比较奇特&#xff0c;有些页有这个横线&#xff0c;有些页没有&#xff0c;就很奇怪。 最后排查完&#xff0c;发现是只有标题2的页…

拓数派创始人冯雷出席联合国人居署《未来城市顾问展望2024》 报告结题专家会

近日&#xff0c;联合国人居署中国未来城市顾问委员会在内蒙古鄂尔多斯市国际会展中心召开《未来城市顾问展望2024&#xff1a;数字城市治理》报告结题会暨走进鄂尔多斯市活动。拓数派创始人、董事长兼首席执行官冯雷&#xff08;Ray Von&#xff09;应邀出席本次活动&#xff…

《计算机视觉》—— 疲劳检测

文章目录 一、疲劳检测实现的思想二、代码实现 一、疲劳检测实现的思想 了解以下几篇文章有助于了解疲劳检测的方法 基于dlib库的人脸检测 https://blog.csdn.net/weixin_73504499/article/details/142977202?spm1001.2014.3001.5501 基于dlib库的人脸关键点定位 https://blo…

个人博客搭建 | Hexo框架

文章目录 1.Hexo安装2.创建博客3.将博客通过GitHub来部署4.更换主题 1.Hexo安装 Hexo 是一个快速、简洁且高效的博客框架。Hexo 使用 Markdown&#xff08;或其他标记语言&#xff09;解析文章&#xff0c;在几秒内&#xff0c;即可利用靓丽的主题生成静态网页。搭建Hexo首先要…

基于vue框架的的大连金州红星社区物业管理系统dg6co(程序+源码+数据库+调试部署+开发环境)系统界面在最后面。

系统程序文件列表 项目功能&#xff1a;楼栋信息,住户,社区投诉,设备报修,报修完成,车位信息,缴费信息,房屋信息,维修工,保安,来访人员,缴费申诉,公共设备,设备类型,消防设备,公共场地 开题报告内容 基于Vue框架的大连金州红星社区物业管理系统的设计与实现开题报告 一、研究…

如果使用 Iptables 配置端口转发 ?

现实生活中&#xff0c;港口转发就像在一个大型公寓大楼里告诉送货司机该去哪里。通常情况下&#xff0c;该建筑群的正门是不对外开放的。但如果里面有人想要快递&#xff0c;他们可以告诉保安让司机进来&#xff0c;并指引他们到特定的公寓。 类似地&#xff0c;在计算机网络…

Android复杂问题分析工具bugreportz详解

文章目录 bugreportz详细介绍功能与作用使用方法生成详细报告检查进度bugreportz 的优势分析报告 如何分析1. 解压 ZIP 文件2. 分析主要文件2.1 bugreport.txt2.2 logcat.txt2.3 kernel.log / last_kmsg2.4 events.log2.5 traces.txt2.6 dumpstate_board.txt 3. 工具支持4. 重点…

Axure重要元件三——中继器添加数据

亲爱的小伙伴&#xff0c;在您浏览之前&#xff0c;烦请关注一下&#xff0c;在此深表感谢&#xff01; 本节课&#xff1a;中继器添加数据 课程内容&#xff1a;添加数据项、自动添加序号、自动添加数据汇总 应用场景&#xff1a;表单数据的添加 案例展示&#xff1a; 步骤…

SpringColoud GateWay 核心组件

优质博文&#xff1a;IT-BLOG-CN 【1】Route路由&#xff1a; Gateway的基本构建模块&#xff0c;它由ID、目标URL、断言集合和过滤器集合组成。如果聚合断言结果为真&#xff0c;则匹配到该路由。 Route路由-动态路由实现原理&#xff1a; 配置变化Apollo 服务地址实例变化…

No.17 笔记 | XXE漏洞:XML外部实体注入攻击

1. XXE漏洞概览 XXE&#xff08;XML External Entity&#xff09;是一种允许攻击者干扰应用程序对XML输入处理的漏洞。 1.1 XXE漏洞比喻 想象XML解析器是一个听话的机器人&#xff0c;而XXE就是利用这个机器人的"过分听话"来获取不应该获取的信息。 1.2 XXE漏洞危…

vue综合指南(六)

​&#x1f308;个人主页&#xff1a;前端青山 &#x1f525;系列专栏&#xff1a;Vue篇 &#x1f516;人终将被年少不可得之物困其一生 依旧青山,本期给大家带来Vuet篇专栏内容:vue综合指南 目录 101、Vue 框架怎么实现对象和数组的监听&#xff1f; 102、Proxy 与 Object.d…

运营商DNS vs 公共DNS,IT运维的你选对了吗?

在IT运维中&#xff0c;选择运营商DNS还是公共DNS是一个需要综合考虑多方面因素的决策。 一、运营商DNS 优点 1. 速度与可用性&#xff1a; • 运营商DNS服务器通常部署在本地或邻近地区&#xff0c;因此能够提供较低的延迟和更快的解析速度。 • 运营商通常会投入大量资源来…