OpenAI Transcriptions

Spring AI 支持 OpenAI 的转录模型

先决条件

您需要使用 OpenAI 创建 API密钥 来访问 ChatGPT 模型。

OpenAI 注册页面 创建帐户 并在API 密钥页面生成令牌。 Spring AI 项目定义了一个名为的配置属性,您应该将其设置为从 openai.com 获取的spring.ai.openai.api-key值。

导出环境变量是设置该配置属性的一种方法:

export SPRING_AI_OPENAI_API_KEY=<INSERT KEY HERE>

自动配置

Spring AI 为 OpenAI 聊天客户端提供 Spring Boot 自动配置。要启用它,请将以下依赖项添加到项目的 Maven pom.xml 文件中:

<dependency>
    <groupId>org.springframework.ai</groupId>
    <artifactId>spring-ai-openai-spring-boot-starter</artifactId>
</dependency>

或者,在你的 Gradle 构建文件 build.gradle 中添加:

dependencies {
    implementation 'org.springframework.ai:spring-ai-openai-spring-boot-starter'
}

转录配置

spring.ai.openai.audio.transcription 前缀的属性,可让您配置 OpenAI 的 OpenAiAudioTranscriptionClient 实现。

属性 描述 默认值
spring.ai.openai.audio.transcription.options.model 要使用的模型的 ID。目前仅提供 Whisper-1(由我们的开源 Whisper V2 模型提供支持)。 whisper-1
spring.ai.openai.audio.transcription.options.response-format 脚本输出的格式,采用以下选项之一:json、text、srt、verbose_json 或 vtt。 json
spring.ai.openai.audio.transcription.options.prompt 用于指导模型风格或继续之前的音频片段的可选文本。提示应与音频语言相匹配。
spring.ai.openai.audio.transcription.options.language 输入音频的语言。以 ISO-639-1 格式提供输入语言将提高准确性和延迟。
spring.ai.openai.audio.transcription.options.temperature 采样温度,介于 0 和 1 之间。较高的值(如 0.8)将使输出更加随机,而较低的值(如 0.2)将使其更加集中和确定性。如果设置为 0,模型将使用对数概率自动升高温度,直到达到特定阈值。 0
spring.ai.openai.audio.transcription.options.timestamp_granularities 为此转录填充的时间戳粒度。 response_format 必须设置 verbose_json 才能使用时间戳粒度。支持以下选项中的一个或两个:word 或 segment。注意:segment 时间戳没有额外的延迟,但生成字时间戳会产生额外的延迟。 segment

运行时选项

OpenAiAudioTranscriptionOptions 类提供了进行转录时使用的选项。

启动时,您可以可以使用 spring.ai.openai.audio.transcription 指定的选项,在运行时覆盖这些选项。

例如:

OpenAiAudioApi.TranscriptResponseFormat responseFormat = OpenAiAudioApi.TranscriptResponseFormat.VTT;

OpenAiAudioTranscriptionOptions transcriptionOptions = OpenAiAudioTranscriptionOptions.builder()
    .withLanguage("en")
    .withPrompt("Ask not this, but ask that")
    .withTemperature(0f)
    .withResponseFormat(responseFormat)
    .build();
AudioTranscriptionPrompt transcriptionRequest = new AudioTranscriptionPrompt(audioFile, transcriptionOptions);
AudioTranscriptionResponse response = openAiTranscriptionClient.call(transcriptionRequest);

手动配置

spring-ai-openai 依赖项添加到项目的 Maven pom.xml文件中:

<dependency>
    <groupId>org.springframework.ai</groupId>
    <artifactId>spring-ai-openai</artifactId>
</dependency>

或者,在你的 Gradle 构建文件 build.gradle 中添加:

dependencies {
    implementation 'org.springframework.ai:spring-ai-openai'
}

接下来,创建一个 OpenAiAudioTranscriptionClient 实例:

var openAiAudioApi = new OpenAiAudioApi(System.getenv("OPENAI_API_KEY"));

var openAiAudioTranscriptionClient = new OpenAiAudioTranscriptionClient(openAiAudioApi);

var transcriptionOptions = OpenAiAudioTranscriptionOptions.builder()
    .withResponseFormat(TranscriptResponseFormat.TEXT)
    .withTemperature(0f)
    .build();

var audioFile = new FileSystemResource("/path/to/your/resource/speech/jfk.flac");

AudioTranscriptionPrompt transcriptionRequest = new AudioTranscriptionPrompt(audioFile, transcriptionOptions);
AudioTranscriptionResponse response = openAiTranscriptionClient.call(transcriptionRequest);

示例代码

OpenAiTranscriptionClientIT.java 测试提供了一些如何使用该库的常规示例。

作者:Jeebiz  创建时间:2024-04-05 23:11
最后编辑:Jeebiz  更新时间:2024-07-06 19:00