Створення голосової відповіді для клієнтів

Мультимодальні системи з OpenAI API

James Chapman

Curriculum Manager, DataCamp

План кейс-стаді

$$

$$

  • Переклад відповіді

$$

  • Перетворення тексту на аудіо

$$

План кейс-стаді

Мультимодальні системи з OpenAI API

Змінні для використання

$$

Визначена мова
print(language)
uk

$$

Згенерована відповідь
print(chatbot_reply)

Відповідь чатбота

Мультимодальні системи з OpenAI API

Переклад відповіді

response = client.chat.completions.create(
    model="gpt-4o-mini",
    messages=[
        {"role": "system", "content": f"""Translate the following text 
        from English to country code {language}. Only return the translated text!"""},
        {"role": "user", "content": chatbot_reply}
             ],
    max_completion_tokens=500)
Мультимодальні системи з OpenAI API

Переклад відповіді

# Extract and print the translated response
translated_reply = response.choices[0].message.content
print(translated_reply)

Перекладений результат

Мультимодальні системи з OpenAI API

Text-to-speech

response = client.audio.speech.create(
    model="gpt-4o-mini-tts",
    voice="onyx",
    input=translated_reply)

response.stream_to_file("audio_reply.mp3")

Голос Onyx як віртуальний помічник.

Мультимодальні системи з OpenAI API

Підсумок кейс-стаді

Кейс-стаді — повна версія

Мультимодальні системи з OpenAI API

Наступні кроки

Додаємо пам'ять до чатбота

Мультимодальні системи з OpenAI API

Давайте потренуємось!

Мультимодальні системи з OpenAI API

Preparing Video For Download...