Edge-TTS在广电系统中的语音合成技术的创新应用

作者：本人是一名县级融媒体中心的工程师，多年来一直坚持学习、提升自己。喜欢Python编程、人工智能、网络安全等多领域的技术。

摘要

随着人工智能技术的快速发展，文字转语音（Text-to-Speech, TTS）系统已成为多种应用的重要组成部分，尤其在广播电视领域。本文介绍了一种基于Edge-TTS大模型的文字转语音工具，该工具结合了现代文本处理和语音合成技术，为用户提供了高效的音频生成解决方案。通过对该工具的设计与实现进行分析，本文探讨了其在广播电视行业中的潜在应用场景及未来发展方向。

引言

文字转语音技术使得计算机能够将书面文字转换为自然的人声，这对于广播电视行业至关重要。它可以用于生成新闻播报、广告配音、教育培训等多种场景，以提高信息传达的效率和生动性。随着神经网络技术的发展，现代TTS模型已经能够生成接近人类自然声音质量的语音。

Edge-TTS 模型介绍

Edge-TTS是一个基于微软 Azure Cognitive Services 的开源文本转语音（Text-to-Speech，TTS）工具，它利用微软的语音合成技术，将文本转换为自然流畅的语音输出。以下是关于 Edge-TTS 的详细介绍：

1.功能特点

• 高质量语音合成：

• Edge-TTS 能够生成非常自然和清晰的语音，通过对语音的韵律、语调、重音等方面进行精细模拟，使得合成的语音接近人类自然发音。

• 支持多种语言和方言，能够根据语言特点调整发音规则。

• 丰富的语言和语音风格支持：

• 支持超过40种语言和300多种声音选项。

• 提供多种语音风格，包括男性、女性、年轻、成熟等，用户可以根据场景选择合适的语音。

• 易于使用：

• 提供简单易用的接口，支持命令行和编程接口。

• 开发者可以通过 Python 等编程语言调用 Edge-TTS，实现个性化的文本转语音应用。

• 开源免费：

• Edge-TTS 是开源项目，用户可以免费使用。

• 源代码在 GitHub 上公开，社区成员可以贡献代码和进行功能扩展。

2.技术原理

• 文本到语音转换：

• 将文本信息转换为语音输出，包括文本分析、分词、音素转换等步骤。

• 语音合成引擎：

• 利用微软 Azure Cognitive Services 的语音合成 API，生成高质量的语音。

• 自然语音流：

• 通过先进的语音合成技术，生成流畅自然的语音流，包括适当的语调、节奏和强度变化。

• 参数调整：

• 用户可以调整语音的参数，如语速、音量、语调等，以获得最佳的语音输出效果。

3.应用场景

• 语音助手：为用户提供自然便捷的语音交互方式。

• 电子书阅读器：将电子书内容转换为语音，方便用户听书。

• 视频制作：为视频添加语音旁白，提高视频质量。

• 教育领域：帮助教师制作教学课件，为视力障碍学生提供学习支持。

• 智能客服：将客服回复的文本转换为语音，提高服务效率。

4.使用方法

• 命令行使用：

• 安装 Edge-TTS：

    pip install edge-tts

• 将文本转换为语音文件：

    edge-tts --text "Hello, world!" --voice en-US-JennyNeural --write-media output.wav

• 编程接口：

• 使用 Python 调用 Edge-TTS：

    import asyncio
    import edge_tts

    async def generate_audio(text, voice, output_file):
        tts = edge_tts.Communicate(text, voice)
        await tts.save(output_file)

    asyncio.run(generate_audio("Hello, world!", "en-US-JennyNeural", "output.wav"))

5.优势

• 自然流畅的语音输出：通过精细的语音合成技术，生成自然流畅的语音。

• 多样化的语音选择：支持多种语言和语音风格，满足不同用户的需求。

• 易于集成和使用：提供简单易用的接口，方便开发者在应用程序中集成语音功能。

• 开源免费：开源项目，用户可以免费使用并进行定制。

文本转语音工具概述

本文中所展示的代码实现了一个简单而有效的文字转语音工具，其主要功能包括：

文本输入：用户可以在界面上输入或粘贴需要转换为语音的文本。文本框支持多行输入，适用于长篇文章或复杂内容。
语音选择：用户可以从多种可用的语音角色中选择合适的声音，以满足不同的内容需求。该工具集成了多种音色，包括男性和女性的不同口音，使得用户可以根据目标受众选择最合适的语音风格。
语速调整：用户可以根据需要调整语音的播放速度，从而增强节目的灵活性和可读性。通过下拉菜单，用户可选择从-100%到+100%的各个速度级别，使得生成的音频更符合特定场合的需求。
输出目录选择：用户可以自定义输出目录以便于管理生成的音频文件。通过文件选择对话框，用户可以轻松选择个人设备上的任意文件夹，提升了使用便利性。
右键菜单操作：在文本输入框中，用户可以使用右键菜单进行文本复制、剪切和粘贴等常用操作。这一功能不仅简化了文本输入过程，也提升了用户体验，尤其对于长文本的编辑。
异步任务处理：为了提高程序的响应速度，工具采用了异步编程模式。在合成音频的过程中，主线程不会被阻塞，这意味着用户仍然可以进行其他操作，而不会感到延迟。此设计显著提高了用户体验。
文件管理：工具自动管理文件输出，包括创建必要的目录结构和命名规则。用户可以方便地选择输出目录，并自定义文件名称，使得生成的音频文件易于查找和管理。同时，系统会确保生成的文件不与已有文件冲突。

运行环境

操作系统： Windows系统、Mac系统、Linux系统（本事例是Mac系统）

IDE：Pycharm 2024.1

开发语言：Python 3.12

代码实现分析

源代码如下：

import os
import tempfile
import asyncio
import pygame.mixer
import customtkinter as ctk
from tkinter import filedialog
from tkinter import messagebox
from edge_tts import Communicate
from tkinter import Menu
import tkinter as tk

pygame.mixer.init()


# 用于异步执行 my_function 函数,以提高响应速度
async def my_function(text, output, voice, rate):
    volume = '+0%'
    tts = Communicate(text=text, voice=voice, rate=rate, volume=volume)
    await tts.save(output)

# 将训练好的语言模型以字典的形式存储，字典的键为神经网络的汉字名，字典的值为神经网络的训练模型名
# 这样做是为了给使用者更直观、更容易理解的界面菜单
voice_dict = {'（女）小小神经网络': 'zh-CN-XiaoxiaoNeural', '（女）小一神经网络': 'zh-CN-XiaoyiNeural',
              '（男）云健神经网络': 'zh-CN-YunjianNeural', '（男）云熙神经网络': 'zh-CN-YunxiNeural',
              '（女）云霞神经网络': 'zh-CN-YunxiaNeural', '（男标准话）云阳神经网络': 'zh-CN-YunyangNeural',
              '（女）辽宁-小贝神经网络': 'zh-CN-liaoning-XiaobeiNeural',
              '（女）陕西-小妮神经网络': 'zh-CN-shaanxi-XiaoniNeural', '（女）香港-HiuGa神经网络': 'zh-HK-HiuGaaiNeural',
              '（女）香港-HiuMa神经网络': 'zh-HK-HiuMaanNeural', '（男）香港-万隆神经网络': 'zh-HK-WanLungNeural',
              '（女）台湾-Hsiao陈神经网络': 'zh-TW-HsiaoChenNeural', '（女）台湾-Hsiao于神经网络': 'zh-TW-HsiaoYuNeural',
              '（男普通话）台湾-云J何神经网络': 'zh-TW-YunJheNeural'}


def show_context_menu(event):
    context_menu.post(event.x_root, event.y_root)


# 定义 synthesize_text 函数:这个函数是主要的功能实现部分。
# 首先从文本输入框中获取要转换的文本。
def synthesize_text():
    text = text_entry.get("1.0", ctk.END).strip()
    voice = voice_dict[voice_var.get()]
    rate = rate_var.get()

    # 生成输出的文件目录
    out_dir = output_dir_entry.get()
    output_dir = os.path.join(out_dir, "mp3")
    if not os.path.exists(output_dir):
        os.makedirs(output_dir)

    # 选择的语音模式作为文件名

    filename_save = text_entry_filename.get("1.0", ctk.END).strip() + '-' + voice_var.get()
    filename = os.path.join(output_dir, filename_save + ".mp3")

    with tempfile.NamedTemporaryFile(delete=False, suffix=".mp3", dir=output_dir) as temp_file:
        temp_filename = temp_file.name
        loop = asyncio.get_event_loop()
        loop.run_until_complete(my_function(text, temp_filename, voice, rate))

    os.rename(temp_filename, filename)
    messagebox.showinfo("成功", "音频文件生成成功!")


# 定义 select_output_directory 函数, 这个函数用于打开文件选择对话框,让用户选择输出目录。
def select_output_directory():
    output_dir = filedialog.askdirectory()
    if output_dir:
        output_dir_entry.delete(0, ctk.END)
        output_dir_entry.insert(ctk.END, output_dir)


# 设置 CustomTkinter 主题
ctk.set_appearance_mode("System")
ctk.set_default_color_theme("blue")

# 创建主窗口
root = tk.Tk()
# root = ctk.CTk()
root.title("文字转语音工具--微信公众号:强壮Python")
root.geometry("730x700")
root.resizable(False, False)

# 创建标题
title_label = ctk.CTkLabel(root, text="文字转语音工具", font=("Arial", 24, "bold"), pady=20)
title_label.pack()

# 创建文本输入框
text_label = ctk.CTkLabel(root, text="请输入要转换为语音的文本：", font=("Arial", 14))
text_label.pack()

text_entry = tk.Text(root, height=15, width=100, font=("Arial", 12))
text_entry.pack()

# 创建右键菜单
context_menu = Menu(root, tearoff=0)
context_menu.add_command(label="复制", command=lambda: text_entry.event_generate("<<Copy>>"))
context_menu.add_command(label="剪切", command=lambda: text_entry.event_generate("<<Cut>>"))
context_menu.add_command(label="粘贴", command=lambda: text_entry.event_generate("<<Paste>>"))

# 绑定右键菜单到文本输入框

# # 自添代码，保存文件的名称
text_label_filename = ctk.CTkLabel(root, text="请输入保存的文件名称：", font=("Arial", 14))
text_label_filename.pack()

# text_entry_filename = ctk.CTkTextbox(root, height=20, width=210, font=("Arial", 12))
text_entry_filename = tk.Text(root, height=3, width=30, font=("Arial", 12))
text_entry_filename.pack()

# 绑定右键菜单到文本输入框
text_entry.bind("<Button-2>", show_context_menu)
# 创建输出目录选择框
output_dir_label = ctk.CTkLabel(root, text="选择输出目录：", font=("Arial", 14))
output_dir_label.pack()

output_dir_frame = ctk.CTkFrame(root)
output_dir_frame.pack()

output_dir_entry = ctk.CTkEntry(output_dir_frame, font=("Arial", 12), width=50)
output_dir_entry.pack(side=ctk.LEFT)

output_dir_button = ctk.CTkButton(output_dir_frame, text="选择目录", font=("Arial", 12),
                                  command=select_output_directory)
output_dir_button.pack(side=ctk.LEFT)

# 创建语音选择下拉框
voice_label = ctk.CTkLabel(root, text="请选择要使用的语音角色：", font=("Arial", 14))
voice_label.pack()

voice_var = ctk.StringVar()
# voice_var.set(voice_dict["（女）小小神经网络"])
if not voice_var:
    print('请选择语音模式')
voice_select = ctk.CTkOptionMenu(root, variable=voice_var, values=list(voice_dict.keys()),
                                 font=("Arial", 12), width=20)
voice_select.pack()

# 创建语速选择下拉框
rate_label = ctk.CTkLabel(root, text="调整语速：", font=("Arial", 14))
rate_label.pack()

rate_var = ctk.StringVar()
rate_var.set("+0%")

rate_select = ctk.CTkOptionMenu(root, variable=rate_var,
                                values=["-100%", "-90%", "-80%", "-70%", "-60%", "-50%", "-40%", "-30%",
                                        "-20%", "-10%", "+0%", "+10%", "+20%", "+30%", "+40%", "+50%", "+60%", "+70%",
                                        "+80%", "+90%", "+100%"], font=("Arial", 12), width=20)
rate_select.pack()

# 创建合成按钮
synthesize_button = ctk.CTkButton(root, text="合成音频", font=("Arial", 16, "bold"), command=synthesize_text, width=150,
                                  height=50)
synthesize_button.pack(pady=20)

root.mainloop()