方言讲政策·数字人视频生成技能
技能简介
参赛名称:方言讲政策·数字人视频生成
参赛关键词:适老化 / 方言TTS / 数字人驱动 / 政务短视频 / 少数民族服务
技能简介(竞赛用,500字以内)
背景
我国少数民族聚居地区存在大量60岁以上老年群体,他们普通话理解能力弱、识字率低,面对养老金申领、医保报销、低保申请等复杂业务规则时往往无所适从。传统的纸质告知书和窗口口头解释既耗费人力,又因语言障碍导致信息严重失真,老年群体的业务办理成功率长期偏低。
功能
本技能提供一套端到端的自动化视频生成能力:工作人员只需输入或粘贴业务规则文本,系统即可自动完成以下全流程——①调用大语言模型将复杂政策语言改写为150字以内的口语表达;②通过方言TTS引擎(支持傣语、藏语、粤语、闽南语、苗语等)合成自然流畅的地方语音;③驱动预设的民族服饰数字人形象完成口型同步;④输出带字幕和图示的30秒短视频,可直接推送至业务大厅屏幕、微信小程序或短信二维码。
智算运用
本技能深度融合三类智算能力:大语言模型(GPT-4o / 文心一言)负责政策口语化改写与脚本生成;方言语音合成引擎(讯飞开放平台 / 微软 Azure TTS)负责多语种语音合成;数字人驱动框架(硅基智能 / D-ID / SadTalker)负责表情与口型的实时渲染,三者协同完成从文本到视频的全链路智能生产。
创新点
以"文化认同感"为切入点,在数字人形象上引入民族服饰元素,通过"熟悉的面孔、熟悉的语言"降低老年用户的心理距离;同时实现"一次配置、批量生产"——切换语言包与服饰参数即可快速覆盖不同民族、不同省份场景,边际成本极低。
价值
预计可将窗口重复讲解成本降低60%,老年群体业务办理成功率提升40%,有效弥合数字鸿沟,让政务服务真正触达"最后一公里"的少数民族老年群体。
使用场景
- 民政局、社保局、医保局等政务窗口的适老化服务升级
- 农村地区政策宣讲视频批量生产
- 少数民族聚居乡镇的业务告知材料数字化替代
工作流程
第一步:接收业务规则输入
接受以下任意形式的输入:
- 直接粘贴的政策文本
- 上传的 Word / PDF 文件
- 结构化的 JSON 规则描述
第二步:LLM 口语化改写
调用大语言模型,将输入文本改写为符合以下要求的口语脚本:
- 总字数控制在 150字以内(约30秒朗读时长)
- 使用第二人称("您"或亲切称谓)
- 拆分为 3-5 个要点,每点一句话
- 避免法律/行政专业术语
改写 prompt 模板见 references/rewrite_prompt.md。
第三步:方言 TTS 语音合成
根据目标受众选择方言引擎:
| 方言 | 推荐引擎 | API 接口 |
|---|---|---|
| 傣语 | 讯飞开放平台 | tts.xfyun.cn |
| 藏语 | 讯飞开放平台 | tts.xfyun.cn |
| 粤语 | 微软 Azure TTS | eastasia.tts.speech.microsoft.com |
| 闽南语 | 微软 Azure TTS | eastasia.tts.speech.microsoft.com |
| 苗语 / 彝语 | 定制训练(需语料) | 联系当地语言研究机构 |
详见 references/tts_api_guide.md。
第四步:数字人视频生成
调用数字人驱动 API,将语音与预设形象合成为视频:
- 国内合规推荐:硅基智能 (guiji.ai)
- 国际方案:D-ID、HeyGen
- 开源本地部署:SadTalker
输入参数:
{
"avatar_id": "daizu_elder_female_v1",
"audio_url": "<TTS输出音频URL>",
"subtitle": true,
"output_format": "mp4",
"resolution": "720p"
}
第五步:视频后处理与分发
- 添加业务机构 Logo 水印
- 嵌入双语字幕(方言拼音 + 普通话对照)
- 生成短信二维码(有效期7天)
- 推送至业务大厅数字屏 / 微信小程序
参考资源
references/rewrite_prompt.md— LLM 改写 prompt 模板references/tts_api_guide.md— 方言 TTS API 接入指南references/avatar_catalog.md— 数字人形象与服饰目录scripts/generate_video.py— 端到端视频生成脚本(示例)
注意事项
- 方言语料版权:部分小语种(苗语、彝语)TTS 模型需定制训练,须取得语料授权;
- 民族形象审核:数字人服饰设计须经当地民族事务委员会确认,避免文化表达失当;
- 个人信息保护:输入文本中不得包含服务对象的个人身份信息;
- 视频内容审核:生成视频发布前须经业务部门负责人审核签字。