(小範圍實驗) 任務 9: AI 自動化新聞播報系統 - KM撰寫

[TzuHanLiang]

模塊二：實作與測試

根據 #178，測試 AI 自動化新聞播報系統。通過編寫和運行代碼，最終生成完整的新聞播報影片。

實作與測試步驟

• [x] 安裝依賴項

  • 安裝專案所需的所有 Python 庫：

    pip install -r requirements.txt

• [x] 下載和配置 CosyVoice

  • 克隆 CosyVoice 倉庫並進行配置：

    git clone --recursive https://github.com/FunAudioLLM/CosyVoice.git
    cd CosyVoice
    git submodule update --init --recursive
    conda install -y -c conda-forge pynini==2.1.5
    pip install -r requirements.txt -i https://mirrors.aliyun.com/pypi/simple/ --trusted-host=mirrors.aliyun.com

測試並驗證各功能模塊

• [x] 測試 generate_news_script.py

  • 驗證是否成功生成新聞稿並保存到 data/output/news_script.txt。

• [x] #239

• [x] #240

• [x] 測試 generate_voiceover.py

  • 驗證是否成功生成語音並保存到 data/output/news_voiceover.mp3。

• [x] 測試 generate_background_music.py

  • 驗證是否成功生成背景音樂並保存到 data/output/background_music.wav。

• [ ] #241

模塊三： 生成 KM

• [ ] KM：AI 自動化新聞播報系統的實施指南

[TzuHanLiang]

[TzuHanLiang]

generate_storyboard_images.py 跟 generate_anchor_image.py

已測試，但資源不夠無法加載模型，會使用其他環境再進行測試

generate_voiceover

已測試，目前成功根據 CosyVoice 初始化專案，也可以在專案中 import CosyVoice，但還有一些環境設定沒有處理好，所以目前測試也還未成功

generate_animation.py 跟 generate_anchor_animation

已根據 https://huggingface.co/docs/diffusers/api/pipelines/animatediff 改寫原來的 code，但還未來的急測試

generate_background_music

已成功根據 script 生成背景音樂（雖然聽起來像是 gibberish） took 5hrs

[TzuHanLiang]

各個測試我會再重新整理，開成不一樣的 issue 去處理

[TzuHanLiang]

took 4.5hrs done KM：AI 自動化新聞播報系統的實施指南