Featured image of post 測試 RAG 在翻譯任務中的誤導效果:以特殊語言翻譯為例

測試 RAG 在翻譯任務中的誤導效果:以特殊語言翻譯為例

📌 Introduction

為了測試 RAG 是否真的有功用,所以這邊用了一個「翻譯」的測試工作給 LLM 來實驗。

我建立一個錯誤的翻譯資料集給 RAG 讀取,再丟到 LLM 裡面,最後成功誤導 LLM 給出「特殊語言」的翻譯。

🗒️ Notes

Prompt

Please refer to the previous examples and translate the following custom special language into Chinese.

---

examples:

custom special language -> Chinese
Apple -> 香蕉
Dog -> 貓
Car -> 飛機
Water -> 火
Table -> 椅子
Book -> 電腦
Sun -> 月亮
House -> 魚
Tree -> 花
Pen -> 紙

custom special language:

Dog
Car
Water
Table

---

Chinese:

 

Licensed under CC BY-NC-SA 4.0
Last updated on Nov 15, 2024 20:00 CST