角色調(diào)優(yōu)
影響 AI 角色回答質(zhì)量的因素,主要有 3 個(gè):
- 描述詞,或叫提示詞
- 關(guān)聯(lián)數(shù)據(jù)集的數(shù)據(jù)質(zhì)量
- 人工巡檢與標(biāo)注后的數(shù)據(jù)質(zhì)量
因此,調(diào)優(yōu)也可以分為 3 個(gè)部分:提示詞調(diào)優(yōu)、數(shù)據(jù)集調(diào)優(yōu)、人工巡檢 & 標(biāo)注調(diào)優(yōu)。
1、提示詞調(diào)優(yōu)
概念:提示詞,是讓 AI 能夠理解需求意圖的自然語言。
簡(jiǎn)單來說,就是要講清楚:AI 扮演誰,做什么,怎么做,做到什么程度,完成什么目標(biāo)。
參考示例:
# Role: 思乎客服
## Background:
– 思乎為新一代免費(fèi)思維導(dǎo)圖協(xié)作軟件,不僅可以幫助用戶進(jìn)行思維整理、知識(shí)管理和團(tuán)隊(duì)協(xié)作,而且還有靈感流淌功能,幫助團(tuán)隊(duì)進(jìn)行思想共創(chuàng),激發(fā)思想流動(dòng),讓智慧自然涌現(xiàn)。
– 理念:每個(gè)思想都有價(jià)值## Contact:
1. 官方網(wǎng)站:http://www.hnmeisong.com/
2. 電話:400-903-0076
3. 郵箱:[email protected]## Goals:
為用戶反饋的問題,提供滿意的解決方案。## Constrains:
1. 嚴(yán)格按照Context提供的內(nèi)容,為用戶提供準(zhǔn)確的解決方案
2. 語氣友好客氣,富有耐心,維護(hù)思乎的品牌形象
3. 如果上下文中有``標(biāo)簽,請(qǐng)?jiān)诨貜?fù)中使用markdown語法 `` 直接顯示圖片,以便用戶更直觀的理解
4. 如果用戶要求退款,請(qǐng)讓用戶提供訂單號(hào)
5. 仔細(xì)按照用戶的說明回答問題,如果用戶的問題不明確,或者無意義,要求對(duì)方澄清
6. 只對(duì)客戶支持相關(guān)的問題進(jìn)行回答,拒絕其他不相關(guān)的問題## Skills:
1. 擅長(zhǎng)安撫用戶情緒,并且保持友好和禮貌
2. 能夠快速定位用戶反饋的問題,并且提供解決方案
3. 擁有排版審美, 會(huì)利用序號(hào), 縮進(jìn), 分隔線, 換行符等等來優(yōu)化排版
此外,這里還有一些經(jīng)驗(yàn)分享:
1. 提示詞,盡可能以數(shù)據(jù)集中語料數(shù)據(jù)的主體語種為主:
- 比如大部分語料是英文的,那么提示詞用英文,說明是要面向海外用戶
- 比如大部分語料是中文的,那么提示詞用中文,說明是要面向國(guó)內(nèi)用戶
如果數(shù)據(jù)集語料中有圖片,則盡量在提示詞中增加圖片顯示的約束。
2. 提示詞,盡量使用 CRSIPE Prompt 框架。CRISPE 是首字母的縮寫,分別代表以下含義:
- Capacity and Role(能力與角色): 這是你給 AI 立下的人設(shè)。
- Insight(洞悉;領(lǐng)悟): 這是你為 AI 提供的背景信息和上下文。
- Statement(表述;聲明): 你希望 AI 具體執(zhí)行的任務(wù)。
- Personality(人格;性格): 你希望 AI 輸出內(nèi)容的風(fēng)格。
- Experiment(嘗試;實(shí)踐): 你給 AI 所做的限制條件。
如果是客服機(jī)器人,則盡量在北京信息里包含該公司或業(yè)務(wù)的介紹,比如業(yè)務(wù)情況、聯(lián)系方式等。
3. 如果希望 AI 角色的回答更像人類一些,可以在規(guī)則里添加:
- 你的性格是xx,回答時(shí)用xx語氣
- 符合xx角色身份,以第一人稱回答
2、數(shù)據(jù)集調(diào)優(yōu)
數(shù)據(jù)集調(diào)優(yōu),主要是做 語料清洗 。具體來說,包含以下內(nèi)容:
1. 導(dǎo)入的數(shù)據(jù)類型,盡量采用完整的問答對(duì)。即前期需要進(jìn)行整理,將典型問題整理成問答對(duì)的形式,進(jìn)行導(dǎo)入,并確保每個(gè)問答對(duì)語義連貫,表達(dá)準(zhǔn)確。如下圖:
2. 如果數(shù)據(jù)是表格或者圖像,建議人工處理。每一塊(chunk)數(shù)據(jù),均有表頭信息,或者可以直接處理成文本段落。比如下表:
可以處理成下圖:
3. 導(dǎo)入的數(shù)據(jù),會(huì)自動(dòng)切分成片段。如果觀察到某個(gè)切片中,有不相干的內(nèi)容,可以手動(dòng)進(jìn)行刪除或者編輯的變更操作。
點(diǎn)擊切片:
清洗切片中不相干的內(nèi)容:
3、人工巡檢 & 標(biāo)注調(diào)優(yōu)
進(jìn)入到 AI 客服機(jī)器人的配置頁(yè),選擇 會(huì)話記錄 ,然后點(diǎn)擊 詳情:
在會(huì)話記錄的詳情頁(yè)面,點(diǎn)擊 管理員標(biāo)注:
輸入該條問答,你期望的新答案,然后點(diǎn)擊 確認(rèn) 保存。
至此,人工巡檢和標(biāo)注的動(dòng)作就已經(jīng)完成。下次詢問同樣的問題時(shí),AI 客服機(jī)器人將會(huì)學(xué)習(xí)本次標(biāo)注的新答案,按照你期望的答案來回復(fù)。
我要評(píng)論