去「AI味兒」大作戰(zhàn),AI到底能不能寫出風(fēng)格穩(wěn)定的「網(wǎng)文」?| 智能體篇

0 評論 615 瀏覽 1 收藏 7 分鐘

上一篇文章,我們測試了AI在寫小說時,保持行文風(fēng)格的內(nèi)容,但效果很一般。這篇文章,我們來嘗試用下智能體,如果用智能體來做調(diào)試,效果會不會好一些?

上一篇我們分享了用AI chat仿寫保持行文風(fēng)格,用以生成更優(yōu)質(zhì)內(nèi)容的測試情況。這一次,我們再來試試另一套方案,面向智能體。

方案2:用智能體固定文風(fēng)

相較于AI chat,智能體(AI Agent)看上去似乎更適合來做這件事情(至于是不是真能表現(xiàn)更好,測過才知道)。

什么是智能體?

這里我就不扯概念和技術(shù)術(shù)語了,咱們就簡單這么來理解:

你想讓AI干一件事,其中包含一些你定義的規(guī)則,或者你給AI提供了一些學(xué)習(xí)資料,讓它參考這些資料來行動。

如果對象是AI chat,你每次都得把這個要求和“教育”的過程走一遍。

如果換成智能體,則你只需要在第一次“教”它,接下來你再做類似的事情,它就都能夠按照你的要求行事。

所以,AI chat更像是一件工具,智能體則更像是一個學(xué)徒、伙伴。

這次我們就用扣子Coze來測測看,AI在固定文風(fēng)上的表現(xiàn)如何(測試的思路可以參見上一篇)。

我們需要創(chuàng)建4個智能體(對應(yīng)0k、2k、10k、50k分組),將示例分別上傳至知識庫。

扣子Coze的功能較之前做了一些更新,但差別不是很大,我們需要配置的內(nèi)容主要包括人設(shè)與回復(fù)邏輯、知識庫、開場白這三項。

人設(shè)與回復(fù)邏輯

空白版

# 角色

你是一位專業(yè)的網(wǎng)絡(luò)小說作家,能夠根據(jù)給定的故事梗概,創(chuàng)作出精彩的小說正文。

## 技能

### 技能 1: 創(chuàng)作小說正文

1. 根據(jù)用戶提供的故事梗概寫出小說正文。

2. 若存在之前有對話輪次,將新的故事梗概視為上一輪的后續(xù)情節(jié),注重前后文的銜接與場景轉(zhuǎn)換。

3. 結(jié)合故事梗概擴(kuò)展細(xì)節(jié),確保細(xì)節(jié)豐富、情節(jié)連貫。

4. 以對話、描寫為主,讓故事更具有畫面感。

5. 輸出正文內(nèi)容不少于500字,結(jié)尾不要出現(xiàn)感悟和總結(jié)性的內(nèi)容,等待用戶給出后續(xù)的故事梗概。

## 限制

– 通常運用第三人稱敘述,如有特別要求,可依據(jù)實際情況進(jìn)行調(diào)整。

– 保證創(chuàng)作的正文內(nèi)容邏輯通順,情節(jié)合理。

含示例版

# 角色

你是一位專業(yè)的網(wǎng)絡(luò)小說作家,能夠根據(jù)給定的故事梗概,創(chuàng)作出精彩的小說正文。

## 技能

### 技能 1: 創(chuàng)作小說正文

1. 深入學(xué)習(xí)知識庫中“(文件名)”的文章風(fēng)格,嚴(yán)格按照這種寫作風(fēng)格來寫小說正文。

2. 若存在之前有對話輪次,將新的故事梗概視為上一輪的后續(xù)情節(jié),注重前后文的銜接與場景轉(zhuǎn)換,嚴(yán)格按照知識庫中“(文件名)”的文章風(fēng)格來續(xù)寫。

3. 根據(jù)用戶提供的故事梗概,巧妙拓展細(xì)節(jié),使故事梗概更為豐富,情節(jié)更加連貫。

4. 以對話、描寫為主,減少內(nèi)心獨白、感悟,讓故事更具有畫面感。

5. 創(chuàng)作不少于 500 字的小說正文,結(jié)尾不要出現(xiàn)感悟和總結(jié)性的內(nèi)容,等待用戶給出后續(xù)的故事梗概。

## 限制

– 通常運用第三人稱敘述,如有特別要求,可依據(jù)實際情況進(jìn)行調(diào)整。

– 保證創(chuàng)作的正文內(nèi)容邏輯通順,情節(jié)合理。開場白

請你提供故事梗概,我會按照故事梗概書寫網(wǎng)絡(luò)小說正文

等智能體配置好了之后,就和之前一樣,分別用這些智能體生成情節(jié)片段,然后將情節(jié)片段分組拼裝起來,變成2章篇幅的內(nèi)容。

還是和之前一樣來打個分吧,雖然這個得分不是很靠譜。

將生成的各個版本完整正文與作者原版作品的前2章對比,同樣由Kimi來打分,語言風(fēng)格相似度得分如下:

以上是智能體的測試結(jié)果。

┐(─__─)┌ 怎么說呢……看到AI生成的內(nèi)容,我只能說,這很難評……

利用智能體寫出來的正文有如下特點:

內(nèi)心獨白之類的AI味兒文本篇幅的的確確減少了,不管是0k、2k、10k還是50k的智能體,都沒有出現(xiàn)AI味兒越來越重的情況,處于一個相對穩(wěn)定的水平。

不得不吐槽一下,加進(jìn)去的示例沒起到任何作用,四個版本的文風(fēng)基本沒多少差別。我感覺AI把知識庫當(dāng)成的檢索知識的地方(界面上顯示的也是“已搜索知識庫”),并沒刻意去學(xué)習(xí)語言風(fēng)格。

對比“人設(shè)與回復(fù)邏輯”的配置不難發(fā)現(xiàn),模仿風(fēng)格、前后文銜接、擴(kuò)展細(xì)節(jié)、結(jié)尾不要出現(xiàn)感悟和總結(jié)性內(nèi)容這些要求,AI都沒有做到。

測下來,我的感覺是在故事創(chuàng)作的使用場景下,扣子Coze像是完全沒有做好準(zhǔn)備的樣子。文風(fēng)是穩(wěn)定了,但總的來看,其表現(xiàn)并不比AI chat更好。

有點小失望啊~

本文由人人都是產(chǎn)品經(jīng)理作者【不知】,微信公眾號:【不知】,原創(chuàng)/授權(quán) 發(fā)布于人人都是產(chǎn)品經(jīng)理,未經(jīng)許可,禁止轉(zhuǎn)載。

題圖來自Unsplash,基于 CC0 協(xié)議。

更多精彩內(nèi)容,請關(guān)注人人都是產(chǎn)品經(jīng)理微信公眾號或下載App
評論
評論請登錄
  1. 目前還沒評論,等你發(fā)揮!