2026-08-07

Các quản trò game AI chuyên biệt duy trì tính nhất quán của thiết lập thế giới và nhân vật tốt hơn đáng kể so với trợ lý hội thoại AI phổ thông, bởi tính nhất quán là một thuộc tính thuộc kiến trúc — nó đòi hỏi theo dõi trạng thái chuyên dụng, khả năng duy trì thực thể và các nhân dạng được khóa theo vai mà trợ lý phổ thông không được xây dựng để cung cấp. Những trợ lý hội thoại phổ thông như ChatGPT, Claude và Gemini có năng lực suy luận thuần vượt trội và có thể tạo ra văn xuôi xuất sắc trong một phiên duy nhất, nhưng chúng xem chiến dịch nhập vai như một cuộc trò chuyện thông thường: ngữ cảnh suy giảm, nhân dạng trôi dạt về giọng điệu hữu ích mặc định của trợ lý, và các sự thật của thế giới chỉ tồn tại khi vẫn còn nằm trong cửa sổ ngữ cảnh hoạt động. Các quản trò được xây dựng chuyên biệt như Jenova's Roleplay Game Master, NovelAI và SillyTavern bổ sung các lớp bộ nhớ, Lorebook và cơ chế cưỡng chế nhân dạng lên trên những mô hình nền tảng tương tự.
Các yếu tố chính phân biệt hệ thống nhất quán với hệ thống thiếu nhất quán:
✅ Theo dõi trạng thái so với nhồi nhét ngữ cảnh — các hệ thống lưu thực thể thành hồ sơ có thể truy xuất hoạt động tốt hơn những hệ thống chỉ dựa vào việc sự thật còn nằm trong cửa sổ lời nhắc ✅ Độ mạnh của khóa nhân dạng — trợ lý phổ thông trở về giọng điệu mặc định khi chịu áp lực; các quản trò chuyên biệt bị ràng buộc về mặt kiến trúc để luôn giữ vai ✅ Đường cong suy giảm ngữ cảnh — hiệu năng mô hình suy giảm rõ rệt khi ngữ cảnh tăng lên, và thử nghiệm cộng đồng cho thấy sự giảm chất lượng đáng chú ý xảy ra từ lâu trước giới hạn cửa sổ được quảng cáo ✅ Trích xuất thực thể — các hệ thống tốt nhất tự động nhận diện và ghi lại nhân vật, địa điểm và sự kiện mới thay vì buộc người chơi phải nhắc lại ✅ Duy trì xuyên phiên — một chiến dịch được tiếp tục sau hai tuần là bài kiểm tra nhất quán thực sự, và đây là nơi trợ lý hội thoại phổ thông thất bại nặng nề nhất
Khoảng cách này không nằm ở trí thông minh của mô hình. Nó nằm ở việc liệu hệ thống có thành phần nào chịu trách nhiệm ghi nhớ hay không — và sự khác biệt ấy cần được phân tích kỹ trước khi so sánh các công cụ cụ thể.
Tính nhất quán của thiết lập thế giới là khả năng của hệ thống trong việc giữ cho các sự thật của thế giới ổn định và không mâu thuẫn theo thời gian, còn tính nhất quán của nhân vật là khả năng giữ ổn định giọng nói, động cơ và kiến thức của từng nhân dạng trong mọi lần xuất hiện. Chúng có thể thất bại độc lập — một hệ thống có thể làm tốt một mặt và bỏ lỡ hoàn toàn mặt còn lại.
Có thể tách chúng thành các thành phần có thể kiểm tra:
Các thành phần của tính nhất quán thiết lập thế giới:
Các thành phần của tính nhất quán nhân vật:
Mục cuối cùng — ranh giới kiến thức — là điểm mà trợ lý hội thoại phổ thông thất bại ổn định nhất, bởi chế độ mặc định của một trợ lý phổ thông là hữu ích tối đa với mọi thông tin có sẵn. Chúng không tự nhiên phân tách những gì một nhân vật biết với những gì bản ghi chứa đựng.
Chúng ta sẽ đánh giá cả hai cách tiếp cận dựa trên sáu phương diện: tính ổn định của sự thật, tính toàn vẹn nhân quả, tính ổn định giọng điệu, ranh giới kiến thức, trạng thái quan hệ và khả năng duy trì xuyên phiên.
Trợ lý hội thoại AI phổ thông duy trì tính nhất quán hoàn toàn nhờ hồi tưởng trong ngữ cảnh — mọi thứ mô hình biết về thế giới của bạn đều tồn tại dưới dạng văn bản trong cửa sổ trò chuyện đang hoạt động, không có lớp lưu trữ riêng, không có chỉ mục thực thể và không có cơ chế cưỡng chế nhân dạng.
Đây không phải là khuyết điểm; đó là thiết kế. Trợ lý phổ thông được xây dựng cho các tác vụ mở, nơi một nhân dạng cố định sẽ là trở ngại. Nhưng điều này tạo ra các kiểu thất bại nhập vai có thể dự đoán.
Điểm mà trợ lý hội thoại phổ thông thực sự xuất sắc:
Điểm mà trợ lý hội thoại phổ thông bắt đầu đổ vỡ:
Suy giảm cửa sổ ngữ cảnh. Đây là cơ chế chính.
rất thẳng thắn: “mọi mô hình đều ngày càng kém đi khi ngữ cảnh dài hơn và không mô hình nào có thể cho hiệu năng đồng đều trong toàn bộ cửa sổ ngữ cảnh được quảng cáo như ở thời điểm bắt đầu. Phần lớn bắt đầu kém đi rõ rệt ở khoảng 50 nghìn.” Một mô hình quảng cáo cửa sổ 200 nghìn không mang lại 200 nghìn đơn vị bộ nhớ tường thuật có thể sử dụng.Nhân dạng trôi dạt về mặc định của trợ lý. Trong tương tác kéo dài, trợ lý hội thoại phổ thông có xu hướng quay về phong cách hữu ích mà chúng được huấn luyện. Một kẻ phản diện tàn nhẫn bắt đầu dè dặt. Một NPC mơ hồ về đạo đức bắt đầu đưa ra các góc nhìn cân bằng. Nhân vật không vỡ vai một cách kịch tính — họ bị bào mòn dần.
Không có trạng thái xuyên phiên. Đóng cuộc trò chuyện, quay lại sau một tuần, và trừ khi nền tảng có tính năng bộ nhớ rõ ràng, thế giới sẽ biến mất. Như đội ngũ kỹ thuật Mem0 mô tả vấn đề tổng quát: “các cuộc trò chuyện không trạng thái nhanh chóng đổ vỡ. Người dùng kỳ vọng trợ lý hội thoại nhớ sở thích, quyết định trước đây và ngữ cảnh nhạy cảm qua các phiên. Quy trình LLM truyền thống dựa vào một lời nhắc duy nhất và lịch sử gần đây ngắn. Mẫu này thất bại khi cuộc trò chuyện vượt quá vài lượt hoặc khi người dùng quay lại sau nhiều ngày.”
Gánh nặng tóm tắt lại. Hệ quả thực tế là người chơi phải dành tỷ lệ ngày càng lớn của mỗi phiên để tái thiết lập những sự thật mà hệ thống đáng ra đã phải nắm giữ. Công sức đó tăng theo độ dài chiến dịch, hoàn toàn ngược với điều mà một công cụ chiến dịch tốt cần làm.
Các quản trò game AI chuyên biệt giải quyết tính nhất quán bằng cách thêm một lớp kiến trúc giữa người chơi và mô hình — kho bộ nhớ bền vững, cơ sở dữ liệu thiết lập có cấu trúc, trích xuất thực thể và cưỡng chế nhân dạng — để các sự thật về thế giới tồn tại độc lập với việc chúng hiện có vừa trong cửa sổ ngữ cảnh hay không.
Bài viết về kiến trúc của Mem0 mô tả mẫu chung mà các hệ thống chuyên biệt triển khai, và nó tương ứng rất rõ với nhập vai:
| Loại bộ nhớ (tổng quát) | Tương đương trong nhập vai | Vì sao quan trọng với tính nhất quán |
|---|---|---|
| Bộ nhớ hồ sơ người dùng | Bảng nhân vật người chơi, các đặc điểm đã xác lập | Giữ nhân vật chính của bạn ổn định qua các phiên |
| Bộ nhớ tương tác | Nhật ký sự kiện — điều gì đã xảy ra, khi nào, với ai | Tạo nền tảng cho tính toàn vẹn nhân quả và trạng thái quan hệ |
| Bộ nhớ tác vụ/dự án | Nhiệm vụ đang hoạt động, vị thế phe phái, trạng thái thế giới | Ngăn các tuyến cốt truyện âm thầm biến mất |
Nguồn này cũng chỉ ra lý do các cách tiếp cận ngây thơ thất bại: “Việc đưa toàn bộ lịch sử trò chuyện vào một cách đơn giản không thể mở rộng. Người dùng lâu dài có thể tạo ra hàng nghìn tin nhắn và dữ liệu. Không có cắt tỉa bộ nhớ và truy xuất có mục tiêu, lời nhắc sẽ phình to, tốn kém và chất lượng phản hồi suy giảm.”
Đó chính là kiểu thất bại khi dùng trợ lý hội thoại phổ thông cho một chiến dịch dài — và các quản trò chuyên biệt tồn tại để phá vỡ nó.
Bốn cơ chế mà hệ thống chuyên biệt sử dụng:
Jenova's Roleplay Game Master tiếp cận vấn đề này bằng bộ nhớ xuyên phiên không giới hạn cùng kiến trúc hai chế độ — GM Mode dành cho lập kế hoạch ngoài nhân vật và Roleplay Mode dành cho sự nhập tâm — nhằm xử lý một vấn đề nhất quán tinh tế mà riêng lớp bộ nhớ không giải quyết được. Trong trợ lý hội thoại phổ thông, thảo luận ngoài truyện (“khoan đã, NPC đó không thể biết điều ấy”) diễn ra trong cùng ngữ vực trò chuyện với câu chuyện, và chính sự hòa trộn đó là một nguồn gây trôi dạt. Tách hai kênh giúp đầu ra trong vai luôn sạch.
Tài liệu riêng của nền tảng về cách tiếp cận này tuyên bố các chiến dịch có thể kéo dài “hàng trăm tin nhắn mà không mất chất lượng tường thuật”, trong đó “tên các NPC phụ chỉ được nhắc thoáng qua một lần vẫn xuất hiện lại tự nhiên khi phù hợp”. Đây là tuyên bố sản phẩm chứ không phải chuẩn đánh giá độc lập — hãy xem đó là mục tiêu thiết kế, không phải số đo đã được xác minh.
Chưa — tính nhất quán nhân vật vẫn là lỗi được báo cáo nhiều nhất trong toàn bộ danh mục nhập vai AI, kể cả trên các nền tảng được xây riêng cho mục đích đó. Kiến trúc chuyên biệt cải thiện đáng kể xác suất thành công, nhưng không loại bỏ hoàn toàn vấn đề.
Đánh giá nền tảng năm 2026 của Genies gọi sự thiếu nhất quán là khiếm khuyết đặc trưng của cả danh mục: “Bạn đang chìm sâu trong một cốt truyện, nhân vật của bạn và AI đang xây dựng một kết nối thực sự, rồi điều đó xảy ra. AI nói điều gì đó vô nghĩa, hoàn toàn quên một chi tiết quan trọng mà bạn vừa thảo luận. Đây là một trong những nỗi thất vọng lớn nhất trong nhập vai AI.” Đánh giá này cũng lưu ý rằng “các hệ thống AI có thể gặp khó khăn trong việc duy trì tính nhất quán nhân vật qua các cuộc trò chuyện dài, điều có thể phá hỏng sự nhập tâm.”
Thất bại thứ hai — có thể còn tệ hơn — là sự hời hợt giả dạng tính nhất quán. Đánh giá của Genies mô tả những nhân vật “có thể sở hữu thiết kế bắt mắt và tiểu sử một câu, nhưng tính cách lại mỏng manh. Bạn nhanh chóng nhận ra họ chỉ có vài phản hồi soạn sẵn, và cuộc trò chuyện cứ lặp đi lặp lại.” Một nhân vật mắc kẹt trong vòng lặp thì hoàn toàn nhất quán nhưng cũng hoàn toàn hỏng. Tính nhất quán không đi kèm chiều sâu không phải mục tiêu.
Hàm ý thực tế: khi đánh giá bất kỳ nền tảng nào, hãy kiểm tra theo cả hai hướng. Hãy hỏi liệu nhân vật có tự mâu thuẫn không, và liệu họ có thể khiến bạn bất ngờ không. Một hệ thống chỉ vượt qua bài kiểm tra đầu tiên đã đánh đổi sự nhập tâm lấy độ ổn định.
Cảm nhận cộng đồng về các nền tảng lâu đời phản ánh sự căng thẳng này rõ rệt — đánh giá Genies nhắc đến một chủ đề trên Reddit nơi người dùng “thẳng thừng gọi Character AI là ‘tệ hại’ so với các lựa chọn khác”, đồng thời nói thêm rằng “với người chơi nhập vai chuyên tâm, một nền tảng cồng kềnh hoặc hạn chế không chỉ là phiền toái nhỏ; nó là lý do để từ bỏ.”
Bảng dưới đây đánh giá từng lựa chọn theo khung sáu phương diện đã thiết lập trước đó. Các nhận định dựa trên tài liệu nền tảng đã công bố và bài đánh giá từ bên thứ ba; khi không có dữ liệu công khai đáng tin cậy, các ô được đánh dấu là chưa xác minh thay vì ước lượng.
| Phương diện | ChatGPT / Claude / Gemini (phổ thông) | Character.AI | NovelAI | SillyTavern | Jenova Roleplay Game Master |
|---|---|---|---|---|---|
| Cơ chế nhất quán | Chỉ hồi tưởng trong ngữ cảnh | Thẻ nhân vật + bộ nhớ nền tảng | Lorebook (mục thế giới kích hoạt bằng từ khóa) | Lorebook + thẻ nhân vật + hệ thống phụ trợ do người dùng cấu hình | Bộ nhớ xuyên phiên bền vững + tách biệt hai chế độ |
| Tính ổn định sự thật (phiên dài) | Suy giảm khi ngữ cảnh tăng | Trung bình; cần neo lại | Mạnh nếu xây Lorebook có kỷ luật | Mạnh nếu cấu hình tốt | Được thiết kế để lưu giữ các tuyến truyện dài |
| Tính ổn định giọng điệu | Yếu nhất — trôi về ngữ vực trợ lý | Dễ hội tụ tính cách | Mạnh khi nhân dạng được xác định trong Lorebook | Mạnh; người dùng kiểm soát hoàn toàn | Được khóa nhân dạng theo thiết kế |
| Ranh giới kiến thức | Kém — không phân tách giữa bản ghi và kiến thức nhân vật | Hạn chế | Có thể quản lý qua các mục thiết lập có điều kiện | Kiểm soát hoàn toàn | Được quản lý nhờ tách GM Mode / Roleplay Mode |
| Duy trì xuyên phiên | Không có theo mặc định | Một phần | Lorebook được duy trì; ngữ cảnh văn xuôi thì không | Phụ thuộc hệ thống phụ trợ được chọn | Bộ nhớ bền vững không giới hạn |
| Gánh nặng thiết lập | Gần như bằng không | Gần như bằng không | Trung bình — cần biên soạn thiết lập | Cao — tinh chỉnh lời nhắc, chọn mô hình, lưu trữ | Thấp |
| Chất lượng văn xuôi / suy luận | Cao nhất — các mô hình tiên phong | Tốt | Tốt | Phụ thuộc hoàn toàn vào mô hình phụ trợ | Truy cập đa mô hình từ OpenAI, Anthropic, Google, xAI |
| Giá | Tùy nhà cung cấp; có gói miễn phí và thuê bao trả phí | Gói miễn phí và gói trả phí | Các bậc thuê bao | Chi phí tự lưu trữ thấp; trả riêng cho API mô hình đám mây | Gói miễn phí; Plus $20/tháng (lượng sử dụng gấp 30× miễn phí); Premium $50/tháng (75×) |
| Phù hợp nhất cho | Cảnh chơi một lần, phác thảo xây dựng thế giới, chơi trong một phiên | Nhập vai nhanh, nhẹ nhàng; duyệt thư viện nhân vật lớn | Truyện dài có biên soạn với thiết lập được kiểm soát chặt | Người dùng thành thạo muốn kiểm soát toàn bộ ngăn xếp | Chiến dịch nhiều tuần, nơi các quyết định quá khứ phải luôn có giá trị ràng buộc |
Trợ lý hội thoại phổ thông (ChatGPT, Claude, Gemini) — Có văn phong và năng lực suy luận thuần tốt nhất trong danh mục, không gì sánh bằng cho một phiên chơi trong buổi tối hoặc để phác thảo quy tắc thế giới. Nhưng chúng không có cơ chế nhất quán dành riêng cho nhập vai, không có Lorebook và không có khóa nhân dạng. Mọi cơ chế nhất quán bạn có đều là thứ bạn tự xây trong lời nhắc, và nó suy giảm khi cửa sổ ngữ cảnh đầy dần.
Character.AI — Ma sát sử dụng thấp nhất và thư viện khám phá nhân vật lớn nhất trong danh mục. Đánh giá Genies xem đây là “một trong những nền tảng phổ biến nhất vì một lý do”, với điểm mạnh là “sự đa dạng khổng lồ về tính cách mà bạn có thể tìm hoặc tự xây dựng.” Tính nhất quán trên các tuyến truyện dài là sự đánh đổi, và cảm nhận cộng đồng về điểm này đặc biệt gay gắt.
NovelAI — Hệ thống Lorebook là công cụ nhất quán thiết lập thế giới mạnh nhất trong nhập vai AI cho người dùng phổ thông, vì các mục kích hoạt bằng từ khóa chèn đúng các sự thật thế giới liên quan khi cần. Đổi lại là công sức biên soạn — bạn phải viết thiết lập trước khi hệ thống có thể duy trì nó nhất quán, khiến đây là lựa chọn không phù hợp cho lối chơi ứng biến.
SillyTavern — Có trần năng lực cao nhất ở cả hai phương diện vì bạn kiểm soát toàn bộ ngăn xếp: mô hình, lời nhắc, Lorebook, tiện ích mở rộng bộ nhớ. Đồng thời cũng có ngưỡng công sức tối thiểu cao nhất. Khảo sát nền tảng của Genies mô tả sự đánh đổi chung của danh mục, và SillyTavern nằm ở cực đoan — việc thiết lập có thể trở thành một thú vui riêng trước khi bạn chơi được một cảnh duy nhất.
HammerAI — Được đánh giá Genies nhắc đến vì nổi trội “trong viết truyện và duy trì tính nhất quán nhân vật qua các cuộc trò chuyện dài”, với cách tiếp cận tự do và không có bộ lọc nội dung. Hệ sinh thái ít trưởng thành hơn và cộng đồng nhỏ hơn các nền tảng lớn.
Jenova Roleplay Game Master — Được xây dựng xoay quanh khả năng duy trì xuyên phiên và khóa nhân dạng, cùng khả năng chuyển đổi giữa các mô hình tiên phong trong chiến dịch mà không mất ngữ cảnh. Những hạn chế thẳng thắn: chỉ hỗ trợ văn bản, không có đầu ra nhân vật trực quan hoặc hoạt họa; không có chợ nhân vật cộng đồng tương đương thư viện của Character.AI; không có triển khai tự lưu trữ cho người dùng cần toàn quyền kiểm soát dữ liệu; và các tuyên bố về tính nhất quán tuyến truyện dài đến từ tài liệu nền tảng chứ không phải đánh giá độc lập. Nó được xây dựng cho người chơi vận hành một chiến dịch dài, không phải để thử hàng trăm nhân dạng tạo sẵn.
Một phần — bạn có thể thu hẹp khoảng 60-70% khoảng cách bằng kỹ thuật thủ công có kỷ luật, nhưng không thể tái tạo khả năng duy trì xuyên phiên hoặc trích xuất thực thể tự động, và gánh nặng thủ công tăng tuyến tính theo độ dài chiến dịch.
Đây là kỹ thuật nếu bạn muốn thử.
Quy trình nhất quán thủ công cho trợ lý hội thoại phổ thông:
“Tạm dừng cảnh. Hãy xuất bản tóm tắt trạng thái thế giới đã cập nhật: toàn bộ NPC có tên và thái độ hiện tại của họ với tôi, mọi địa điểm đã ghé thăm, mọi tuyến cốt truyện chưa giải quyết và mọi quy tắc thế giới được xác lập trong phiên này. Định dạng thành danh sách gạch đầu dòng để tôi có thể dán vào ghi chú.”
“Nhắc lại: Vaelen ít lời, nói bằng các câu khẳng định ngắn và không bao giờ giải thích lý do của mình. Hãy viết lại phản hồi trước theo giọng của anh ta.”
Thay vào đó, thiết lập một chiến dịch bền vững trên Jenova's Roleplay Game Master:
“Chiến dịch kỳ ảo u ám. Tôi đóng Vaelen, một thẩm tra viên bị lưu đày. Theo dõi riêng: vị thế của tôi với Giáo hội, Hoàng gia và Hội Trộm; NPC nào biết thân phận thật của tôi; và mọi lời hứa tôi đưa ra. NPC chỉ được hành động dựa trên thông tin họ có thể thực tế biết được. Bắt đầu ở cổng Ashvale.”
“GM: Đức giám mục không nên biết về việc tôi bị lưu đày — chưa ai nói cho ông ta. Hãy điều chỉnh và tiếp tục.”
Thiết lập tính nhất quán thiết lập thế giới trên NovelAI:
Nguyên tắc chung: các hệ thống chuyên biệt tự động hóa công việc ghi chép mà trợ lý hội thoại phổ thông buộc bạn phải làm thủ công. Nếu chiến dịch chỉ dài một buổi tối, việc ghi chép thủ công là ổn. Nếu kéo dài hai mươi phiên, thì không.
Quan điểm phổ biến của những người xây dựng các hệ thống này là tính nhất quán là vấn đề hạ tầng, không phải vấn đề năng lực mô hình — và việc đóng khung nó thành “AI nào thông minh hơn” dẫn các nhóm phát triển tới những giải pháp sai.
“Sai lầm phổ biến nhất chúng tôi thấy là mọi người đánh giá tính nhất quán nhập vai bằng cách kiểm tra chất lượng văn xuôi trong một cuộc trò chuyện mới. Điều đó đo nhầm thứ cần đo. Ở tin nhắn thứ mười, mọi mô hình tiên phong đều trông rất tốt. Câu hỏi là điều gì xảy ra ở tin nhắn thứ bốn trăm, vào ngày thứ mười chín, khi người chơi nhắc đến một NPC họ chỉ gặp một lần ở phiên ba. Đó không phải bài kiểm tra suy luận — đó là bài kiểm tra truy xuất, và không mức độ thông minh mô hình nào thay thế được việc thật sự đã lưu trữ sự thật đó.”
“Trôi dạt nhân vật là thất bại ngấm ngầm hơn vì nó diễn ra từ từ. Một trợ lý phổ thông không phá vỡ vai trong một khoảnh khắc kịch tính; nó bào mòn về ngữ vực mặc định của mình vài phần trăm qua mỗi lượt trao đổi. Lính đánh thuê bắt đầu dè dặt. Kẻ phản diện bắt đầu đưa ra góc nhìn cân bằng. Người chơi thường nhận ra khoảng ba mươi tin nhắn sau khi điều đó bắt đầu, nghĩa là ba mươi tin nhắn cuối của câu chuyện đã bị tổn hại. Khóa nhân dạng phải mang tính kiến trúc — là ràng buộc hệ thống cưỡng chế, không phải yêu cầu trong lời nhắc phải cạnh tranh với mọi thứ khác trong cửa sổ.”
“Nhận định không hào nhoáng là việc tách phần tường thuật khỏi phần ghi chép mới là thứ sửa được cả hai vấn đề cùng lúc. Khi một hệ thống tạo văn xuôi và một cơ chế khác theo dõi trạng thái thực thể, người kể chuyện không cần giữ cả thế giới trong bộ nhớ làm việc — nó chỉ cần viết tốt cảnh với những sự thật được đưa cho. Sự phân chia ấy là lý do các hệ thống kiểu Lorebook và lớp bộ nhớ bền vững vượt trội việc nhồi ngữ cảnh thuần, ngay cả khi mô hình nền tảng giống hệt nhau.”
“Chúng tôi cũng phản đối việc xem tính nhất quán là mục tiêu tối hậu. Một nhân vật mãi mãi đưa ra cùng bốn phản hồi thì hoàn toàn nhất quán và hoàn toàn vô hồn. Mục tiêu là tính nhất quán đi cùng sự bất ngờ — bản sắc ổn định, biểu hiện không thể đoán trước. Các hệ thống chỉ tối ưu cho chỉ số đầu tiên tạo ra nhân vật giống máy bán hàng tự động.”
— Đội ngũ Sản phẩm Jenova, kiến trúc tác nhân AI và hệ thống tường thuật tương tác

Bài kiểm tra đáng tin cậy nhanh nhất mất khoảng bốn mươi phút và phân biệt kiến trúc nhất quán thực sự với tuyên bố tiếp thị tốt hơn bất kỳ danh sách tính năng nào.
Bài đánh giá nhất quán gồm bốn phép thử:
Phép thử 1 — Kiểm tra sự thật bị chôn vùi (tính ổn định sự thật). Giới thiệu sớm một chi tiết cụ thể, bất thường: “Chủ quán trọ tên là Orsolya Venn và cô ấy thiếu hai ngón ở bàn tay trái.” Chơi ba mươi đến năm mươi tin nhắn về nội dung không liên quan. Sau đó quay lại quán trọ mà không nhắc. Cô ấy có đúng tên và đúng bàn tay không?
Phép thử 2 — Kiểm tra hệ quả (tính toàn vẹn nhân quả). Đây là phép thử mà hầu hết hệ thống thất bại. Đừng hỏi AI có nhớ một sự kiện không — hãy yêu cầu nó suy luận từ sự kiện đó.
Một hệ thống có theo dõi trạng thái thực sẽ nối các dữ kiện lại. Hệ thống chỉ hồi tưởng văn bản trong ngữ cảnh thường chỉ kể một cảnh doanh trại bình thường.
Phép thử 3 — Kiểm tra ranh giới kiến thức. Nói bí mật cho một NPC ở nơi riêng tư. Hai mươi tin nhắn sau, tương tác với một NPC khác không có cách nào biết được điều đó. NPC này có hành xử như thể họ biết không? Trợ lý hội thoại phổ thông liên tục thất bại ở đây, bởi bản ghi chỉ là một ngữ cảnh duy nhất không được phân biệt.
Phép thử 4 — Kiểm tra quay lại sau thời gian dài (duy trì xuyên phiên). Đóng phiên. Quay lại sau một tuần chỉ với một câu mơ hồ: “Tôi trở về thành phố.” Không tóm tắt. Một hệ thống bền vững sẽ tiếp tục mạch truyện. Hệ thống không trạng thái sẽ hỏi bạn đó là thành phố nào.
Lưu ý về thời điểm: hãy thực hiện cả bốn phép thử sau mốc 50 tin nhắn, không phải ở tin nhắn thứ mười. Sự suy giảm không tuyến tính, và báo cáo cộng đồng nhất quán cho thấy chất lượng giảm đáng chú ý khi đã đi sâu vào một phiên thay vì ngay từ đầu.
Quản trò game AI chuyên biệt thắng về tính nhất quán của thiết lập thế giới và nhân vật, trợ lý hội thoại AI phổ thông thắng về chất lượng văn xuôi và tính linh hoạt, còn lựa chọn đúng hoàn toàn được quyết định bởi độ dài phiên chứ không phải hệ thống nào “tốt hơn”.
Chấm theo khung sáu phương diện:
| Phương diện | Trợ lý hội thoại phổ thông | Quản trò chuyên biệt (dựa trên Lorebook) | Quản trò chuyên biệt (bộ nhớ bền vững) |
|---|---|---|---|
| Tính ổn định sự thật | Mạnh lúc đầu, suy giảm theo ngữ cảnh | Mạnh với thiết lập được biên soạn | Mạnh xuyên các phiên |
| Tính toàn vẹn nhân quả | Yếu sau giữa phiên | Trung bình — phụ thuộc thiết kế thiết lập | Mạnh nhờ theo dõi trạng thái |
| Tính ổn định giọng điệu | Yếu nhất — trôi về mặc định trợ lý | Mạnh với nhân dạng được xác định | Mạnh nhờ khóa nhân dạng |
| Ranh giới kiến thức | Kém — không phân tách bản ghi | Có thể quản lý bằng các mục có điều kiện | Có thể quản lý nhờ tách chế độ |
| Trạng thái quan hệ | Kém ngoài cửa sổ hoạt động | Trung bình | Mạnh |
| Duy trì xuyên phiên | Vắng mặt theo mặc định | Thiết lập được duy trì, ngữ cảnh văn xuôi thì không | Duy trì đầy đủ |
Quy tắc quyết định:
Cấu hình tệ nhất là dùng trợ lý hội thoại phổ thông cho chiến dịch dài mà không quản lý thiết lập thủ công. Nó kết hợp sự trôi dạt nhân dạng của trợ lý phổ thông với việc không có lớp bộ nhớ bù trừ, tạo ra câu chuyện ngày càng giống như được kể bởi một người không có mặt trong nửa đầu.
Chỉ một chẩn đoán hữu ích nhất, nếu bạn chỉ thực hiện một phép thử: Phép thử 2, kiểm tra hệ quả. Hồi tưởng dễ giả mạo và khó phân biệt với may mắn. Suy luận từ một hệ quả đã lưu trữ là yếu tố phân biệt hệ thống có mô hình thế giới với hệ thống chỉ có bản ghi.