Chatbot bịa số liệu không phải vì nó cố lừa, mà vì nó được làm ra để viết câu trôi chảy và hợp ngữ cảnh, không phải để tra một cơ sở dữ liệu. Khi không có con số thật trong tầm với, nó vẫn có thể viết ra một con số trông rất hợp lý, kèm tên một báo cáo nghe rất thật. Quy tắc an toàn duy nhất: mọi con số và mọi nguồn do AI đưa ra đều là giả thuyết cho tới khi bạn tự mở được nguồn gốc.
Bài này dành cho người dùng AI để soạn tờ trình, phương án kinh doanh, bài thuyết trình hay báo cáo gửi đối tác, và muốn biết chỗ nào phải kiểm, kiểm bằng cách nào, hỏi thế nào để giảm bịa ngay từ đầu. Phần cuối có một quy trình ngắn để đưa vào nề nếp của nhóm.
Vì sao chatbot bịa, và bịa với giọng rất chắc
Mô hình ngôn ngữ học từ một lượng văn bản khổng lồ để đoán từ tiếp theo hợp lý nhất. Khi bạn hỏi "quy mô thị trường đồ uống đóng chai ở Việt Nam năm ngoái là bao nhiêu", nó không mở một bảng số nào ra đọc, trừ khi công cụ bạn dùng có chức năng tìm kiếm và thật sự đã tìm. Nó tạo ra một câu trả lời có hình dạng giống câu trả lời đúng: có con số, có đơn vị, có năm, đôi khi có cả tên tổ chức công bố.
Giọng chắc chắn không phải là dấu hiệu của độ chính xác. Mô hình không có cảm giác "không chắc" theo kiểu con người, và cách nó trình bày được huấn luyện để rõ ràng, mạch lạc. Một con số bịa và một con số đúng thường được viết bằng cùng một giọng. Các công cụ mới đã giảm bớt hiện tượng này, một số còn gắn nguồn kèm câu trả lời, nhưng không công cụ nào loại bỏ được hoàn toàn, và nguồn được gắn cũng có lúc không chứa con số được trích.
Hiện tượng này hay được gọi là "ảo giác" của AI. Tên gọi nghe vô hại, nhưng trong tài liệu kinh doanh, nó có thể thành một con số sai trong phương án vay vốn, một điều khoản không tồn tại trong thư gửi khách, hay một nghiên cứu không có thật được trích trong bài thuyết trình trước ban giám đốc. Người chịu trách nhiệm là người gửi, không phải công cụ.
Những chỗ AI hay bịa nhất trong tài liệu kinh doanh
Số liệu thị trường và quy mô ngành. Đây là loại câu hỏi người dùng hỏi nhiều nhất và cũng là chỗ dễ bịa nhất, vì số liệu thật thường nằm trong báo cáo trả phí hoặc trong niên giám ít được trích lại. Con số AI đưa ra có thể gần đúng, có thể là số của nước khác, của năm khác, hoặc hoàn toàn không có gốc.
Tên báo cáo, tên tác giả, năm xuất bản. Chatbot có thể ghép tên một tổ chức có thật với một tiêu đề báo cáo nghe hợp lý nhưng không tồn tại. Kiểu bịa này nguy hiểm vì người đọc thấy tên tổ chức quen thì tin luôn.
Số hiệu và nội dung văn bản pháp luật. AI có thể trích sai số điều, nhầm văn bản đã hết hiệu lực với văn bản đang áp dụng, hoặc diễn đạt một quy định theo hướng nó "nên là" thay vì hướng nó thật sự là. Với câu hỏi pháp lý cho tình huống cụ thể, cần hỏi người có chuyên môn; trong hệ sinh thái này, AI Cố Vấn là một lối để bắt đầu.
Trích dẫn nguyên văn. Câu trong ngoặc kép gán cho một chuyên gia, một lãnh đạo doanh nghiệp, một cơ quan có thể là câu AI tự viết. Nếu không tìm được câu đó ở nguồn gốc, đừng để nó trong ngoặc kép.
Phép tính trên số liệu bạn đưa vào. Ngay cả khi số liệu đầu vào đúng, chatbot vẫn có thể cộng sai, tính sai phần trăm, đổi đơn vị nhầm. Lỗi kiểu này khó thấy vì bảng trình bày rất gọn.
Dấu hiệu một con số hoặc một nguồn có thể đã bị bịa
Không có dấu hiệu nào chắc chắn, nhưng những điểm sau đáng để bạn dừng lại kiểm trước khi chép sang tài liệu của mình:
- Con số quá tròn hoặc quá chính xác so với loại dữ liệu đó, ví dụ quy mô một ngành ngách được nêu đến hàng trăm triệu đồng lẻ.
- Nguồn được nêu chung chung như "theo các nghiên cứu", "theo báo cáo ngành", "theo chuyên gia" mà không có tên, năm, nơi công bố.
- Hỏi lại cùng câu trong một cuộc trò chuyện mới, con số đổi đi đáng kể.
- Khi bạn hỏi "nguồn của con số này là gì", chatbot đưa ra một nguồn mới, hoặc xin lỗi và đưa con số khác.
- Tên báo cáo có vẻ thật nhưng tìm trên trang của chính tổ chức đó không thấy.
- Đường dẫn hoặc tên tệp do AI đưa ra mở không được, hoặc mở ra một trang không chứa con số đó.
- Con số rất khớp với điều bạn muốn chứng minh, đúng như bạn đã gợi ý trong câu hỏi.
Dấu hiệu cuối cùng hay bị bỏ qua nhất. Nếu câu hỏi của bạn đã ngầm chứa đáp án mong muốn, kiểu "hãy cho số liệu chứng minh thị trường này đang tăng mạnh", mô hình có xu hướng chiều theo. Hỏi trung tính hơn, như "thị trường này mấy năm gần đây biến động thế nào, nguồn nào đo", sẽ giảm áp lực chiều ý.
Quy tắc kiểm lại một con số AI đưa ra
Với mỗi con số hay nguồn AI cung cấp mà bạn định dùng trong tài liệu gửi đi, áp dụng các bước sau. Nghe có vẻ tốn công, nhưng thường chỉ vài con số quan trọng thật sự cần đi hết quy trình.
- Tách con số ra khỏi câu văn AI viết và ghi riêng vào một danh sách cần kiểm, kèm câu gốc chứa nó.
- Tự tìm nguồn gốc bằng công cụ tìm kiếm thông thường hoặc trang chính thức của tổ chức được nêu, không nhờ chính chatbot đó xác nhận.
- Mở bản gốc, tìm đúng trang, đúng bảng chứa con số. Đọc định nghĩa và mốc thời gian đi kèm.
- So sánh: con số có giống không, cùng năm không, cùng phạm vi không. Ghi lại bất kỳ khác biệt nào.
- Nếu không tìm được bản gốc trong khoảng thời gian hợp lý, xoá con số khỏi tài liệu, hoặc giữ lại nhưng ghi rõ "chưa kiểm chứng được".
- Với phép tính, tự làm lại trên bảng tính hoặc máy tính cầm tay, không dựa vào kết quả AI trình bày.
- Ghi nguồn đã kiểm vào tài liệu: tên tổ chức, tên ấn phẩm, năm, số trang hoặc tên bảng.
Một mẹo nhỏ: nếu bạn tìm được nguồn gốc, hãy trích con số trực tiếp từ nguồn gốc chứ không phải từ câu AI viết, kể cả khi hai bên giống nhau. Như vậy tài liệu của bạn đứng trên nguồn thật, không phải trên một bản diễn đạt lại.
Công cụ AI có tìm kiếm và không có tìm kiếm: kiểm khác nhau thế nào
Nhiều công cụ hiện nay có chế độ tìm trên mạng rồi tổng hợp, kèm danh sách nguồn. Chế độ này giảm bịa đáng kể nhưng sinh ra kiểu lỗi khác. Tính năng thay đổi nhanh, nên hãy kiểm phiên bản bạn đang dùng.
| Tình huống | Rủi ro chính | Cách kiểm |
|---|---|---|
| Chatbot trả lời từ trí nhớ, không tìm kiếm | Bịa con số, bịa tên nguồn, số liệu cũ | Coi mọi con số là giả thuyết; tự tìm nguồn gốc từ đầu |
| Chatbot có tìm kiếm, gắn nguồn kèm câu | Nguồn có thật nhưng không chứa con số; trích sai năm; lấy từ trang kém tin cậy | Mở từng nguồn, tìm đúng câu chứa con số; xem nguồn đó là bản gốc hay bài trích lại |
| Bạn đưa tài liệu của mình vào để AI tóm tắt | Tóm tắt thêm thắt, đổi số khi viết lại, bỏ điều kiện | Đối chiếu từng con số trong bản tóm tắt với tài liệu gốc |
| Bạn đưa số liệu vào để AI tính toán | Tính sai, đổi đơn vị nhầm, làm tròn quá tay | Tự tính lại trên bảng tính; yêu cầu AI ghi rõ công thức từng bước |
Điểm chung: nguồn được gắn kèm không có nghĩa là đã được kiểm. Nhiều người thấy có danh sách nguồn ở cuối câu trả lời thì yên tâm, trong khi chưa mở nguồn nào ra đọc.
Hỏi thế nào để giảm bịa ngay từ đầu
Bạn không loại bỏ được hoàn toàn việc AI bịa, nhưng có thể giảm đáng kể bằng cách đổi cách hỏi. Một số câu lệnh mẫu:
- "Nếu không chắc chắn về một con số, hãy nói rõ là không chắc thay vì đưa ra con số ước đoán. Được phép trả lời là không biết."
- "Hãy chỉ dùng số liệu có trong tài liệu dưới đây. Không thêm số liệu từ bên ngoài. Mỗi con số trong câu trả lời phải ghi rõ nằm ở mục nào của tài liệu."
- "Hãy liệt kê những loại nguồn đáng tin có thể chứa số liệu về chủ đề này, ví dụ cơ quan nào, loại ấn phẩm nào, để tự tìm. Không cần đưa con số."
- "Trong câu trả lời trước, con số nào bạn lấy từ nguồn cụ thể, con số nào là ước đoán? Hãy tách thành hai danh sách."
- "Hãy viết đoạn văn này, chừa chỗ trống cho số liệu dưới dạng [cần số liệu: mô tả], không tự điền số."
Câu lệnh cuối rất hữu ích khi soạn tờ trình: AI giúp phần câu chữ và bố cục, còn con số do bạn điền từ nguồn đã kiểm. Bạn tận dụng được điểm mạnh của công cụ mà không giao cho nó phần nó yếu nhất. Nhớ che thông tin khách hàng, đối tác, số liệu nội bộ nhạy cảm trước khi dán tài liệu vào bất kỳ chatbot nào.
Đưa quy tắc vào nề nếp của cả nhóm
Một người cẩn thận chưa đủ, vì tài liệu kinh doanh thường đi qua nhiều tay. Nhân viên A dùng AI soạn phần thị trường, trưởng nhóm ghép vào phương án, giám đốc trình cho đối tác. Đến bước cuối, không ai còn nhớ con số nào đến từ AI. Vì vậy cần một quy ước đơn giản ngay từ đầu: con số nào lấy từ AI mà chưa kiểm thì đánh dấu, ví dụ tô màu vàng trong bản nháp, và không tài liệu nào được gửi ra ngoài khi còn ô vàng.
Thứ hai, ghi nguồn ngay khi đưa số vào, không để dành cuối cùng. Cuối cùng thì không ai nhớ nữa. Một cột "nguồn" trong bảng tính hoặc một chú thích nhỏ cuối trang là đủ. Người duyệt nhìn vào sẽ biết ngay con số nào có gốc, con số nào là lời ước đoán.
Thứ ba, khi phát hiện một con số bịa đã lọt vào tài liệu gửi đi, sửa công khai và nhanh: gửi bản đính chính cho người đã nhận, ghi rõ con số nào sai và con số đúng là gì. Việc này khó chịu, nhưng ít tốn uy tín hơn nhiều so với để đối tác tự phát hiện. Rồi xem lại vì sao quy tắc đánh dấu không chặn được, để sửa quy trình chứ không chỉ sửa một con số.
Câu hỏi thường gặp
Vì sao chatbot lại bịa số liệu?
Vì mô hình ngôn ngữ được làm ra để viết câu hợp ngữ cảnh, không phải tra cứu một cơ sở dữ liệu. Khi không có con số thật trong tầm với, nó vẫn có thể tạo ra một con số trông hợp lý, với giọng văn chắc chắn y như khi đúng.
Công cụ AI có gắn nguồn kèm câu trả lời thì có tin được không?
Đáng tin hơn công cụ không gắn nguồn, nhưng vẫn phải mở từng nguồn ra xem có chứa đúng con số đó, đúng năm đó không. Có trường hợp nguồn có thật nhưng không chứa con số được trích, hoặc là bài trích lại từ nơi khác.
Hỏi lại chatbot xem con số đó có đúng không có được không?
Không nên dựa vào cách đó, vì chatbot có thể xác nhận sai, hoặc xin lỗi rồi đưa ra một con số khác cũng không có gốc. Cách đúng là tự tìm nguồn gốc bằng công cụ tìm kiếm thông thường hoặc trang chính thức của tổ chức được nêu.
Làm sao để AI ít bịa số liệu hơn?
Cho phép nó trả lời không biết, yêu cầu chỉ dùng số liệu trong tài liệu bạn đưa vào, yêu cầu tách con số có nguồn và con số ước đoán, hoặc bảo nó chừa chỗ trống để bạn tự điền số liệu đã kiểm vào sau.
Nhóm làm việc nên quản lý con số do AI đưa ra thế nào?
Đánh dấu mọi con số lấy từ AI mà chưa kiểm, ví dụ tô màu trong bản nháp, ghi nguồn ngay khi đưa số vào, và quy định không tài liệu nào được gửi ra ngoài khi còn con số chưa kiểm chứng.
Lỡ gửi tài liệu có con số bịa cho đối tác thì xử lý ra sao?
Gửi bản đính chính sớm cho mọi người đã nhận, ghi rõ con số nào sai và con số đúng là gì cùng nguồn. Sau đó xem lại vì sao quy trình kiểm không chặn được để sửa từ gốc, không chỉ sửa một con số.