Mô phỏng AI so với dự báo truyền thống: Khảo sát, nhóm chuyên gia, mô hình

Mô phỏng đám đông bằng AI không thay thế các cuộc thăm dò ý kiến, nhóm thảo luận, đánh giá của chuyên gia hay mô hình thống kê; nó lấp đầy khoảng trống giữa các phương pháp này. Các phương pháp truyền thống đo lường những gì mọi người nghĩ ngày hôm nay hoặc suy luận từ dữ liệu trong quá khứ, trong khi mô phỏng cho phép bạn quan sát cách đám đông có thể phản ứng với một điều gì đó chưa xảy ra, từng bước một, và đặt câu hỏi tại sao. Các dự báo mạnh mẽ nhất kết hợp cả hai: mô phỏng để khám phá và giải thích, và các phương pháp cổ điển để đo lường và kiểm chứng.

Những điểm mạnh của phương pháp dự báo truyền thống

Mỗi phương pháp đã được thiết lập đều giải đáp một loại câu hỏi cụ thể, và mỗi phương pháp đều có ưu điểm riêng.

• Các cuộc thăm dò và khảo sát đo lường sự phân bố ý kiến hiện tại trong một nhóm dân cư nhất định. Với một mẫu khảo sát tốt và cách đặt câu hỏi cẩn thận, chúng cung cấp những con số mà bạn có thể bảo vệ được.
• Các nhóm thảo luận và phỏng vấn giúp bộc lộ ngôn ngữ, cảm xúc và những phản đối mà bảng câu hỏi không bao giờ có thể nêu ra. Chúng cho thấy cách mọi người nói về một chủ đề, chứ không chỉ đơn thuần là những gì họ thích.
• Đánh giá của chuyên gia mang lại bối cảnh: một người lãnh đạo truyền thông hoặc nhà phân tích chính sách giàu kinh nghiệm biết những bên liên quan nào có xu hướng leo thang vấn đề và những vấn đề nào tự lắng xuống.
• Các mô hình thống kê và kinh tế lượng có thể ngoại suy một cách đáng tin cậy khi tương lai giống với quá khứ và có đủ dữ liệu lịch sử.

Điểm yếu chung của họ là: họ đều gặp khó khăn với những điều mới mẻ. Một cuộc khảo sát không thể đo lường phản ứng đối với một thông báo mà chưa ai từng thấy nếu không cho mọi người xem, điều này có thể là bất khả thi trước khi quyết định được công bố rộng rãi. Một mô hình được huấn luyện dựa trên các lần ra mắt sản phẩm trước đây không thể hiểu gì về một lĩnh vực chưa từng tồn tại. Các chuyên gia có thể bị ràng buộc bởi những khủng hoảng gần đây nhất mà họ gặp phải.

Những tính năng bổ sung của mô phỏng đám đông bằng AI

Một mô phỏng đám đông bằng trí tuệ nhân tạo (AI) bắt đầu từ chính dữ liệu của bạn. Trong InfoDome bạn tải lên các tài liệu như một bài báo, một kế hoạch, một báo cáo hoặc một dự thảo chính sách, và mô tả bằng ngôn từ đơn giản những gì bạn muốn dự đoán. Hệ thống sẽ trích xuất biểu đồ tri thức về con người, tổ chức, nhóm và các mối quan hệ, sau đó tạo ra hàng trăm tác nhân AI với tính cách, vị trí và bộ nhớ dài hạn riêng. Các tác nhân này tương tác song song trên hai nền tảng mô phỏng, một nguồn cấp dữ liệu giống Twitter và một diễn đàn giống Reddit , trong một số vòng nhất định, và bộ nhớ của chúng được cập nhật khi các sự kiện diễn ra.

Thiết kế đó mang lại cho bạn những thứ mà bộ công cụ truyền thống không có:

• Thay vì chỉ nhìn vào một khoảnh khắc, hãy quan sát diễn biến thực tế. Bạn sẽ thấy ai phản ứng trước, ai khuếch đại vấn đề, lập luận nào lan rộng và quan điểm thay đổi như thế nào trong 10, 20 hoặc 40 vòng tranh luận.
• Bạn có thể đặt câu hỏi về những lời giải thích này. Sau khi quá trình chạy thử, một chuyên viên phân tích sẽ viết báo cáo dự đoán, và bạn có thể phỏng vấn bất kỳ chuyên viên nào hoặc hỏi chuyên viên phân tích thêm các câu hỏi về lý luận của họ.
• Kiểm thử giả định an toàn. Bạn có thể thay đổi một yếu tố đầu vào, chẳng hạn như một cụm từ, một mức giá hoặc một ngày tháng, và chạy lại mà không để lộ bất cứ thông tin nào cho công chúng thực sự.
• Nhiều đối tượng khán giả cùng lúc. Bạn có thể chọn tối đa 10 quốc gia khán giả; các tác nhân được chia đều giữa các quốc gia này, trong khi các thực thể có tên thật vẫn giữ quốc gia của riêng mình.
• Tốc độ và chi phí. Một kịch bản có thể được chuẩn bị trong vài phút, điều này giúp việc thử nghiệm các ý tưởng mà trước đây không thể xứng đáng với một ngân sách nghiên cứu đầy đủ trở nên khả thi.

Giới hạn trung thực của mô phỏng

Mô phỏng là một giả thuyết có thể được xem xét lại, chứ không phải là một phép đo. Điều quan trọng là phải hiểu rõ những gì nó không thể làm được.

• Nó phản ánh các thông tin đầu vào. Nếu tài liệu bỏ sót một nhóm quan trọng hoặc nêu sai sự thật, các tác nhân sẽ không bịa đặt ra thực tế còn thiếu. Những khoảng trống trong biểu đồ trở thành những khoảng trống trong dự báo.
• Phương pháp này không tạo ra tỷ lệ phần trăm mang tính đại diện về mặt thống kê. Tỷ lệ chia sẻ của các tác nhân là tín hiệu về định hướng và cơ chế, chứ không phải là sự thay thế cho một cuộc thăm dò ý kiến lấy mẫu.
• Các mô hình ngôn ngữ cũng mang những thành kiến riêng. Các tác nhân có thể diễn đạt lưu loát hơn hoặc lý trí hơn so với đám đông thực tế, và một số sắc thái văn hóa có thể bị đơn giản hóa.
• Những cú sốc hiếm gặp vẫn cứ hiếm gặp. Mô phỏng chỉ khám phá những con đường khả thi; nó không đảm bảo rằng thế giới thực sẽ đi theo con đường có khả năng xảy ra nhất.

Chúng tôi sẽ hướng dẫn cách kiểm tra những điểm yếu này một cách có hệ thống trong bài viết về cách xem xét lại dự báo .

So sánh các phương pháp trong thực tế

Thay vì hỏi phương pháp nào là "tốt nhất", hãy hỏi câu hỏi bạn đang thắc mắc là gì.

• "Mọi người đang nghĩ gì ngay bây giờ?" Hãy sử dụng phương pháp thăm dò ý kiến. Mô phỏng có thể gợi ý những câu hỏi cần đặt ra, nhưng số liệu nên đến từ những người tham gia thực tế.
• "Mọi người sẽ phản ứng như thế nào với điều mới mẻ?" Hãy bắt đầu bằng mô phỏng để lập bản đồ các phản ứng có thể xảy ra, sau đó xác thực những phản ứng quan trọng nhất bằng một cuộc khảo sát nhỏ hoặc một vài cuộc phỏng vấn.
• "Tại sao điều này lại có thể sai?" Cả mô phỏng và nhóm thảo luận đều rất hiệu quả ở đây. Mô phỏng nhanh hơn và cho phép bạn chạy lại; nhóm thảo luận mang lại trải nghiệm thực tế, chân thực.
• "Xu hướng quý tới sẽ như thế nào?" Các mô hình thống kê hữu ích khi lịch sử ổn định; mô phỏng giúp ích khi có sự thay đổi cấu trúc phá vỡ mô hình trong quá khứ.
• "Trong ba lựa chọn, lựa chọn nào có rủi ro thấp nhất?" Hãy thực hiện cùng một kịch bản ba lần với một biến số được thay đổi và so sánh kết quả, sau đó để các chuyên gia đánh giá sự đánh đổi giữa các lựa chọn.

Ví dụ minh họa: cải cách giá vé giao thông công cộng trong thành phố

Hãy tưởng tượng một hội đồng thành phố đang chuẩn bị thay thế vé lẻ bằng giá vé theo khu vực. Nhóm này có một bản dự thảo chính sách, bản tóm tắt các khiếu nại năm ngoái và hai bài báo địa phương.

1. Một bước đi truyền thống. Một cuộc khảo sát người dân hiện tại cho thấy 58% cư dân đánh giá phương tiện giao thông công cộng là "chấp nhận được". Hữu ích, nhưng nó không nói lên điều gì về cuộc cải cách.
2. Mô phỏng. Nhóm nghiên cứu tải lên bản dự thảo và các bài báo rồi đặt câu hỏi: "Người đi làm, sinh viên, người về hưu và truyền thông địa phương sẽ phản ứng như thế nào trong hai tuần đầu tiên sau khi công bố?" Các thành viên tham gia bao gồm các nhóm người đi làm, một hội sinh viên, một hiệp hội người về hưu, hai ủy viên hội đồng đối lập và các nhà báo địa phương. Sau 20 vòng, báo cáo cho thấy làn sóng phản đối mạnh nhất không đến từ chính giá cả mà từ sự hiểu lầm: nhiều người tham gia tin rằng các khu vực ngoại ô sẽ phải trả gấp đôi, điều mà bản dự thảo không đề cập đến.
3. Theo dõi. Nhóm điều tra phỏng vấn người đại diện hội sinh viên và nhà phân tích. Sự nhầm lẫn bắt nguồn từ một câu không rõ ràng và một ví dụ bị thiếu.
4. Chạy lại. Câu được viết lại, một ví dụ về máy tính tính toán giá vé được thêm vào, và tình huống được chạy lại. Sự hiểu lầm giảm bớt và cuộc tranh luận chuyển sang thời điểm thay đổi.
5. Kiểm chứng. Trước khi công bố, nhóm truyền thông thử nghiệm hai phiên bản văn bản với một nhóm nhỏ cư dân thực tế. Nhóm này xác nhận sự hiểu lầm chính, và hội đồng công bố phiên bản rõ ràng hơn.

Mô phỏng này không dự đoán tỷ lệ phiếu bầu. Nó tìm ra một cơ chế, cung cấp cho nhóm một cách tiết kiệm để thử nghiệm giải pháp và cho họ biết chính xác những gì cần xác minh với người thật.

Làm thế nào để kết hợp mô phỏng với nghiên cứu truyền thống?

Quy trình làm việc thực tế trông như thế này:

• Trước tiên hãy khám phá. Sử dụng mô phỏng ngay từ giai đoạn đầu, khi việc thay đổi ý tưởng vẫn còn dễ dàng và ít tốn kém, để lập bản đồ các bên liên quan, các lập luận và các điểm xung đột tiềm tàng. Các kịch bản lập kế hoạch và khảo sát tổng hợp của chúng tôi là những điểm khởi đầu tốt.
• Thu hẹp phạm vi tìm kiếm. Chọn ra hai hoặc ba phát hiện mà nếu chúng đúng sẽ thay đổi quyết định của bạn.
• Đo lường. Xác minh chính xác những phát hiện đó bằng khảo sát, hội đồng hoặc phỏng vấn. Giờ đây, bạn chỉ sử dụng ngân sách nghiên cứu vào những việc thực sự quan trọng.
• Theo dõi. Sau khi khởi chạy, hãy so sánh phản ứng thực tế với phản ứng mô phỏng. Nếu có sự khác biệt, hãy cập nhật tài liệu và chạy lại.

Điều này giúp con người nắm quyền quyết định. Mô phỏng mở rộng phạm vi quan sát; con người là người đưa ra quyết định.

Nếu bạn muốn thử nghiệm tính năng này với tài liệu của riêng mình, bạn có thể mô tả nhiệm vụ trong bảng điều khiển InfoDome trước khi đăng ký. Gói dịch vụ có giá 29€ mỗi tháng, bao gồm ngân sách sử dụng AI hàng tháng là 9€ và số lượng dự án không giới hạn, và có thể hủy bỏ bất cứ lúc nào.