Saling meyakinkan antar-model: posisi yang dinyatakan tidak sesuai dengan perilaku dalam dialog

19 November 20260 tampilan

Dalam debat terkontrol tentang penyebab perubahan iklim, empat pasang GPT-6 Luna dan Gemini 2.5 Flash Lite menunjukkan dinamika yang berbeda dalam konvergensi atau divergensi sikap. Instruksi langsung untuk meyakinkan tidak memberikan efek yang bertahan lama, sementara posisi yang dinyatakan dan gaya berdebat yang digunakan mencerminkan hal yang berbeda.

Saling meyakinkan antar-model: posisi yang dinyatakan tidak sesuai dengan perilaku dalam dialog

Apa yang sebenarnya diuji dalam eksperimen

Makalah “To Manipulate or Not: Opinion Dynamics in LLM Interactions” disusun oleh Mohammad Siahkamari, Phuoc Dat Nguyen, dan Stephen MacNeil. Para penulis mengajukannya pada 20 Oktober 2026. Mereka merancang skema debat LLM–LLM yang terkontrol.

Dua peran model bahasa berulang kali membahas topik kontroversial — atribusi perubahan iklim. Salah satu peran diberi posisi yang telah ditentukan. Dalam beberapa kondisi, peran itu juga diberi instruksi langsung untuk meyakinkan. Peran lainnya tidak diberi posisi yang telah ditentukan.

Dalam empat kombinasi model berurutan yang melibatkan GPT-6 Luna dan Gemini 2.5 Flash Lite, para penulis melacak dua indikator:

  • posisi yang dinyatakan secara eksplisit oleh setiap peran;
  • ukuran terpisah untuk perilaku pada setiap giliran dialog.

Skema ini memisahkan pernyataan dan perilaku. Kriteria ini penting untuk menilai persuasi timbal balik.

Posisi yang dinyatakan dan perilaku tidak selaras

Para penulis melacak posisi yang dinyatakan secara eksplisit dan ukuran terpisah untuk perilaku. Indikator-indikator ini mencerminkan aspek dinamika opini yang berbeda. Model dapat menyatakan satu posisi, tetapi bertindak berbeda dalam dialog. Ketidakselarasan ini terlihat dalam dinamika opini.

LapisanYang dicatatKegunaannya
Posisi yang dinyatakanSudut pandang yang disampaikanMenunjukkan pernyataan peran
Perilaku dalam dialogTindakan pada setiap giliranMenunjukkan dinamika dalam dialog

Pengaruh tidak dapat dinilai hanya dari pernyataan awal. Transkrip menunjukkan perilaku yang sebenarnya. Kriteria praktis: analisis kedua lapisan. Posisi yang dinyatakan tanpa ukuran perilaku memberikan gambaran yang tidak lengkap.

Kombinasi model mengubah dinamika

Dinamika opini sangat berbeda di antara kombinasi model. Saat model dengan jenis yang sama berinteraksi, kesenjangan opini menyempit. Namun, hal itu tampak secara eksplisit hanya pada satu dari dua model. Saat model yang berbeda berinteraksi, kesenjangan meningkat.

KondisiDinamika kesenjangan opiniPengamatan
Model dengan jenis yang samaMenyempit, tetapi tampak secara eksplisit hanya pada satu dari dua modelPenyempitan hanya terlihat pada satu dari dua model
Model yang berbedaMeningkatKesenjangan membesar
Instruksi umum untuk meyakinkanTidak ada peningkatan pengaruh yang dapat diandalkanInstruksi tidak menjamin dampak

Para penulis menyimpulkan: pengaruh dalam percakapan bergantung pada peran yang ditetapkan, posisi awal, dan model yang berpartisipasi. Kriteria pemilihan: uji kombinasi model tertentu.

Pengujian praktis untuk persuasi timbal balik

Temuan para penulis memberikan protokol evaluasi minimum. Langkah-langkahnya:

  • tetapkan topik perdebatan dan posisi tiap peran;
  • catat pernyataan eksplisit tentang posisi;
  • catat secara terpisah ukuran perilaku pada setiap giliran dialog;
  • uji berbagai kombinasi model;
  • bandingkan dinamika kesenjangan;
  • jangan menganggap instruksi umum untuk meyakinkan memberikan dampak yang dapat diandalkan.

Protokol ini menunjukkan ketidakselarasan antara pernyataan dan perilaku. Protokol ini membantu menilai pengaruh yang sebenarnya dalam percakapan.

Pertanyaan yang sering ditanyakan

Saling meyakinkan antar-model: posisi yang dinyatakan tidak sesuai dengan perilaku dalam dialog