Tartışan ve Oylayan Aracılar

Tek bir modelin yanıtı, hatalar ve aşırı güven de içeren bir dağılımdan alınmış tek bir örnektir. Birden çok ajan çalıştırıp toplulaştırma yapmak — oylama veya yapılandırılmış tartışma yoluyla — hataları ortaya çıkarmak ve daha güvenilir sonuçlara yaklaşmak için bağımsızlıktan ve anlaşmazlıktan yararlanır.

• Oylama, bağımsız rastgele hataları yumuşatır.
• Tartışma, hatalı akıl yürütmeyi incelemeye açar.

En basit toplulaştırma yöntemi şudur: aynı soru için birkaç bağımsız akıl yürütme yolu örnekleyin ve nihai answer değerini çoğunluğa göre seçin. Farklı zincirler çoğu zaman aynı doğru yanıta ulaşırken hatalar dağılır; bu nedenle mod, tek bir yoldan daha güvenilirdir.

Yanıt uzayı ayrık olduğunda ve yollar gerçekten bağımsız olduğunda en iyi sonucu verir.

Oylama yalnızca hatalar bağımsız olduğunda yararlıdır. Tüm ajanlar aynı modeli, istemi ve önyargıyı paylaşırsa birlikte başarısız olurlar ve oylama yalnızca ortak bir hatayı büyütür. Çeşitlilik sağlayın: farklı sıcaklıklar, farklı istem çerçeveleri, farklı ayrıştırmalar veya farklı modeller kullanın.

İlişkili oy verenler sahte güven yaratır — bağımsızlık olmadan uzlaşmaya varmanın tehlikesi budur.

Tartışmada ajanlar ilk yanıtlarını üretir, ardından birbirlerinin akıl yürütmesini okuyup turlar boyunca revise eder. Karşıt savlara maruz kalmak, ajanların kendi hatalarını fark etmesini ve zayıf konumlardan vazgeçmesini sağlar; böylece çoğu zaman başladıkları herhangi bir yanıttan daha iyi bir answer üzerinde uzlaşırlar.

• 1. tur: bağımsız yanıtlar.
• 2. tur ve sonrası: akranların savlarını dikkate alarak eleştirme ve revise etme.

Tartışma yanlış bir nedenle uzlaşmaya dönüşebilir: ajanlar daha iyi bir savı izlemek yerine kendinden emin bir akrana boyun eğer. Buna karşı koymak için ajanlara fikirlerini yalnızca savların gücüne dayanarak değiştirmelerini, baskı altında doğru konumlarını savunmalarını ve kendilerini değiştiren belirli savı belirtmelerini söyleyin.

Amaç yapıcı anlaşmazlıktır; erken uzlaşma başarısızlıktır.

Tartışmacıların uzlaşmasını ummak yerine, son konumları ve savları okuyup gerekçeli bir karar veren tarafsız bir yargıç ekleyin. Yargıç bir tartışmacı değildir ve herhangi bir çıkarı yoktur; bu da en yüksek sesle konuşanın etkisini azaltır.

Savunuculuğu karar vermeden ayırmak, güçlü ve denetlenebilir bir örüntüdür.

Tüm oylar eşit değildir. Ajanlar kalibre edilmiş güven düzeyleri bildirebilir ve toplu sonucu buna göre ağırlıklandırabilir veya güveni düşük oyları çıkarabilirsiniz. Dikkatli olun: model güveni çoğu zaman iyi kalibre edilmez; bu nedenle ağırlıklandırmaya güvenmeden önce doğruluğu gerçekten artırdığını doğrulayın.

• Güveni yalnızca kalibre edilmişse ağırlık olarak kullanın.
• Aksi durumda basit çoğunluk daha güvenlidir.

Toplulaştırma, maliyeti ajan ve tur sayısıyla doğrusal olarak artırır; ancak doğruluk kazanımları giderek azalır. İlk birkaç ek örnek çok yardımcı olur; onuncu örnek ise nadiren aynı katkıyı sağlar. Sayıyı deneysel olarak ayarlayın ve marjinal doğruluk artık ek harcamayı haklı çıkarmadığında durun.

adaptive durdurma — uzlaşma güçlü olduğunda erken durmak — kolay öğelerde bütçe tasarrufu sağlar.

Oylama, açık ve ayrık bir answer ile bağımsız örneklerin bulunduğu görevlere uygundur. Tartışma ise akıl yürütmenin başarısızlık noktası olduğu görevlere — çok adımlı kanıtlara ve ince kusurlar içeren planlara — uygundur; çünkü değer, sonuçları saymakta değil, akıl yürütme zincirini eleştirmektedir.

Yöntemi hataların bulunduğu yere göre seçin: answer içinde mi (oylama), yoksa akıl yürütmede mi (tartışma)?

Ajanlar uzlaşmadığında ne olacağını tanımlayın: oylamada eşitlik, tartışmada kilitlenme. Sistemin döngüye girmesine veya rastgele seçim yapmasına izin vermek yerine belirlenimci bir eşitlik bozucu kullanın (yargıcın kararı, en düşük riskli seçenek veya bir insana üst makama iletme).

• Tartışma turlarını sınırlayın; kilitlenme durumunda yargıç karar versin veya konuyu üst makama iletin.
• “Uzlaşma yok” sonucunu geçerli ve eyleme dönüştürülebilir bir sonuç olarak ortaya koyun.

Güvenilir bir uzlaşma için gerçek çeşitlilik sağlayarak oy verenlerin bağımsızlığını güvence altına alın, ayrık yanıtlar için oylamayı ve akıl yürütme ağırlıklı görevler için tartışmayı seçin, yalnızca savın gücüne dayalı değiştirmeyle dalkavukluğa karşı koruma sağlayın, karar verme için tarafsız bir yargıç ekleyin, güveni yalnızca kalibre edilmişse ağırlıklandırın, maliyeti denetlemek için adaptive olarak durun ve üst makama iletmeyle birlikte belirlenimci eşitlik bozma kuralları tanımlayın. Anlaşmazlık bir kaynaktır; onu bilinçli biçimde yönetin.

Yedisi de aynı modeli, istemi ve sıcaklığı kullanan yedi ajan çalıştırıyor, ardından daha yüksek güvenilirlik bekleyerek yanıtlarını çoğunluk oyuyla seçiyorsunuz.

Birden çok ajanı toplulaştırmak, bağımsızlıktan ve anlaşmazlıktan yararlanarak güvenilirliği artırır. Ayrık yanıtlar için öz tutarlılık oylamasını, akıl yürütme ağırlıklı görevler için çok ajanlı tartışmayı kullanın; ancak bunu yalnızca oy verenler gerçekten çeşitli olduğunda yapın — ilişkili ajanlar ortak önyargıyı büyütür. Dalkavukluğa karşı yalnızca savın gücüne dayalı değiştirmeyle koruma sağlayın, karar vermesi için tarafsız bir yargıç ekleyin, güveni yalnızca kalibre edilmişse ağırlıklandırın, maliyeti denetlemek için adaptive olarak durun ve üst makama iletmeyle birlikte belirlenimci eşitlik bozma kuralları tanımlayın.