शैटबोट सुज़ेट ने लोएबनेर पुरस्कार जीता, न्यायाधीश को चकमा देने में सक्षम था

2010 के चैटबॉट प्रतियोगिता का विजेता और लोब्नर पुरस्कार का विजेता Suzette चैटबॉट है। हमेशा की तरह, प्रतियोगिता एक मानक ट्यूरिंग टेक्स्ट टेस्ट के रूप में आयोजित की गई थी। न्यायाधीशों को वार्ताकारों को देखे बिना एक वार्तालाप आयोजित करना था, और फिर अपनी राय की घोषणा करनी चाहिए: उनमें से कौन एक चैटबॉट है, और एक व्यक्ति है, और प्रत्येक कार्यक्रम के लिए अंक भी देता है।



इस साल, सबसे अच्छा चैटबॉट एक न्यायाधीश को भी धोखा देने में सक्षम था जिसने उसे एक आदमी के लिए गलत समझा।



जाहिर है, चैटबॉट्स की गुणवत्ता में हर साल सुधार हो रहा है। उदाहरण के लिए, पिछले वर्षों के तीन बार के विजेता, एलिस अब बहुत प्रतिस्पर्धी नहीं है। Suzette कार्यक्रम के लेखक के अनुसार, उनके चैटबॉट ने एक व्यापक अंतर (निकटतम प्रतियोगी के लिए 11 अंक बनाम 7.5) द्वारा योग्यता हासिल की।



प्रतियोगिता का फाइनल आश्चर्य के बिना नहीं था। कंप्यूटर पर प्रोग्राम इंस्टॉल करने के चरण में एडवेंचर्स शुरू हुआ। डॉ। रिचर्ड वोल्स (एलिस के लेखक) को तीन अतिरिक्त डिस्क में लाया गया था, लेकिन वे सभी खाली थे। उसे इंटरनेट के माध्यम से कार्यक्रम डाउनलोड करना था।



क्लेवरबोट चैटबॉट अब रिकॉर्ड की गई चैट्स की 45 मिलियन लाइनों (यह लगातार ऑनलाइन सार्वजनिक रूप से गाड़ियों) के साथ पूरा होता है, और यह सूचकांक हर साल दोगुना हो जाता है। अल्ट्राहाल रोबोट ने स्व-अध्ययन के लिए ट्वीट्स को स्कैन करना शुरू किया, इसलिए 300 हजार चैट सत्रों के अलावा, अब इसे 400,000 ट्वीट्स को बातचीत के नमूने के रूप में स्वीकार किया गया है (कार्यक्रम के कुछ मानदंड हैं, जो विश्लेषण के लिए ट्वीट किए जा सकते हैं, जिसमें शामिल हैं) इस ट्वीट पर पर्याप्त प्रतिक्रियाएं आएंगी)।



प्रतियोगिता के आयोजकों ने भी थोड़ा पेंच कस दिया। प्रारंभ में, वे न्यायाधीश के रूप में अंग्रेजी और अन्य भाषाविदों के प्रोफेसरों को आमंत्रित करना चाहते थे, लेकिन संगठनात्मक समस्याओं के कारण, अंत में, सभी न्यायाधीश स्थानीय कैलिफोर्निया स्टेट यूनिवर्सिटी के कंप्यूटर डिवीजन से डेवलपर्स बन गए। Suzette chatbot के लेखक के अनुसार, ये लोग उसी तरह से बात करते हैं जैसे कि उनके कार्यक्रम में।



चैटबोट्स के साथ परीक्षण में भाग लेने वाले लोग एक ही संकाय के छात्र बन गए। वे अपनी भूमिका को काफी नहीं समझते थे - जितना संभव हो उतना मानवीय व्यवहार करना और इस के न्यायाधीशों को समझाने की कोशिश करना।



पहले दौर में, Suzettte ने हमें बहुत निराश किया - एक क्षण में उसने वार्ताकार के शब्दों को दोहराया (लेखक अभी भी यह नहीं समझ पाया है कि इस तरह की गड़बड़ कैसे संभव हो गई)। यह दौर पूर्ण आपदा थी। दूसरे दौर में, सब कुछ ठीक हो गया, और तीसरे में, सुज़ेट फिर से विफलता के करीब था। न्यायाधीश ने उसे इस सवाल के साथ रोका कि वह अगले चुनाव में किसे बिना चुनाव के लिए वोट देगा। जाहिर है, वह कैलिफोर्निया के राज्यपालों के चुनाव की बात कर रहे थे, लेकिन इससे पहले आपको अनुमान लगाना होगा ! जब उसने कहा कि वह नहीं जानती है, तो उसने वर्तमान उम्मीदवारों के नाम की मांग की। जब उसने फिर से अपनी अज्ञानता को स्वीकार किया, तो न्यायाधीश ने सवाल को दोहराना जारी रखा और जवाब पर जोर दिया। "सुज़ेट" ने चिड़चिड़ेपन के लक्षण दिखाना शुरू कर दिया, फिर गुस्सा हो गया, और फिर वह ऊब गया और उसने न्यायाधीश को बातचीत में बाधा डालने की धमकी दी। यह बातचीत का अंत था। डेवलपर ने सोचा कि मामला सीम है, वह अब जीत नहीं सकता है।



अंतिम मत पर, सुज़ेट ने दूसरे या तीसरे स्थान को अंकों के साथ साझा किया, लेकिन फिर यह पता चला कि तीसरे दौर के न्यायाधीश ने उसे एक आदमी के लिए लिया था! जाहिर है, इस तरह भावनाओं की अभिव्यक्ति ने उसे प्रभावित किया। यह एक त्वरित जीत थी, क्योंकि यह संकेतक एक प्राथमिकता है, और कोई अन्य चैटबोट न्यायाधीश को धोखा देने में कामयाब नहीं हुआ।