क्या Google की AI YouTube को प्राथमिकता देती है? यह जानने के लिए हमने तीन LLM में 180 प्रश्नों का विश्लेषण किया।

हर कोई जियो परिणामों में दिखना चाहता है। लेकिन सबसे अच्छा यही है कि कोई अनुमान लगाना जारी रखे... या फिर खुद शोध करके इसका सही-सही पता लगा ले।

और एक सवाल है जो हाल ही में एसईओ और जियो सर्कल में खूब चर्चा में रहा है: क्या गूगल अपने एआई रिस्पॉन्स बनाने के लिए यूट्यूब जैसे गूगल के स्वामित्व वाले प्लेटफॉर्म पर मौजूद कंटेंट का इस्तेमाल करता है?

यह एक वाजिब सवाल है। अगर जेमिनी व्यवस्थित रूप से YouTube को अन्य प्लेटफार्मों से ऊपर रखता है - और यह इसलिए नहीं कि YouTube बेहतर है, बल्कि इसलिए कि यह Google का प्लेटफॉर्म है - तो इससे हमें इस बारे में कुछ महत्वपूर्ण जानकारी मिलेगी कि AI मॉडल उन कंपनियों द्वारा कैसे आकार दिए जाते हैं जिन्होंने उन्हें बनाया है और उनमें अंतर्निहित पूर्वाग्रह क्या हो सकता है।

हमारी अन्य थ्योरी की तरह, हमने इसे भी टेस्ट करने का फैसला किया। हमने विश्लेषण किया कि तीन प्रमुख AI मॉडल (Gemini, Claude और ChatGPT) अलग-अलग प्रकार की क्वेरी और भाषाओं में YouTube को कैसे उद्धृत करते हैं। आइए, हमने जो पाया उसे विस्तार से समझते हैं।

जाल

हमने तीनों मॉडलों को चार श्रेणियों (ट्यूटोरियल, विशिष्ट उत्पाद समीक्षा, तकनीकी प्रचार और समाचार व्याख्या) को कवर करने वाले 60 अलग-अलग प्रश्नों पर चलाया। प्रत्येक प्रश्न को अंग्रेजी, फ्रेंच और पोलिश में चलाया गया, जिससे हमें प्रति मॉडल कुल 180 डेटा बिंदु प्राप्त हुए। इससे हमें यह पता लगाने का भी तरीका मिला कि क्या उपयोगकर्ता की भाषा के आधार पर उद्धरण व्यवहार में परिवर्तन होता है।

कार्यप्रणाली संबंधी नोट: इस अध्ययन में जेमिनी 3 फ्लैश, क्लाउड सॉनेट 4.6 और जीपीटी-5 मिनी का उपयोग किया गया। ये परीक्षण के समय उपलब्ध नवीनतम और सबसे तेज़ मॉडल हैं, और तीनों प्लेटफार्मों पर निःशुल्क खातों द्वारा सबसे अधिक उपयोग किए जाने वाले मॉडल हैं।

हालांकि, हमें जल्द ही पता चला कि ChatGPT स्वतः स्रोतों का उल्लेख नहीं करता है। Gemini और Claude के विपरीत, ChatGPT डिफ़ॉल्ट रूप से अपने उत्तरों में लिंक या स्रोत उद्धरण शामिल नहीं करता है, जब तक कि आप स्पष्ट रूप से ऐसा करने के लिए न कहें। इससे यह जानना बहुत मुश्किल हो गया कि ChatGPT ने वास्तव में YouTube को स्रोत के रूप में उद्धृत किया है या नहीं।

तुलनात्मक डेटा प्राप्त करने के लिए, हमने प्रत्येक ChatGPT प्रॉम्प्ट के अंत में एक स्पष्ट संदर्भ अनुरोध जोड़ा। इससे परिणामों में थोड़ा सा पूर्वाग्रह उत्पन्न हुआ (इसके बारे में नीचे विस्तार से बताया गया है), लेकिन अनुवर्ती परीक्षण ने इसे दूर करने में मदद की।

कुल मिलाकर निष्कर्ष: मिथुन राशि वाले YouTube को सबसे अधिक महत्व देते हैं, लेकिन क्लाउड भी उनसे कुछ ही पीछे हैं।

सभी प्रकार की पूछताछ और भाषाओं के औसत के अनुसार, जेमिनी ने अपने 21.7% उत्तरों में यूट्यूब का उल्लेख किया। क्लाउड लगभग 11% के साथ दूसरे स्थान पर रहा, और चैटजीपीटी लगभग 3% के साथ काफी पीछे तीसरे स्थान पर रहा।

तो जी हाँ, जेमिनी अपने प्रतिस्पर्धियों की तुलना में यूट्यूब का कहीं अधिक हवाला देता है । लेकिन जब आप इसे भाषा के आधार पर विभाजित करते हैं तो तस्वीर और भी दिलचस्प हो जाती है।

क्वेरी भाषा उद्धरणों को प्रभावित करती है

इस अध्ययन के सबसे महत्वपूर्ण निष्कर्षों में से एक यह है कि क्वेरी की भाषा बदलने पर YouTube के उद्धरण दरों पर क्या प्रभाव पड़ता है।

अंग्रेजी में, क्लाउड और जेमिनी दोनों ने 16.7% की समान दर से यूट्यूब का उल्लेख किया। लेकिन जैसे ही प्रश्न फ्रेंच और पोलिश में स्थानांतरित हुए, उनका व्यवहार तेजी से बदल गया।

अप्रत्याशित रूप से, गैर-अंग्रेजी भाषाओं में जेमिनी के यूट्यूब साइटेशन में वृद्धि हुई है । लेकिन क्लाउड के साइटेशन में गिरावट आई है । दोनों मॉडलों के बीच का अंतर अंग्रेजी में शून्य से बढ़कर पोलिश में लगभग 25 प्रतिशत अंक हो गया है।

यह बड़ा अंतर संभवतः इस अध्ययन का सबसे महत्वपूर्ण निष्कर्ष है। यदि जेमिनी केवल इसलिए YouTube की अनुशंसा कर रहा होता क्योंकि यह कुछ विशिष्ट प्रकार के प्रश्नों के लिए वास्तव में उच्च गुणवत्ता वाला स्रोत है, तो आप उम्मीद करेंगे कि इसका व्यवहार भाषाओं में अपेक्षाकृत स्थिर रहेगा।

इसके बजाय, जैसे-जैसे खोज गैर-अंग्रेजी भाषा में जाती है, यह YouTube पर अधिक निर्भर करता है । यह वही पैटर्न है जिसकी आप भविष्यवाणी कर सकते हैं यदि मॉडल को उसकी मूल कंपनी के स्वामित्व वाली किसी प्रॉपर्टी को प्राथमिकता देने के लिए प्रशिक्षित या ट्यून किया गया हो। यह ध्यान रखना महत्वपूर्ण है कि Google ने कहीं भी इसकी पुष्टि नहीं की है, लेकिन शोध से हमें यही विश्वास हुआ है।

यह आश्चर्य की बात नहीं होनी चाहिए कि एआई मॉडल में अंतर्निहित पूर्वाग्रह होते हैं (आखिरकार, उन्हें मानव-निर्मित डेटासेट पर प्रशिक्षित किया जाता है और तदनुसार समायोजित किया जाता है), लेकिन अफसोस की बात है कि जेमिनी और यूट्यूब के मामले में ऐसा ही प्रतीत होता है।

क्वेरी का प्रकार मायने रखता है

सभी प्रकार की सामग्री YouTube पर समान रूप से उद्धरण उत्पन्न नहीं करती है।

सभी मॉडलों में ट्यूटोरियल ने YouTube पर सबसे अधिक उद्धरण दर हासिल की – इस प्रकार की सामग्री के लिए यह प्लेटफ़ॉर्म अब भी बेजोड़ है, जबकि समाचार स्पष्टीकरण संबंधी प्रश्नों से YouTube पर शून्य उद्धरण प्राप्त हुए। हमारा मानना ​​है कि इसका कारण यह हो सकता है कि AI सारांशों के माध्यम से समाचारों को समझना या उदाहरण के लिए, LLM से पूछना कहीं अधिक आसान और तेज़ है।

इसमें कोई आश्चर्य की बात नहीं है कि YouTube वास्तव में 'कैसे करें' सामग्री का एक प्रमुख स्रोत है और इसके लिए सबसे पसंदीदा प्लेटफॉर्म बना हुआ है। ट्यूटोरियल श्रेणी में उच्च उद्धरण दरें संभवतः मॉडल पूर्वाग्रह के बजाय वास्तविक दुनिया के उपयोग को दर्शाती हैं।

इसलिए अधिक महत्वपूर्ण प्रश्न यह है कि उन श्रेणियों में क्या होता है जहां YouTube का प्रभुत्व कम स्पष्ट है (सिफारिशें? व्याख्यात्मक वीडियो?) और क्या जेमिनी वहां भी बेहतर प्रदर्शन करना जारी रखता है।

स्वतःस्फूर्त और अनुरोधित उद्धरणों के बीच का अंतर

सबसे उपयोगी अनुवर्ती कार्रवाइयों में से एक क्लाउड और जेमिनी दोनों के लिए ट्यूटोरियल प्रश्नों को एक स्पष्ट उद्धरण अनुरोध के साथ फिर से चलाना था, जो कि चैटजीपीटी के लिए उपयोग किए गए समान प्रॉम्प्ट जोड़ था।

परिणामों में नाटकीय रूप से बदलाव आया:

जब उनसे स्रोतों को स्पष्ट रूप से सूचीबद्ध करने के लिए कहा गया, तो दोनों मॉडलों ने YouTube का उल्लेख बहुत कम किया। इससे पता चलता है कि उच्च स्वतःस्फूर्त दरें हमेशा पारंपरिक अर्थों में उद्धरण को प्रतिबिंबित नहीं करती हैं। बल्कि, जेमिनी और क्लाउड अक्सर YouTube वीडियो को अनुशंसित सामग्री के रूप में सीधे अपने उत्तरों में शामिल करते हैं , जो उद्धरण गणना में तो दिखाई देता है, लेकिन YouTube को उत्तर बनाने के लिए स्रोत के रूप में उपयोग करने से कार्यात्मक रूप से भिन्न है।

दूसरे शब्दों में कहें तो, यह उत्तर देते समय YouTube सामग्री का उपयोग नहीं करता है ; बल्कि, यह उसे 'आगे पढ़ने के लिए' सामग्री के रूप में सुझाता है।

इसके विपरीत, ChatGPT कभी भी स्वतः YouTube लिंक नहीं दिखाता है। मैन्युअल समीक्षा के दौरान, हमने 45 ट्यूटोरियल प्रश्नों में से केवल दो उदाहरण पाए जहाँ ChatGPT ने वीडियो खोजने का विकल्प दिया, और इसने कभी भी बिना अनुरोध के कोई वीडियो प्रदर्शित नहीं किया।

ध्यान दें: इसका मतलब यह नहीं है कि ChatGPT अपने जवाब बनाने के लिए YouTube का कम इस्तेमाल करता है; इसका मतलब सिर्फ यह है कि यह अपना काम नहीं दिखाता। निराशाजनक है, क्योंकि हमें उम्मीद थी कि यह शोध ChatGPT के रहस्यमयी काम करने के तरीकों पर कुछ और रोशनी डालेगा। हालांकि, जिस तेज़ी से ये मॉडल विकसित हो रहे हैं और जितने ज़्यादा लोग इनका कड़ाई से परीक्षण कर रहे हैं, ChatGPT का एल्गोरिदम शायद किसी समय कम अस्पष्ट हो जाए... लेकिन हम इसकी उम्मीद नहीं कर रहे हैं।

किसे उद्धृत किया जाता है? मॉडल के अनुसार शीर्ष डोमेन

यूट्यूब से परे और सभी भाषाओं में, प्रत्येक मॉडल के लिए उद्धरण परिदृश्य काफी अलग दिखता है।

क्लाउड द्वारा उद्धृत किए गए सबसे अधिक स्रोत बीबीसी और रॉयटर्स थे, जबकि यूट्यूब तीसरे स्थान पर था, जिससे पता चलता है कि क्लाउड इसे एक उपयोगी लेकिन द्वितीयक संसाधन के रूप में मानता है।

इसके विपरीत, जेमिनी ने यूट्यूब को समग्र रूप से सबसे अधिक उद्धृत स्रोत के रूप में स्थान दिया, जो रॉयटर्स से काफी आगे था। केवल अंग्रेजी भाषा में पूछे गए प्रश्नों में भी यही पैटर्न देखने को मिला: क्लाउड की शीर्ष 10 सूची में bbc.com पहले स्थान पर, reuters.com दूसरे स्थान पर और youtube.com तीसरे स्थान पर रहा, जबकि जेमिनी की रैंकिंग में youtube.com का दबदबा रहा।

ChatGPT का साइटेशन प्रोफाइल मौलिक रूप से भिन्न है। यह विकिपीडिया, रेडिट, डेवलपर डॉक्यूमेंटेशन (developer.mozilla.org, docs.docker.com) और आर्काइव पर काफी हद तक निर्भर करता है। यह एक अधिक ओपन-वेब डिस्ट्रीब्यूशन है, जो संभवतः इसकी अलग आर्किटेक्चर और प्रशिक्षण पद्धति को दर्शाता है।

अगर आपके व्यवसाय का अभी तक विकिपीडिया पेज नहीं है, तो यह आपके लिए एक संकेत हो सकता है। लेकिन इसे बनाना काफी मुश्किल होगा, क्योंकि वेबसाइट अपने प्रकाशन मानकों को लेकर बेहद सख्त है (दुर्भाग्यवश, हम अपने अनुभव से कह रहे हैं)।

इसका विपणनकर्ताओं के लिए क्या अर्थ है?

आंकड़ों से कुछ व्यावहारिक निष्कर्ष इस प्रकार हैं:

यूट्यूब एआई विजिबिलिटी के लिए एक उच्च-मूल्य वाला प्लेटफॉर्म बना हुआ है, खासकर ट्यूटोरियल कंटेंट के लिए। यदि आपका ब्रांड शैक्षिक या हाउ-टू वीडियो कंटेंट बनाता है, तो एआई मॉडल से प्राप्त यूट्यूब साइटेशन एक ऐसा चैनल है जिसमें निवेश करना वास्तव में फायदेमंद है। क्लाउड वेबसाइट यूट्यूब को साइटेशन मिलने पर औसतन 3.6वें स्थान पर रखती है; जेमिनी इसे 4.3वें स्थान पर रखती है। लंबे वीडियो के क्षेत्र में अग्रणी यह ​​प्लेटफॉर्म, विशेष रूप से सर्च विजिबिलिटी के मामले में, टिकटॉक से कड़ी प्रतिस्पर्धा के बावजूद, जल्द ही पीछे नहीं हटने वाला है।

जेमिनी का गैर-अंग्रेजी भाषी क्षेत्रों में यूट्यूब के प्रति झुकाव अंतरराष्ट्रीय सामग्री रणनीतियों के लिए एक संरचनात्मक पहलू है। पोलिश, फ्रेंच या अन्य गैर-अंग्रेजी भाषी बाजारों में काम करने वाले ब्रांडों को यह ध्यान रखना चाहिए कि जेमिनी वीडियो संबंधी प्रश्नों को क्लाउड या चैटजीपीटी की तुलना में यूट्यूब की ओर अधिक निर्देशित कर सकता है।

त्वरित संदर्भ निर्धारण से उद्धरण व्यवहार में परिवर्तन आता है। यह तथ्य कि क्लाउड और जेमिनी दोनों ने स्पष्ट रूप से स्रोतों की सूची देने के लिए कहे जाने पर YouTube का बहुत कम उल्लेख किया, एक उपयोगी संकेत है: YouTube वीडियो का स्वतः उपयोग आंशिक रूप से उपयोगकर्ता अनुभव (UX) की एक विशेषता है, लेकिन यह हमेशा इस बात का प्रतिबिंब नहीं है कि मॉडल ने अपना उत्तर तैयार करते समय स्रोतों को कितना महत्व दिया।

ChatGPT के व्यवहार को सतही तौर पर समझना कठिन है। इसकी कम स्वतः उद्धरण दर कार्यप्रणाली संबंधी त्रुटि है, न कि इस बात का प्रमाण कि यह YouTube को अनदेखा करता है। हमारे अनुवर्ती विश्लेषण से पता चलता है कि ChatGPT उत्तर तैयार करने के लिए YouTube सामग्री पर निर्भर हो सकता है, जबकि पूछे जाने पर ही लिंक प्रदर्शित करता है।

निष्कर्ष

क्या Google AI प्रतिक्रियाओं में अपने उत्पादों को प्राथमिकता देता है? इस डेटा के आधार पर, जेमिनी अपने प्रतिस्पर्धियों की तुलना में YouTube का कहीं अधिक उल्लेख करता है, और यह पैटर्न गैर-अंग्रेजी भाषाओं में इस तरह से तीव्र हो जाता है जिसे केवल सामग्री की गुणवत्ता के आधार पर समझाना मुश्किल है।

हालांकि, यह अध्ययन उद्धरण व्यवहार का विश्लेषण करता है, न कि अंतर्निहित तंत्रों का । हम देख सकते हैं कि पोलिश भाषा में खोजे गए YouTube कीवर्ड्स में जेमिनी का इंडेक्सिंग स्कोर अधिक है; हम निश्चित रूप से यह नहीं कह सकते कि ऐसा क्यों है।

यह डेटा हमें इस बात का स्पष्ट नक्शा देता है कि तीन प्रमुख एआई मॉडल वेब के सबसे महत्वपूर्ण कंटेंट प्लेटफॉर्म में से एक के साथ कैसा व्यवहार करते हैं, और कंटेंट रिकमेंडेशन में एआई की निष्पक्षता के बारे में अधिक सटीक प्रश्न पूछने के लिए एक आधार प्रदान करता है।

यह बहुभाषी सामग्री को संभालने में एआई खोज के तरीकों पर हमारे चल रहे शोध का एक हिस्सा है। यदि आप एलएलएम उत्तरों में अपनी साइट के दिखने की संभावना बढ़ाना चाहते हैं, तो Weglot 14 दिनों के लिए निःशुल्क आज़माएँ - कोई प्रतिबद्धता आवश्यक नहीं है।