खुले स्रोत देवता चतुराई और प्रतिशोध के साथ एआई क्रॉलर से लड़ रहे हैं

एआई वेब-क्रॉलिंग बॉट इंटरनेट के तिलचट्टे हैं, कई सॉफ्टवेयर डेवलपर्स का मानना ​​है। कुछ देवों ने सरल, अक्सर विनोदी तरीके से लड़ना शुरू कर दिया है।

जबकि किसी भी वेबसाइट को खराब क्रॉलर व्यवहार द्वारा लक्षित किया जा सकता है – कभी -कभी साइट को नीचे ले जाना – ओपन सोर्स डेवलपर्स “असंगत रूप से” प्रभावित हैं, लिखते हैं निकोलो वेनरंडी, एक लिनक्स डेस्कटॉप के डेवलपर, जिसे प्लाज्मा के रूप में जाना जाता है और ब्लॉग लाइब्रेन्यूज के मालिक हैं।

उनके स्वभाव से, मुफ्त और खुले स्रोत (FOSS) परियोजनाओं की मेजबानी करने वाली साइटें सार्वजनिक रूप से अपने बुनियादी ढांचे को अधिक साझा करती हैं, और उनके पास वाणिज्यिक उत्पादों की तुलना में कम संसाधन भी होते हैं।

मुद्दा यह है कि कई एआई बॉट्स रोबोट एक्सक्लूसिव प्रोटोकॉल रोबोट.टैक्स फ़ाइल को सम्मानित नहीं करते हैं, वह टूल जो बॉट्स को बताता है कि क्रॉल क्या नहीं है, मूल रूप से सर्च इंजन बॉट्स के लिए बनाया गया है।

एक “मदद के लिए रोना” ब्लॉग भेजा जनवरी में, FOSS डेवलपर Xe Iaso ने बताया कि कैसे Amazonbot ने DDOS आउटेज के कारण GIT सर्वर वेबसाइट पर लगातार गेट किया। Git सर्वर FOSS परियोजनाओं की मेजबानी करते हैं ताकि जो कोई भी चाहता है वह कोड डाउनलोड कर सके या इसमें योगदान कर सके।

लेकिन इस बॉट ने IASO के रोबोट को नजरअंदाज कर दिया।

“यह एआई क्रॉलर बॉट्स को ब्लॉक करने के लिए निरर्थक है क्योंकि वे झूठ बोलते हैं, अपने उपयोगकर्ता एजेंट को बदलते हैं, आवासीय आईपी पते को प्रॉक्सी के रूप में उपयोग करते हैं, और अधिक,” इयाओ ने कहा।

डेवलपर ने पोस्ट में लिखा है, ” वे आपकी साइट को तब तक परिमार्जन करेंगे जब तक कि यह खत्म नहीं हो जाता, और फिर वे इसे कुछ और परिमार्जन करेंगे। वे हर लिंक पर हर लिंक पर हर लिंक पर क्लिक करेंगे, एक ही पेज को बार -बार देखेंगे।

कब्रों के देवता दर्ज करें

इसलिए Iaso चतुराई के साथ वापस लड़ा, जो कि Anubis नामक एक उपकरण का निर्माण करता है।

Anubis है एक रिवर्स प्रॉक्सी प्रूफ-ऑफ-वर्क चेक अनुरोधों को GIT सर्वर को हिट करने की अनुमति देने से पहले पारित किया जाना चाहिए। यह बॉट को अवरुद्ध करता है, लेकिन मनुष्यों द्वारा संचालित ब्राउज़रों के माध्यम से देता है।

मजेदार हिस्सा: अनुबिस मिस्र की पौराणिक कथाओं में एक भगवान का नाम है जो मृतकों को निर्णय के लिए ले जाता है।

“अनुबिस ने आपकी आत्मा (दिल) का वजन किया और अगर यह एक पंख से अधिक भारी था, तो आपका दिल खाया गया और आप, जैसे, मेगा की मृत्यु हो गई,” Iaso ने TechCrunch को बताया। यदि कोई वेब अनुरोध चुनौती को पारित करता है और मानव होने के लिए निर्धारित होता है, एक प्यारा एनीमे चित्र सफलता की घोषणा करता है। ड्राइंग “एंथ्रोपोमोर्फाइज़िंग एबुबिस पर मेरा लेना है,” Iaso कहते हैं। यदि यह एक बॉट है, तो अनुरोध से इनकार हो जाता है।

फॉस समुदाय के बीच हवा की तरह प्रोजेक्ट का नाम फैल गया है। Iaso इसे GitHub पर साझा किया 19 मार्च को, और कुछ ही दिनों में, इसने 2,000 सितारों, 20 योगदानकर्ताओं और 39 कांटे एकत्र किए।

रक्षा के रूप में प्रतिशोध

Anubis की त्वरित लोकप्रियता से पता चलता है कि Iaso का दर्द अद्वितीय नहीं है। वास्तव में, वेनरांडी ने कहानी के बाद कहानी साझा की:

• संस्थापक सीईओ SourceHut ड्रू Devault वर्णित “किसी भी सप्ताह में मेरे समय के 20-100% से खर्च करना हाइपर-आक्रामक एलएलएम क्रॉलर को पैमाने पर कम करता है,” और “प्रति सप्ताह दर्जनों संक्षिप्त आउटेज का अनुभव करना।”
• जोनाथन कॉर्बेट, एक प्रसिद्ध फॉस डेवलपर जो लिनक्स इंडस्ट्री न्यूज साइट LWN चलाता है, ने चेतावनी दी कि उसकी साइट थी DDOS- स्तरीय यातायात द्वारा धीमा होना “एआई स्क्रैपर बॉट्स से।”
• केविन फेन्ज़ी, विशाल लिनक्स फेडोरा परियोजना के sysadmin, एआई स्क्रैपर बॉट्स ने कहा इतना आक्रामक हो गया था, उसे ब्राजील के पूरे देश को एक्सेस से रोकना पड़ा।

वेनरंडी ने TechCrunch को बताया कि वह एक ही मुद्दे का अनुभव करने वाले कई अन्य परियोजनाओं के बारे में जानता है। उनमें से एक “एक बिंदु पर सभी चीनी आईपी पते को अस्थायी रूप से प्रतिबंधित करना था।”

एक पल के लिए उस डूब को – कि डेवलपर्स को “यहां तक ​​कि पूरे देशों पर प्रतिबंध लगाने के लिए मुड़ना पड़ता है” बस एआई बॉट्स को बंद करने के लिए जो रोबोट को अनदेखा करता है।

एक वेब अनुरोधकर्ता की आत्मा को तौलने से परे, अन्य देवों का मानना ​​है कि प्रतिशोध सबसे अच्छा बचाव है।

कुछ दिन पहले हैकर समाचारउपयोगकर्ता Xyzal सुझाए गए रोबोट।

Xyzal ने समझाया, “लगता है कि हमें बॉट्स के लिए लक्ष्य करने की आवश्यकता है _negative_ उपयोगिता मूल्य हमारे जाल पर जाने से, न कि केवल शून्य मान,” Xyzal ने समझाया।

जैसा कि होता है, जनवरी में, एक अनाम निर्माता जिसे “आरोन” के रूप में जाना जाता है, ने एक उपकरण जारी किया नेपेंटीस इसका उद्देश्य ठीक यही करना है। यह नकली सामग्री के एक अंतहीन भूलभुलैया में क्रॉलर को फंसाता है, एक लक्ष्य जिसे देव ने स्वीकार किया था टेक टेक्निका आक्रामक नहीं है अगर बिल्कुल दुर्भावनापूर्ण नहीं है। उपकरण का नाम एक मांसाहारी पौधे के नाम पर रखा गया है।

और CloudFlare, शायद सबसे बड़ा वाणिज्यिक खिलाड़ी AI क्रॉलर को बंद करने के लिए कई उपकरणों की पेशकश करने वाला, पिछले हफ्ते AI लेबिरिंथ नामक एक समान उपकरण जारी किया।

यह एआई क्रॉलर और अन्य बॉट्स के संसाधनों को “धीमा, भ्रमित करने और बर्बाद करने के लिए है जो ‘कोई क्रॉल’ निर्देशों का सम्मान नहीं करते हैं,” क्लाउडफ्लेयर ने वर्णित किया अपने ब्लॉग पोस्ट में। CloudFlare ने कहा कि यह AI क्रॉलर को दुर्व्यवहार करता है “आपकी वैध वेबसाइट डेटा निकालने के बजाय अप्रासंगिक सामग्री।”

सोर्सहट के डेवॉल्ट ने TechCrunch को बताया कि “नेपेंटीस के पास न्याय की एक संतोषजनक भावना है, क्योंकि यह क्रॉलर को बकवास करता है और उनके कुओं को जहर देता है, लेकिन अंततः अनुबिस वह समाधान है जो अपनी साइट के लिए काम करता है”।

लेकिन Devault ने एक अधिक प्रत्यक्ष सुधार के लिए एक सार्वजनिक, हार्दिक याचिका भी जारी की: “कृपया LLMS या AI छवि जनरेटर या Github Copilot या इस कचरे में से किसी को भी वैध करना बंद कर दें। मैं आपको उनका उपयोग करने से रोकने के लिए भीख माँग रहा हूं, उनके बारे में बात करना बंद कर दें, नए बनाने से रोकें, बस रोकें।”

चूंकि इसकी संभावना ज़िल्च है, डेवलपर्स, विशेष रूप से फॉस में, चतुराई और हास्य के एक स्पर्श के साथ वापस लड़ रहे हैं।