உங்கள் வலைத்தளத்தை ஸ்கிராப்பிங் செய்வதிலிருந்து OpenAI இன் கிராலர்களை எவ்வாறு தடுப்பது

உங்களைப் போன்ற வாசகர்கள் MUO ஐ ஆதரிக்க உதவுகிறார்கள். எங்கள் தளத்தில் உள்ள இணைப்புகளைப் பயன்படுத்தி நீங்கள் வாங்கும் போது, நாங்கள் ஒரு இணை கமிஷனைப் பெறலாம். மேலும் படிக்க.

பயனர்கள் ChatGPT ஐ அது தற்போது வைத்திருக்கும் முழுத் தகவலுக்காக விரும்பினாலும், இணையதள உரிமையாளர்களைப் பற்றியும் இதைச் சொல்ல முடியாது.

அன்றைய MUO வீடியோ உள்ளடக்கத்துடன் தொடர உருட்டவும்

OpenAI இன் ChatGPT ஆனது வலைதளங்களைத் துடைக்க கிராலர்களைப் பயன்படுத்துகிறது, ஆனால் நீங்கள் இணையதள உரிமையாளராக இருந்து, OpenAI இன் க்ராலர் உங்கள் வலைத்தளத்தை அணுக விரும்பவில்லை என்றால், அதைத் தடுக்க நீங்கள் செய்யக்கூடிய சில விஷயங்கள் இங்கே உள்ளன.

OpenAI கிராலிங் எப்படி வேலை செய்கிறது?

ஏ வலை கிராலர் (ஸ்பைடர் அல்லது சர்ச் என்ஜின் போட் என்றும் அழைக்கப்படுகிறது) என்பது தகவல்களுக்காக இணையத்தை ஸ்கேன் செய்யும் ஒரு தானியங்கு நிரலாகும். உங்கள் தேடுபொறிக்கு எளிதாக அணுகக்கூடிய வகையில் அந்தத் தகவலைத் தொகுக்கிறது.

Web crawlers ஒவ்வொரு தொடர்புடைய URL இன் ஒவ்வொரு பக்கத்தையும் அட்டவணைப்படுத்துகிறது, பொதுவாக உங்கள் தேடல் வினவல்களுக்கு மிகவும் பொருத்தமான இணையதளங்களில் கவனம் செலுத்துகிறது. எடுத்துக்காட்டாக, நீங்கள் ஒரு குறிப்பிட்ட விண்டோஸ் பிழையை கூகுள் செய்கிறீர்கள் என்று வைத்துக் கொள்வோம். உங்கள் தேடுபொறியில் உள்ள வெப் கிராலர், Windows பிழைகள் என்ற தலைப்பில் அதிக அதிகாரம் வாய்ந்ததாகக் கருதும் இணையதளங்களிலிருந்து அனைத்து URLகளையும் ஸ்கேன் செய்யும்.

OpenAI இன் வலை கிராலர் GPTBot என்று அழைக்கப்படுகிறது OpenAI இன் ஆவணங்கள் , உங்கள் இணையதளத்திற்கு GPTBot அணுகலை வழங்குவது, AI மாடலைப் பாதுகாப்பானதாகவும், துல்லியமாகவும் மாற்றுவதற்குப் பயிற்சியளிக்க உதவும், மேலும் AI மாதிரியின் திறன்களை விரிவுபடுத்தவும் இது உதவும்.

உங்கள் இணையதளத்தை வலைவலம் செய்வதிலிருந்து OpenAIஐ எவ்வாறு தடுப்பது

மற்ற வலை கிராலர்களைப் போலவே, GPTBot இணைய தளத்தை மாற்றுவதன் மூலம் உங்கள் இணையதளத்தை அணுகுவதைத் தடுக்கலாம். robots.txt நெறிமுறை (ரோபோட்கள் விலக்கு நெறிமுறை என்றும் அழைக்கப்படுகிறது). இந்த .txt கோப்பு இணையதளத்தின் சர்வரில் ஹோஸ்ட் செய்யப்பட்டுள்ளது, மேலும் இது உங்கள் இணையதளத்தில் இணைய கிராலர்கள் மற்றும் பிற தானியங்கு நிரல்கள் எவ்வாறு செயல்படுகின்றன என்பதைக் கட்டுப்படுத்துகிறது.

என்ன என்பதற்கான சிறிய பட்டியல் இங்கே robot.txt கோப்பு செய்ய முடியும்:

விண்டோஸ் 10 க்கான இலவச ஒலி சமநிலைப்படுத்தி

இது GPTBot ஐ இணையதளத்தை அணுகுவதை முற்றிலும் தடுக்கலாம்.
இது GPTBot ஆல் அணுகப்படுவதிலிருந்து ஒரு URL இலிருந்து குறிப்பிட்ட பக்கங்களை மட்டுமே தடுக்க முடியும்.
GPTBot எந்த இணைப்புகளைப் பின்தொடரலாம், எதைப் பின்தொடர முடியாது என்பதை இது தெரிவிக்கும்.

உங்கள் இணையதளத்தில் GPTBot என்ன செய்ய முடியும் என்பதைக் கட்டுப்படுத்துவது எப்படி என்பது இங்கே:

உங்கள் வலைத்தளத்தை அணுகுவதிலிருந்து GPTBot ஐ முழுமையாகத் தடுக்கவும்

robot.txt கோப்பை அமைக்கவும் , பின்னர் எந்த உரை எடிட்டிங் கருவி மூலம் அதை திருத்தவும்.
உங்கள் தளத்தில் GPTBot ஐச் சேர்க்கவும் robots.txt பின்வருமாறு:

 User-agent: GPTBot 
Disallow: /

GPTBot ஆல் சில பக்கங்களை மட்டும் அணுகுவதைத் தடுக்கவும்

அமைக்கவும் robot.txt கோப்பு, பின்னர் அதை உங்கள் விருப்பமான உரை எடிட்டிங் கருவி மூலம் திருத்தவும்.
உங்கள் தளத்தில் GPTBot ஐச் சேர்க்கவும் robots.txt பின்வருமாறு:

 User-agent: GPTBot 
Allow: /directory-1/ 
Disallow: /directory-2/

இருப்பினும், மாற்றுவதை நினைவில் கொள்ளுங்கள் robot.txt கோப்பு ஒரு முன்னோடி தீர்வு அல்ல, மேலும் GPTBot ஏற்கனவே உங்கள் இணையதளத்தில் இருந்து சேகரிக்கப்பட்ட எந்த தகவலையும் மீட்டெடுக்க முடியாது.

OpenAI வலைதள உரிமையாளர்களை வலைவலம் செய்வதிலிருந்து விலக அனுமதிக்கிறது

AI மாடல்களைப் பயிற்றுவிக்க கிராலர்கள் பயன்படுத்தப்பட்டதிலிருந்து, இணையதள உரிமையாளர்கள் தங்கள் தரவை தனிப்பட்டதாக வைத்திருப்பதற்கான வழிகளைத் தேடுகின்றனர்.

AI மாதிரிகள் அடிப்படையில் தங்கள் வேலையைத் திருடுகின்றன என்று சிலர் அஞ்சுகிறார்கள், இப்போது பயனர்கள் தங்கள் வலைத்தளங்களைப் பார்வையிடாமலே தங்கள் தகவலைப் பெறுவதற்கு குறைவான வலைத்தள வருகைகளுக்குக் காரணம்.

மொத்தத்தில், உங்கள் இணையதளங்களை ஸ்கேன் செய்வதிலிருந்து AI சாட்போட்களை முழுமையாகத் தடுக்க விரும்புகிறீர்களா என்பது முற்றிலும் உங்கள் விருப்பம்.