Hvordan Block likt innhold Scraper Nettsteder
Scraper nettsteder er nettsteder som har publisert et annet nettsted innhold uten tillatelse. Skraping et nettsted innhold er en krenkelse av åndsverk. Det skaper også problemer med søkemotoroptimalisering (SEO). Søkemotoroptimalisering er praksisen med å få en nettside eller sine sider til en fremtredende plass i motorens resultatsider søke (SERP). Duplikat innhold på Internett kan negativt påvirke den originale nettstedets søkemotor rangering.
Bruksanvisning
1 Åpne en filoverføring program (FTP) som du vil bruke for å få tilgang til nettstedets filer. Du trenger en FTP-konto for å logge inn. Hvis du ikke har en, kan du gå til cpanel din nettside hosting konto. CPanel er den viktigste kontrollpanelet som justeringer er gjort.
Når du har logget inn på din cpanel, se etter "filer" -delen. Åpne "FTP-kontoer." Under "Legg FTP" konto, skriver du inn brukernavnet og passordet du vil for kontoen.
Gå tilbake til FTP-program. Under domene, skriv ditt nettsted domene, og inn med FTP kontoen påloggingsnavn og passord.
2 Gå til rotkatalogen eller hovedkatalog på ditt nettsted. Finn filen som heter ".htaccess". Høyreklikk på den, og klikk på "Open / Edit". .htaccess Dokumentet åpnes i et tekstprogram.
3 Marker koden under og kopiere den.
Blokkering Bots og edderkopper
RewriteEngine På
RewriteCond {REQUEST_URI} = sitemaps.xml
RewriteRule ^ sitemaps.xml [L]
RewriteCond% {REMOTE_HOST} ^ 77.91.224. * [OR]
RewriteCond% {HTTP_USER_AGENT} ia_archiver [NC, OR]
RewriteCond% {HTTP_USER_AGENT} discobot [NC, OR]
RewriteCond% {HTTP_USER_AGENT} discobot [NC, OR]
RewriteCond% {HTTP_USER_AGENT} ^ BlackWidow [OR]
RewriteCond% {HTTP_USER_AGENT} ^ Bot \ [OR]
RewriteCond% {HTTP_USER_AGENT} ^ ChinaClaw [OR]
RewriteCond% {HTTP_USER_AGENT} ^ Custo [OR]
RewriteCond% {HTTP_USER_AGENT} ^ DISCO [OR]
RewriteCond% {HTTP_USER_AGENT} ^ Last \ Demon [OR]
RewriteCond% {HTTP_USER_AGENT} ^ eCatch [OR]
RewriteCond% {HTTP_USER_AGENT} ^ EirGrabber [OR]
RewriteCond% {HTTP_USER_AGENT} ^ EmailSiphon [OR]
RewriteCond% {HTTP_USER_AGENT} ^ EmailWolf [OR]
RewriteCond% {HTTP_USER_AGENT} ^ Express \ WebPictures [OR]
RewriteCond% {HTTP_USER_AGENT} ^ ExtractorPro [OR]
RewriteCond% {HTTP_USER_AGENT} ^ EyeNetIE [OR]
RewriteCond% {HTTP_USER_AGENT} ^ FlashGet [OR]
RewriteCond% {HTTP_USER_AGENT} ^ GetRight [OR]
RewriteCond% {HTTP_USER_AGENT} ^ GetWeb! [ELLER]
RewriteCond% {HTTP_USER_AGENT} ^ Go! Zilla [OR]
RewriteCond% {HTTP_USER_AGENT} ^ Go-Ahead-Got-It [OR]
RewriteCond% {HTTP_USER_AGENT} ^ GrabNet [OR]
RewriteCond% {HTTP_USER_AGENT} ^ Grafula [OR]
RewriteCond% {HTTP_USER_AGENT} ^ HMView [OR]
RewriteCond% {HTTP_USER_AGENT} HTTrack [NC, OR]
RewriteCond% {HTTP_USER_AGENT} ^ Bilde \ Stripper [OR]
RewriteCond% {HTTP_USER_AGENT} ^ Bilde \ Sucker [OR]
RewriteCond% {HTTP_USER_AGENT} Indy \ Library [NC, OR]
RewriteCond% {HTTP_USER_AGENT} ^ InterGET [OR]
RewriteCond% {HTTP_USER_AGENT} ^ Internet \ Ninja [OR]
RewriteCond% {HTTP_USER_AGENT} ^ JetCar [OR]
RewriteCond% {HTTP_USER_AGENT} ^ JOC \ Web \ Spider [OR]
RewriteCond% {HTTP_USER_AGENT} ^ larbin [OR]
RewriteCond% {HTTP_USER_AGENT} ^ LeechFTP [OR]
RewriteCond% {HTTP_USER_AGENT} LinksManager.com_bot [NC, OR]
RewriteCond% {HTTP_USER_AGENT} linkwalker [NC, OR]
RewriteCond% {HTTP_USER_AGENT} ^ Mass \ Downloader [OR]
RewriteCond% {HTTP_USER_AGENT} ^ MIDown \ tool [OR]
RewriteCond% {HTTP_USER_AGENT} ^ Mister \ PiX [OR]
RewriteCond% {HTTP_USER_AGENT} ^ Navroad [OR]
RewriteCond% {HTTP_USER_AGENT} ^ NearSite [OR]
RewriteCond% {HTTP_USER_AGENT} ^ NetAnts [OR]
RewriteCond% {HTTP_USER_AGENT} ^ NetSpider [OR]
RewriteCond% {HTTP_USER_AGENT} ^ Net \ Vampire [OR]
RewriteCond% {HTTP_USER_AGENT} ^ NetZip [OR]
RewriteCond% {HTTP_USER_AGENT} ^ Octopus [OR]
RewriteCond% {HTTP_USER_AGENT} ^ Offline \ Explorer [OR]
RewriteCond% {HTTP_USER_AGENT} ^ Offline \ Navigator [OR]
RewriteCond% {HTTP_USER_AGENT} ^ PageGrabber [OR]
RewriteCond% {HTTP_USER_AGENT} ^ Papa \ Foto [OR]
RewriteCond% {HTTP_USER_AGENT} ^ pavuk [OR]
RewriteCond% {HTTP_USER_AGENT} ^ pcBrowser [OR]
RewriteCond% {HTTP_USER_AGENT} ^ RealDownload [OR]
RewriteCond% {HTTP_USER_AGENT} ^ ReGet [OR]
RewriteCond% {HTTP_USER_AGENT} ^ SiteSnagger [OR]
RewriteCond% {HTTP_USER_AGENT} ^ SmartDownload [OR]
RewriteCond% {HTTP_USER_AGENT} ^ SuperBot [OR]
RewriteCond% {HTTP_USER_AGENT} ^ SuperHTTP [OR]
RewriteCond% {HTTP_USER_AGENT} ^ Surfbot [OR]
RewriteCond% {HTTP_USER_AGENT} ^ Take Away [OR]
RewriteCond% {HTTP_USER_AGENT} ^ Teleport \ Pro [OR]
RewriteCond% {HTTP_USER_AGENT} ^ VoidEYE [OR]
RewriteCond% {HTTP_USER_AGENT} ^ Web \ bilde \ Collector [OR]
RewriteCond% {HTTP_USER_AGENT} ^ Web \ Sucker [OR]
RewriteCond% {HTTP_USER_AGENT} webalta [NC, OR]
RewriteCond% {HTTP_USER_AGENT} ^ WebAuto [OR]
RewriteCond% {HTTP_USER_AGENT} WebCollage [NC, OR]
RewriteCond% {HTTP_USER_AGENT} ^ WebCopier [OR]
RewriteCond% {HTTP_USER_AGENT} ^ WebFetch [OR]
RewriteCond% {HTTP_USER_AGENT} ^ WebGo \ ER [OR]
RewriteCond% {HTTP_USER_AGENT} ^ WebLeacher [OR]
RewriteCond% {HTTP_USER_AGENT} ^ WebReaper [OR]
RewriteCond% {HTTP_USER_AGENT} ^ WebSauger [OR]
RewriteCond% {HTTP_USER_AGENT} ^ Website \ Extractor [OR]
RewriteCond% {HTTP_USER_AGENT} ^ Website \ Quester [OR]
RewriteCond% {HTTP_USER_AGENT} ^ WebStripper [OR]
RewriteCond% {HTTP_USER_AGENT} ^ WebWhacker [OR]
RewriteCond% {HTTP_USER_AGENT} ^ WebZIP [OR]
RewriteCond% {HTTP_USER_AGENT} ^ Wget [OR]
RewriteCond% {HTTP_USER_AGENT} ^ Widow [OR]
RewriteCond% {HTTP_USER_AGENT} ^ WWWOFFLE [OR]
RewriteCond% {HTTP_USER_AGENT} ^ Xaldon \ WebSpider [OR]
RewriteCond% {HTTP_USER_AGENT} Yandex [NC, OR]
RewriteCond% {HTTP_USER_AGENT} Zermelo [NC, OR]
RewriteCond% {HTTP_USER_AGENT} ^ Zeus [NC, OR]
RewriteCond% {HTTP_USER_AGENT} ZyBorg [NC]
RewriteRule. * Bot-response.php [L]
4 Gå tilbake til .htaccess filen. Lim inn koden i denne filen. Lim den over streken "# END".
Lagre filen på datamaskinen. Sørg for å lagre det som .htaccess. Ikke legg til utvidelser til denne filen, f.eks .htaccess.txt eller .htaccess.html. Det må bare lagres som .htaccess.
5 Gå tilbake til FTP-program. Den "lokale" delen viser data på datamaskinen. Finn mappen og denne filen du lagret. Den "Distance" delen viser ditt nettsted katalog. Dra og slipp denne filen fra datamaskinen til nettstedets hovedkatalog. Ditt nettsted er nå beskyttet mot skraper nettsteder.