De Yandex-zoekrobot ‘loopt’ door sites, bekijkt en analyseert de inhoud ervan, en slaat vervolgens een verwijzing naar tekst en afbeeldingen op in de Yandex-zoekdatabase. Dit proces heet indexeren. Een deel van een webpagina kan worden geblokkeerd voor indexering door het in een element te plaatsen. De volgende keer dat u de webpagina bezoekt, zal de zoekrobot dergelijke inhoud negeren en deze niet aan de database toevoegen. Dit wordt om verschillende redenen gedaan. Links die niet kunnen worden geïndexeerd, verzenden bijvoorbeeld niet de TIC (thematische citatie-index).

Het is belangrijk om te begrijpen dat dit een niet-standaard element is en door Yandex voor zijn eigen doeleinden is uitgevonden. Browsers ondersteunen het op geen enkele manier en geven de inhoud gewoon weer zoals gewoonlijk.

Als u de hele pagina wilt sluiten voor zoekmachines, gebruikt u het element door het toe te voegen aan de HTML-code:

Of voeg de volgende regel toe aan uw robots.txt-bestand:

Niet toestaan: /private.html

Waar is private.html het paginaadres.

Syntaxis

...

Afsluitende tag

Vereist.

KenmerkenVoorbeeld

geen index

Yandex zal deze tekst niet indexeren.

Browsers

Browsers

In de browsertabel worden de volgende notaties gebruikt.

Onlangs kwam ik bij het analyseren van problematische sites van klanten vaak het feit tegen dat velen van hen de tag actief gebruiken om een ​​deel van de inhoud voor Yandex te verbergen. Voor degenen die niet bekend zijn met deze tag, hier is een link naar de documentatie. Zoals daar vermeld, is het de bedoeling om het indexeren van servicegedeelten van tekst te verbieden.

Het is vermeldenswaard dat de documentatie het antwoord geeft op de vraag ‘hoe deze tag te gebruiken’, maar helemaal niet zegt ‘waarom deze werd geïntroduceerd’. Dit is gedeeltelijk de reden voor veel vragen van webmasters.

Als we op Google zoeken naar het antwoord op de vraag wat het gebruik van de noindex-tag is of eventuele aanbevelingen van Yandex-medewerkers hierover, dan krijgen we niet het verwachte antwoord op de vragen waarom deze is geïntroduceerd en in welke gevallen deze is geïntroduceerd wordt aanbevolen om het te gebruiken. Medewerkers van Yandex nemen geen verantwoordelijkheid voor dergelijke aanbevelingen, maar verbieden tegelijkertijd het gebruik van noindex voor hun eigen doeleinden niet.

Wat waren de voordelen van deze tag?

1. Het was mogelijk om het indexeringsblok van externe links te blokkeren (zoals bijvoorbeeld de studio van Artemy Lebedev doet in de legendarische smiley).

Het was inderdaad handig om ongemodereerde links op deze manier te sluiten, ook in reacties. Maar nadat Yandex de mogelijkheid introduceerde om rel=nofollow te gebruiken, zoals andere grote zoekmachines doen, kunt u de noindex-tag veilig achterwege laten als deze alleen werd gebruikt om externe links te sluiten.

2. U kunt het fragment (sitebeschrijving) beheren in de zoekresultaten.

Omdat Yandex niet altijd weet hoe hij goede fragmenten voor zijn zoekresultaten moet genereren op basis van pagina-inhoud, hebben optimizers een manier gevonden om de beste opties te selecteren. Hoeveel van jullie doen dit? Waarschijnlijk een minderheid, aangezien het moeilijk en langdurig werk is. In plaats van het probleem op zijn kant op te lossen (in algoritmen), biedt Yandex webmasters de mogelijkheid het probleem op te lossen. Google heeft overigens geen functionaliteit die vergelijkbaar is met de noindex-tag 😉

3. Laat het ene zien voor Google, het andere voor Yandex!

Met de tag probeerden webmasters de inhoud van de site te optimaliseren, zowel voor Yandex (waarvan het nodig was om sommige delen van de code te verbergen) als voor Google, door gebruik te maken van andere technieken samen. Is dit niet een duidelijke manipulatie van zoekalgoritmen of vervanging van inhoud, waar Yandexoids zo fel tegen vechten? 🙂

4. Selecteer de optimale dichtheid van sleutelzinnen.

Het komt op het punt dat optimalisatieprogramma's onnodige zinnen in de tekst met deze tag bedekken, zodat Yandex deze tekst niet als spam beschouwt. Tegelijkertijd blijft het vaak spam voor bezoekers :) Dit is waar de meeste problemen met SEO vandaan komen, maar het enige dat nodig was, was de optimizers deze tag te geven. Aan de andere kant kan Yandex uit dergelijke markeringen altijd achterhalen of de optimalisatie met de tekst heeft gewerkt of dat het normale inhoud is.

Overigens raadde Yandex niet aan om noindex te gebruiken om de optimale trefwoorddichtheid te selecteren, dit zijn al de machinaties van optimizers (Yandex had dit niet kunnen vermoeden bij de introductie van ondersteuning voor de tag), maar het pessimiseert actief documenten waar deze tag vaak wordt aangetroffen .

5. Sluit balies en banners.

Besparing op elke link, webmasters gesloten in noindex en verkeerstellers. Vele jaren zijn verstreken, nu begrijpt Yandex perfect waar alles zich op uw website bevindt (inclusief tellers). Het heeft geen zin om ze te sluiten voor indexering; het is beter om alles wat niet gebruikt wordt te verwijderen.

Zoals we zien, wordt het alleen gebruikt door optimizers en het enige waarvoor het wordt gebruikt is niet een poging om de bron te verbeteren, maar een poging om het zoekalgoritme in iemands voordeel te controleren, hoewel dit niet altijd werkt. Ook worden alle aanbevelingen op het netwerk over het gebruik van noindex gegeven door optimizers en niet één van A. Sadovsky of I. Segalovich.

Gezien al het bovenstaande wordt het ten zeerste afgeraden om de noindex grijze optimalisatietool te gebruiken, vooral als deze nog niet eerder op de site is gebruikt en er extra problemen zijn met de bron (filters, vervanging van een relevante pagina en andere). .

En nog iets... Yandex heeft geen reden om de noindex-tag te blijven ondersteunen (behalve misschien "raak niet aan wat werkt"). Na het introduceren van ondersteuning voor het nofollow-attribuut voor links, is het moeilijk om het motief van de Yandexoids om noindex te verlaten te begrijpen. Mogelijk wordt deze binnenkort stopgezet.

Dit is mijn kijk op de eenzijdige noindex-tag. Wat vind je van dit onderwerp?

Tag NoIndex en Yandex

Soms, wanneer u technische wijzigingen aanbrengt op de site of langdurig blogt, verschijnen er materialen en stukjes code die schadelijk kunnen zijn. In dit artikel zal ik allereerst Yandex aanraken en de "specifieke" HTML-tag beschrijven geen index.

Wat is hier eigenlijk het punt? Zoals u weet moet u rekening houden met het volgende:

het materiaal (voornamelijk tekst) van een enkele pagina moet uniek zijn

en moet overeenkomen met elk zoekwoord (query) waarvoor deze pagina SEO-geoptimaliseerd is.

Maar als er teksten of codes zijn (of verschijnen in de loop van de tijd) die deze 2 punten negatief beïnvloeden, kan de promotie verergeren.

Wat is dit precies en welke invloed heeft dit hierop? Wat is dit

Hier kunnen veel dingen aan de hand zijn:

• stukken niet-uniek tekst die u van de site van iemand anders heeft gehaald en in de uwe heeft ingevoegd uniek(oorspronkelijk) artikel,
• een overvloed aan advertentiecodes - teasers, banners en andere,
• veel JavaScript-scripts en flash-applicatiecodes,
• verschillende blokken met links in de zijbalk, zoals “onze vrienden”,
• een stel,
• en etc.

Hoe beïnvloedt het

Gebaseerd op de twee lijstitems die aan het begin van het artikel zijn aangegeven, heeft dit de volgende invloed:

er is sprake van een ‘verdunning’ van de dichtheid.

Daarom zou het een goed idee zijn om alle onnodige delen van materialen te blokkeren voor indexering door zoekrobots.

Yandex Noindex-tag en verbergcode voor zijn robots

Helaas (of misschien niet), kunt u alleen met Yandex voorkomen dat bepaalde delen van de HTML-code worden geïndexeerd. Misschien zullen Google en Bing na verloop van tijd ook iets soortgelijks aanbieden. Of misschien vinden hun ontwikkelaars het gewoon niet nodig.

Over het algemeen is er geen noindex-tag in Google! - Ik wijs hier vooral op omdat het internet vol staat met gesprekken over deze kwestie. Maar met de Google-zoekmachine kun je de hele pagina voor robots verbergen, en ook met behulp van standaardmiddelen - zoals bij andere PS's:

Noindex gebruiken in Yandex

Het is niet moeilijker te gebruiken dan welke andere HTML-tag dan ook. Meestal ziet het er zo uit:

Een alternatieve optie is ook mogelijk: de noindex-tag in de vorm van een standaard HTML-commentaar. Hier ziet u bijvoorbeeld hoe u de context voor AdSense kunt verbergen:

AdSense is 'verpakt' in de noindex-tag

- d.w.z. alles is hetzelfde, maar we voegen een indicatie toe dat dit een opmerking is. Naar mijn mening verdient deze optie de voorkeur.

Om erachter te komen waar de noindex-tagblokken zich op een webpagina bevinden, kunt u trouwens het volgende plaatsen:

Ze zullen letterlijk delen van de code die in deze tag zijn 'verpakt', markeren. Toegegeven, de RDS-balk markeert de optie soms niet in commentaarformaat - noindex.

Wanneer te gebruiken?

Zoals ik hierboven schreef, is noindex in Yandex nodig om onnodige stukjes code te verbergen Het unieke karakter van teksten en de relevantie van artikelen voor zoekopdrachten namen niet af. Het zou heel logisch zijn als de gedachte opkomt sluit alles behalve de tekst van het geoptimaliseerde artikel in de noindex-tag- inclusief in het hoofdmenu, de koptekst van de site, opmerkingen, enz.

Eigenlijk is het niet de moeite waard om zo te versnellen. Daar zijn twee redenen voor:

• Dergelijke manipulaties (indien overdreven) kunnen door Yandex worden overwogen.
• De robots van moderne PS kunnen onderscheiden waar bijvoorbeeld het blok met een artikel zich bevindt en waar de commentaren erop staan. Yandex kan dat ook- ongeveer 10 maanden geleden heb ik dit persoonlijk van hen vernomen, omdat... Ik was van plan om alle blokken met opmerkingen in Noindex te sluiten.

Met de commentaren blijkt het best interessant - zoekmachines houden van veel reacties, omdat dit wijst op . Daarom hoeft u zich geen zorgen te maken dat de teksten van commentatoren de relevantie van het artikel voor de vraag zullen verminderen - het is beter om erover na te denken.

Naar mijn mening is het ook beter om AdSense-blokken te sluiten voor de "ogen" van Yandex (zoals alle andere advertentiecodes) - zodat deze zoekmachine uw site niet als "te" reclame beschouwt en deze niet toepast. MAAR laat het open.

Het punt is dat YAN accepteert alleen hoogwaardige bronnen vanuit het oogpunt van Yandex Daarom kan de aanwezigheid van deze advertentie naar deze PS verwijzen naar de “kwaliteit” van uw project en een dergelijk abstract kenmerk versterken.

Noindex en externe links sluiten

Ooit (toen Yandex geen ondersteuning voor nofollow), ongewenste moesten worden “verpakt” in noindex en bovendien toegevoegd aan de linktag rel=’nofollow’, d.w.z. de volledige code van de gesloten link zou er als volgt uit kunnen zien:

Links sluiten in Yandex via nouindex

Nu ondersteunt deze PS nofollow en u kunt het doen zonder de link in “noindex” te “verpakken” en gebruik de standaard nofollow-techniek. Lees meer over het Rel=nofollow attribuut.

Het lijkt erop dat dit alles is wat er over de Noindex-tag en Yandex kan worden gezegd. Houd dit allemaal in gedachten en gebruik het verstandig

Een artikel voor degenen die te lui zijn om hulp op GoogleWebmaster en YandexWebmaster te lezen

Het afsluiten van onnodige pagina's van een webbron voor zoekindexering is erg belangrijk voor de SEO-optimalisatie ervan, vooral in de beginfase van het van de grond krijgen van een website of blog. Deze actie bevordert promotie en wordt aanbevolen voor gebruik op servicepagina's. Servicepagina's omvatten technische en servicepagina's die uitsluitend bedoeld zijn voor het gemak en de service van bestaande klanten. Dit zijn pagina's met onverteerbare of dubbele inhoud die absoluut geen zoekwaarde bieden. Dit omvat gebruikerscorrespondentie, mailinglijsten, statistieken, advertenties, opmerkingen, persoonlijke gegevens, gebruikersinstellingen, enz. En ook - pagina's voor het sorteren van materiaal (paginering), feedback, regels en instructies, enz.

Meta-robots-tag

Meta-robots-tag

Om het gedrag van zoekrobots op een webpagina te controleren, is er een robots-metatag en het bijbehorende attribuut inhoud. een webpagina sluiten voor zoekindexering,

Meta-robots-tag

Waarom is de robots-metatag beter dan het robots.txt-bestand?

Goede dag, beste lezers. Ik kom vaak tegen dat veel beginnende webmasters en bloggers totaal in de war zijn over het gebruik van noindex en nofollow. Laten we uitzoeken wat het is, waarmee het wordt gegeten, en de puntjes op de i zetten.

Het is de moeite waard om mee te beginnen, zodat je in de toekomst nooit in de war raakt omdat zowel noindex als nofollow in twee relatief verschillende betekenissen in een webdocument worden gebruikt.

De eerste bevindt zich in de ROBOTS-metatag (niet te verwarren met het robots.txt-bestand) in de waarde van het content-attribuut. Deze metatag heeft betrekking op het gehele document als geheel. Ten tweede wordt er alleen nofollow gebruikt - binnen de tag en is gerelateerd aan een specifieke link. De noindex-tag is een iets ander verhaal, en we zullen er vandaag ook over praten. Het is ook vermeldenswaard dat ik alleen het gebruik van nofollow en noindex in twee zoekmachines zal overwegen: Yandex en Google.

NOINDEX en NOFOLLOW in de ROBOTS-metatag

De robots-metatag is verantwoordelijk voor de hele pagina. Met behulp van deze metatag kunt u het indexeren van pagina-inhoud verbieden of toestaan.

Noindex is verantwoordelijk voor het verbieden van het indexeren van tekst op de pagina.

Nofollow is verantwoordelijk voor het voorkomen van het indexeren van links op een pagina.

Deze waarden worden als volgt gebruikt:

wat betekent dat deze pagina helemaal niet kan worden geïndexeerd.

Er kunnen ook de volgende waarden zijn:

u kunt de inhoud indexeren, maar de links op de pagina negeren, d.w.z. indexeer ze niet.

Je kunt meer lezen over de robots-metatag in mijn artikel.

NOFOLLOW in links

Nofollow wordt gebruikt als de waarde van het rel-attribuut in de tag . En is verantwoordelijk voor het indexeren van elke specifieke link op de pagina.

Het rel-attribuut toont de relatie van dit document met het document waarnaar wordt verwezen.

In dit geval vragen we, door het rel-attribuut in te stellen op nofollow, de zoekmachine om de externe link niet te volgen, en we benadrukken ook dat we niet verantwoordelijk zijn voor de inhoud waarnaar we linken.

Links die met deze waarde zijn ontworpen, geven niet de autoriteit van onze pagina weer, met andere woorden, de TCI en Page Rank worden niet doorgegeven. Het is echter ook de moeite waard om te bedenken dat in het geval van PR het gewicht nog steeds gaat, maar niet naar de site waarnaar we linken, maar naar nergens in de letterlijke zin van het woord. Wat de TCI betreft, is er geen exacte informatie over of het gewicht verloren gaat of op de site blijft staan.

Laten we de verdeling en overdracht van gewicht naar Google eens nader bekijken.

Het maakt dus helemaal niet uit hoeveel links u heeft met het attribuut en hoeveel niet. Als er 10 links op een pagina staan, krijgt elke link een deel van de autoriteit van uw pagina, en elk van hen zal dit gewicht overdragen, maar als in het ene geval het gewicht wordt overgedragen naar een specifieke site, dan zal in een ander geval de het gewicht zal eenvoudigweg nergens heen gaan.

Laten we ons eens voorstellen hoe een zoekmachine het World Wide Web ziet. Alle sites zijn met elkaar verbonden door links, absoluut alles. De eerste verwijst naar de tweede, de tweede naar de derde... de duizendste naar de duizend en één en uiteindelijk zullen een miljoen zeker naar de eerste verwijzen.

De keten is dus gesloten, alle sites bevinden zich in een lus, en het gewicht dat de eerste site overdraagt, keert er altijd naar terug via honderden en duizenden andere sites. We vergeten ook niet, en ik heb hierover al geschreven in, dat dit gewicht niet slechts één keer, maar voortdurend wordt overgedragen, en dat het gewicht in de loop van de tijd alleen maar groter wordt, waardoor de autoriteit ervan steeds groter wordt. Het is op dit principe dat het linken van websites is gebouwd.

Stel je nu voor dat de eerste site de koppelingen met het . Het gewicht zal niet worden overgedragen naar de tweede locatie, maar zal nergens heen stromen, en de tweede locatie zal niet dat deel van het gewicht ontvangen dat hij zou moeten hebben, zal het niet verder in de keten kunnen overbrengen, en als gevolg daarvan zal Na de hele cyclus te hebben doorlopen, is X een locatie die het gewicht naar de eerste locatie zou moeten overbrengen, maar in aanzienlijk minder hoeveelheden dan mogelijk zou zijn. Dus elke keer dat u dat deel van het gewicht dat u zelf in het niets gooit door uw links met het attribuut te sluiten, niet ontvangt, kan de site dit niet aan u overdragen, wat betekent dat u door het sluiten van uw links uzelf het toenemende gewicht ontneemt , en zo'n indicator als PR

Om dit begrijpelijker te maken, stellen we ons voor dat elke schakel een gewicht gelijk aan één overbrengt.

Dus als de eerste site de link met het attribuut niet heeft gesloten, krijgt deze aan het einde van de cyclus meer gewicht van inkomende links dan wanneer uitgaande links worden gesloten.

Het sluiten van een link is niet winstgevend als u uw lezers echt het artikel waarnaar u linkt, uw pagina op een sociaal netwerk of uw RSS-feed aanbeveelt. Het is stom om links naar je eigen pagina's op sociale netwerken te sluiten als je je lezers aanbeveelt zich via hen te abonneren op blogupdates. Dit zijn tenslotte uw eigen pagina's, uw eigen RSS-feed, die uw eigen inhoud uitzendt. Bent u er niet zelf verantwoordelijk voor?

Maar er zijn situaties waarin het echt nodig is om de koppelingen met de nofollow-waarde te sluiten. Laten we eens kijken naar de bronnen, Yandex en Google, wat zeggen ze hierover?

Daarnaast raadt Google aan om verkooplinks met dit attribuut te markeren. Google schrijft ook dat we met nofollow de robot naar gesloten delen van onze site kunnen verwijzen, maar verduidelijkt dat er ook andere manieren zijn om dit aan te geven.

Ik wil ook nog op één punt letten. Sommige fervente strijders voor gesloten links richten zich niet alleen op de links zelf, d.w.z. in het etiket , maar ook waar uw verbeelding het toelaat. En in de tag, en, en in de tag .

Laten we niet onze eigen standaarden verzinnen, maar ons wenden tot de bestaande standaarden die worden ontwikkeld door de internationale organisatie W3C.

De waarde kan alleen in een tag worden gebruikt , en het kan niet in andere tags worden gebruikt!

We hebben dus ontdekt wanneer het de moeite waard is om het linkattribuut te gebruiken en wanneer het niet aan te raden is. We zullen het ook nergens meer invoegen, behalve in één enkele tag die de link aangeeft. Laten we nu aandacht besteden aan de noindex-tag.

NOINDEX - een rudiment van Yandex

Ooit begreep Yandex de betekenis van nofollow niet en bedacht daarom zijn eigen tag

iets van binnen

zodat u met behulp hiervan ongewenste links kunt sluiten. Alles wat zich in deze tag bevond, werd genegeerd door de Yandex-robot. Maar sindsdien is er veel water onder de brug doorgegaan, Yandex is volwassener geworden en begon de . Dit gebeurde in het voorjaar van 2010. Dat is het moment waarop de noindex-tag zijn waarde verloor als hulpmiddel voor het sluiten van links. Maar tegelijkertijd blijft er een andere betekenis bestaan: tekstinhoud verbergen. Fragment uit de Yandex Help-sectie:

Ze worden aanbevolen om servicegebieden van de tekst te verbergen. Het is niet helemaal duidelijk over welke servicegebieden we het hebben, maar het is overduidelijk dat deze tag nu niets met links te maken heeft. Die. het blijkt dat als we de link in deze tag plaatsen:

U kunt veilig weigeren deze tag te gebruiken, vooral gezien de ongeldigheid ervan. In feite bestaat zo'n tag helemaal niet. Zoals we weten, zijn HTML-standaarden ontwikkeld door de internationale organisatie W3C, en er is geen dergelijke tag in de specificatie voor de HTML-taal; dit is volledig een uitvinding van Yandex.

Er is nog een vraag waar ik uw aandacht op wil vestigen. Als ik probeer uit te leggen waar ik in dit artikel over schreef, maken mensen vaak bezwaar tegen mij:

“Ik analyseer de site met die en die tool, en het laat me zien dat mijn links niet gesloten zijn...

U kunt al deze tools vertrouwen, dit is uw volste recht, maar is het niet beter om de officiële documentatie van zoekmachines te geloven, en is het niet beter om met uw eigen hoofd na te denken?

Veel succes met website-optimalisatie.