Történt 2018 őszén, hogy egyik ügyfelünk felvett egy új kollégát, egy marketingest. A hölgy a marketinghez sem ért nagyon, de korából kiindulva az online marketingről pedig fogalma sincs. Meg van azonban az a kapcsolatrendszere, mellyel szeret dolgozni, így bármilyen meglepő eredményeket is értünk el az Isten háta mögötti étteremmel, elbúcsúztunk a cégtől, és ők új honlapot készítettek az új marketing ügynökséggel. Nincsen ezzel semmi baj, van ez így néha. A telefonomon azonban megmaradt a Google találatokat figyelő alkalmazásban az étterem, így meglepődve tapasztaltam, mekkorát zuhannak a weboldal eredményei. Kíváncsi lettem, vajon mitől?
Ismertem ezt az ügynökséget, tíz évvel ezelőtt bejárta a nevük az online marketinggel foglalkozó világot, egy erős csúsztatás, vagy inkább csalás révén. Saleses kollégájuk ugyanis azzal hívta fel hideg hívásokkal cégek marketingeseit, hogy szeretnének-e a Keresőben az első helyen jönni a legfontosabb kulcsszavakra. Nyilván, mindenki szeretne a Google-ben első lenni, így sokan fizettek nekik, hiszen azt ígérték, BÁRMILYEN szóra az elsők lehetnek, évi pár ezer forintért. Később jött a döbbenet: nem a Google-ről volt szó, az illető cégnek volt egy saját adatbázisa a Neten, és annak keresőjében tudtál helyezeséseket vásárolni. Persze, ez nem sokat ért….
Hogy jön mindez a robots.txt-hez? Úgy, hogy ez a zseniális “keresőoptimalizáló cég” TELJESEN kitiltotta az új honlapból a Google robotját, azt a parancsot adva, hogy NE indexelje a honlap teljes tartalmát. Egy idő múlva aztán szóltam a cégcsoport másik marketingesének, érdemes lenne, megnézni a honlapot, hiszen hatalmas bukásban vannak, valószínűleg az ajánlatkérések is megálltak, a honlap látogatottsága a nulla felé közelít. Igyekeztek Google Ads hirdetésekkel forgalmat generálni, de azt is olyan dilettáns módon, hogy egy nem létező landing oldalra irányították a hirdetést, a hirdetésre kattintó először 404-es hibát talált.
Szóval ezért ilyen fontos a robots.txt. A negatív példa után azonban lássuk, milyen szerepet játszhat a SEO beállítások között, ha jól kezeled.
Bizony, egy egyszerű szövegfájlnak óriási hatalma van afelett, hogy a keresőmotorok robotjai hogyan bánnak webhelyeddel. Cikkünkben azt szeretnénk megmutatni, hogy hogyan használhatod te is a robots.txt-t a SEO-d fellendítésére, de előbb tisztázzuk, hogy mire is való ez a fájl!
