Keresés robotok - hogyan működnek, és mit csinálnak, a keresőprogramok
kereső robotok
kereső robotok, néha „pókok” vagy „Crawlers» (robot) - szoftver modulok megtalálásának web-oldalakat. Hogyan működnek? Mit tesznek valójában? Miért fontos?
Hogyan kereső robotok?
Kereső robotok kellene tekinteni, mint egy automata adatgyűjtő programot utazik a hálózaton, hogy információt találni, és linkeket információkat.
Miután jönnek a webhely, robotok először ellenőrizze, hogy a robots.txt fájl. Ez a fájl mondja robotnak, mely részeit a honlapján nem lehet indexelni. Általában, ez lehet egy könyvtár fájlokat, hogy a robot nem érdekli, vagy azt nem tudta volna.
„Szellemes” kapcsolatban index weboldalakat valós időben függ a kereső mérnökök, aki feltalálta az alkalmazott módszerek, hogy értékelje a kapott információ kereső robotokat. Vezetik be az adatbázisba kereső adat áll rendelkezésre a felhasználók, akik keresik. Amikor egy kereső felhasználó beír egy keresési kérés, egy sor gyors számításokat, hogy megbizonyosodjon arról, hogy valóban azt a jogot sor helyek a legrelevánsabb választ.
Amellett, hogy azonosítja a különleges keresők és megszámoljuk a saját látogatók, a statisztikák azt is jelzik, agresszív, elnyelő szélessége Catala elhaladó robotok robotok nem kívánatos az Ön webhelyén.
Ahogy olvastam az oldalak a web-site?
Ezt követően, az információ szállítják az index alapja a kereső adatokat, és részévé válik a keresőmotor rangsorolását folyamat az adatbázisban. Amikor egy látogató suschestvlyaet lekérdezést, a keresőmotor a teljes adatbázis kiadását a végleges listát a releváns keresési lekérdezést.
Keresőmarketing adatbázisokat gondosan megmunkált és összhangba hozni. Ha már szerepel az adatbázisban, robotok látogat meg időről időre, hogy gyűjtsön bármilyen változás az oldalakon, és gondoskodjanak arról, hogy a legfrissebb információkat. Látogatások száma attól függ, hogy a kereső beállításokat, amelyek eltérhetnek a típusa és célja.
Előfordul, hogy a keresőrobotok nem képesek indexelni a web-oldalon. Ha a webhely le, vagy a helyszínen egy nagy látogatók száma, a robot is bezsilen az ő megpróbálja indexelés. Amikor ez megtörténik, a helyszínen nem lehet újraindexelve függően a látogatások gyakoriságának a robot. A legtöbb esetben a robot nem tudja elérni a helyén, próbálkozzon később, abban a reményben, hogy a webhely hamarosan elérhető lesz.
Sok keresőrobotok nem lehet azonosítani, ha megnézi a naplókat. Meglátogathatják, de rönk mondják, hogy valaki használja a Microsoft böngészője, stb Egyes robotok azonosítják magukat a nevét a kereső (googlebot), vagy annak klónja (Scooter = AltaVista).
Attól függően, hogy a robot úgy van kialakítva, az információ indexelt, majd szállítják az alapja a kereső adatbázisban.
Emiatt log fájlokat és nyomon követése a kiadását kereső segítségével figyelemmel kísérheti az indexelés a projektek.