Mikä on tela? tela toiminnon "Yandex" ja Google

Joka päivä Internetissä on valtavasti uusia materiaaleja luoda sivuston päivitetään vanhasta web-sivuja, ladata kuvia ja videoita. Ilman piilossa hakukoneiden ei löydy World Wide Web, mikään näistä asiakirjoista. Vaihtoehtoja kuin robotti ohjelmia kerrallaan ei ole olemassa. Mikä on haku robotti, miksi sitä tarvitaan ja miten toimia?

Mikä on hakurobotti

Tela-sivusto (hakukone) - se on automaattinen ohjelma, joka pystyy käymään miljoonia www-sivuja, nopeasti selaillessani Internetissä ilman käyttäjän toimia. Botit ovat jatkuvasti skannauksen tila World Wide Web, löytää uusia Web-sivuja ja vierailevat säännöllisesti jo indeksoitu. Muut nimet indeksointiroboteille hämähäkit, telaketjuilla, robotit.

Miksi hakukonebotit

Tärkeimmät toiminnot suorittavat hakukoneiden robotit - verkkosivut indeksoidaan sekä tekstiä, kuvia, ääntä ja videotiedostoja, jotka ovat niitä. Botit tarkista viitteet, peilistä (kappaletta) ja päivityksiä. Robotit suorittavat myös HTML-koodia ohjaus vaatimustenmukaisuuden standardien Maailman, joka kehittää ja toteuttaa teknisiä standardeja World Wide Web.

Mikä on indeksointi, ja miksi sitä tarvitaan

Indeksointi - on itse asiassa on prosessi vierailevien tietyn sivun hakukoneita. Ohjelma skannaa tekstiä tällä sivustolla, kuvia, videoita, lähtevät linkit, niin sivu näkyy hakutuloksissa. Joissakin tapauksissa, sivusto ei voi skannata automaattisesti, niin se voidaan lisätä hakukoneen manuaalisesti ylläpitäjälle. Tyypillisesti tämä tapahtuu ilman ulkoisten linkkien tiettyyn (usein vain äskettäin) sivu.

Miten hakukonebotit

Kukin hakukone on oma bot Googlen haku robotti voi vaihdella merkittävästi mekanismi toimii vastaavaa ohjelmaa, "Yandex" tai muita järjestelmiä.

Yleensä robotti toimintaperiaate on seuraava: ohjelma "tulee" työmaalla ja ulkoiset linkit etusivulta, "lukee" Web resurssi (mukaan lukien ne etsivät yleiskustannukset, jotka ei näe käyttäjä). Vene selataan välillä sivuja sivuston ja siirtyä muille.

Ohjelma valitsee joka sivuston indeksoida? Useammin kuin ei "Trip" hämähäkki alkaa uutissivuja tai suuria resursseja hakemistojen ja yhtenäistäjistä suurilla viitesaalismäärään. Tela-alustainen jatkuvasti skannaa sivut yksi kerrallaan, nopeudesta ja johdonmukaisuuden indeksoida seuraavat tekijät:

• Sisäinen: perelinovka (sisäiset linkit sivujen välillä saman resurssin), sivuston kokoa, oikean koodin, käyttäjäystävällisiä ja niin edelleen;
• Ulkoinen: kokonaisvertailukorkeus paino, joka johtaa sivustolle.

Ensimmäinen asia etsintä robotti etsii kaikista verkkosivustoista robots.txt. Edelleen resurssi indeksointi suoritetaan perustuu saatujen tietojen on tästä asiakirjasta. Tämä tiedosto sisältää erityisiä ohjeita "hämähäkit", joka voi lisätä mahdollisuuksia sivukäynneistä hakukoneiden, ja näin ollen saavuttaa varhain osuma sivusto "Yandex" tai Google.

Ohjelman siinianalogit indeksoijat

Usein termiä "etsintä robotti" on sekoittaa älykäs, käyttäjän tai yksipuolisten aineet, "muurahaisia" tai "matoja". Upotetaan merkittäviä eroja vain verrattuna aineita, muita määritelmät viittaavat vastaaviin eri robotteja.

Esimerkiksi aineet voivat olla:

• älyllinen: ohjelma, joka siirretään sivustosta, itsenäisesti päättää, miten edetä; ne eivät ole kovin yleisiä Internetissä;
• Autonominen: Nämä aineet auttavat käyttäjää valitsemaan tuotteen, haku, tai lomakkeiden, ns suodattimia, jotka ovat hieman liittyvät ohjelmat.;
• Käyttäjä: ohjelma edistää vuorovaikutteisissa World Wide Web, selaimen (esimerkiksi Opera, IE, Google Chrome, Firefox), lähettiläitä (Viber, sähke) tai sähköpostiohjelmat (MS Outlook ja Qualcomm).

"Ants" ja "matoja" ovat lähempänä hakukoneiden "robotit". Ensimmäinen muoto välillä verkon ja johdonmukaisesti vuorovaikutuksessa näin muurahaiskeko, "matoja" kykenee replikoitumaan muissa suhteissa sama kuin standardin tela.

Erilaisia hakukoneiden robotit

Erottaa monenlaisia indeksoijat. Riippuen ohjelman tarkoituksena, ne ovat:

• "Peili" - Kopiot selailun sivustot.
• Mobile - keskittyminen mobiiliversioilla verkkosivuja.
• Quick - korjausta uutta tietoa nopeasti tarkastelemalla uusimmat päivitykset.
• Viite - viiteindeksiin, laskea niiden määrä.
• Indexers erityyppistä sisältöä - erityisiä ohjelmia tekstiä, ääntä, videota, kuvia.
• "Spyware" - etsii sivuja, jotka eivät vielä näy hakukoneen.
• "Woodpecker" - määräajoin sivustoilla tarkistaa niiden merkitystä ja tehokkuutta.
• National - selaamiseen resurssit sijaitsee yksi maan verkkotunnuksia (esim mobi tai .kz .ua).
• Global - indeksi kaikki kansalliset sivustoja.

Robotit suuret hakukoneet

On myös joitakin hakukonebotit. Teoriassa niiden toimivuus voi vaihdella suuresti, mutta käytännössä ohjelmat ovat lähes identtiset. Suurimmat erot indeksointi www-sivuja robotit kaksi suurta hakukoneet ovat seuraavat:

• Ankaruus testausta. Uskotaan, että mekanismi tela "Yandex" hieman tiukemmat arvioita sivuston noudattamisesta World Wide Web.
• Säilyttäminen koskemattomuuteen. Googlen indeksointirobotti indeksoi koko sivuston (mukaan lukien mediasisällön), "Yandex" voi myös katsella sisältöä valikoivasti.
• Nopeustesti uusia sivuja. Google lisää uusia resursseja hakutuloksissa muutamassa päivässä, kun kyseessä on "Yandex" saattaa kestää kaksi viikkoa tai enemmän.
• Taajuus uudelleen indeksointi. Indeksointirobotille "Yandex" tarkistaa päivitykset kahdesti viikossa, ja Google - yksi 14 päivän välein.

Internet, ei tietenkään rajoitu kahteen hakukoneita. Muut hakukoneet ovat niiden robotteja, jotka seuraavat omaa indeksointi parametreja. Lisäksi on olemassa useita "hämähäkit", jotka on suunniteltu ei aikuinen etsiä resursseja, ja yksittäisten tiimien tai ylläpitäjät.

yleisiä harhaluuloja

Toisin kuin yleisesti luullaan, "hämähäkit" eivät käsitellä tietoja. Ohjelma tarkistaa vain ja tallentaa web-sivuja ja edelleen jalostus tapahtuu täysin eri robotteja.

Myös monet käyttäjät uskovat, että hakukoneiden robotit on kielteisiä vaikutuksia ja "haitallinen" Internet. Itse asiassa jotkut versiot "hämähäkit" voi merkittävästi ylikuormittaa palvelimelle. Myös inhimillinen tekijä - webmaster, joka loi ohjelman voi tehdä virheitä robotin konfiguraatiossa. Silti useimmat nykyisistä ohjelmista ovat hyvin suunniteltuja ja ammattimaisesti johdettu ja mahdolliset uusiin ongelmiin poistetaan viipymättä.

Miten hallita indeksointi

Hakukoneiden robotit ovat automatisoituja ohjelmistoja, mutta indeksointi voidaan osittain ohjata ylläpitäjälle. Tämä suuresti auttaa ulkoisia ja sisäisiä optimointia resurssin. Lisäksi voit manuaalisesti lisätä uuden sivuston hakukoneen: suuria resursseja on erityinen muoto verkkosivuja rekisteröinnin.