Hvað er vefskriðillinn? vefskriðillinn tól "Yandex" og Google

Á hverjum degi á Netinu er mikið af nýju efni til að búa til a website uppfærð gamla vefsíðum, hlaða upp myndum og myndskeiðum. Án hulin leitarvélum fannst ekki í World Wide Web, ekkert af þessum skjölum. Val eins vélfærafræði forrit á hverjum tíma er ekki til. Hvað er leit vélmenni, hvers vegna þú þörf það og hvernig á að reka?

Hvað er leit vélmenni

Vefskriðillinn síða (leitarvél) - það er sjálfvirk forrit sem er fær um að fara á milljónir vefsíðum, fljótt siglingar í gegnum netið án stjórnanda íhlutunar. Botswana eru stöðugt skanna pláss á the World Wide Web, finna nýjar vefsíður og reglulega heimsókn þegar verðtryggð. Önnur nöfn fyrir Vefur crawlers köngulær, crawlers, Botswana.

Af hverju eru köngulær

Helstu aðgerðir sem framkvæma leitarvél köngulær - vefur blaðsíða, auk texta, myndir, hljóð og vídeó skrár sem eru á þeim. Bots athuga tilvísanir, spegil staður (eintök) og uppfærslur. Vélmenni framkvæma líka HTML-kóða stjórn á samræmi staðla Alþjóðadýraheilbrigðisstofnunarinnar, sem þróar og útfærir tækni staðla fyrir World Wide Web.

Hvað er flokkun, og hvers vegna það er þörf

Flokkun - er í raun felst í því að heimsækja ákveðna vefsíðu með leitarvélum. The program skannar texta á þessari vefsíðu, myndir, myndbönd, útleið hlekkur, þá síðu birtist í leitarniðurstöðum. Í sumum tilvikum, síða er ekki að skanna sjálfkrafa þá getur það að bæta við leitarvél handvirkt vefstjóri. Venjulega, þetta gerist í fjarveru utanaðkomandi tenglum við tiltekinn (oft aðeins nýlega búin) bls.

Hvernig set leitarvél köngulær

Hver leitarvél hefur eigin láni hennar með Google leit vélmenni getur verið verulega í samræmi við kerfi virkar á svipaðan program, "Yandex" eða önnur kerfi.

Almennt vélmenni vinna reglan er sem hér segir: the program "kemur" á síðuna og ytri tengla frá aðalsíðu, "segir" Web auðlind (þ.mt þeir sem leita kostnaður sem ekki sjá notandann). Báturinn er hvernig á að fletta á milli síðna á síðuna og fara til annarra.

The program vilja velja hvaða staður til vísitölu? Oftar en ekki "ferð" kónguló hefst með fréttavefir eða helstu framkvæmdarstjóra auðlind og samanlagður með stórum viðmiðunarlínu þyngd. Vefskriðillinn skannar stöðugt á síðum eitt af öðru, á hraða og samkvæmni flokkun eftirfarandi þætti:

• Innra: perelinovka (innri tengsl milli síðna í sama auðlindarinnar), vefnum stærð, rétta númerið, notandi-vingjarnlegur og svo framvegis;
• Ytri: heildar tilvísun þyngd, sem leiðir til the staður.

The fyrstur hlutur sem leit vélmenni leitar á hvaða vefsíðu með robots.txt. Frekari úrræði flokkun er framkvæmd byggist á upplýsingum sem berast og það er frá þessu skjali. Þessi skrá inniheldur sérstakar leiðbeiningar fyrir "köngulær", sem hægt er að auka líkurnar á bls heimsóknir frá leitarvélum, og þar af leiðandi að ná snemma högg á síðuna í "Yandex" eða Google.

Program hllðstæður crawlers

Oft er hugtakið "leita vélmenni" er ruglað saman við greindur, notanda eða sjálfstæðra umboðsmenn, "maurum" eða "orma". Sökkt marktækur munur aðeins í samanburði við lyfjum, aðrar skilgreiningar vísa til svipuðum tegundum vélmenni.

Til dæmis, miðlana er hægt að:

• vitsmunalegum: The program, sem eru flutt frá Site, óháð ákveða hvernig á að halda áfram; þeir eru ekki mjög algeng á Netinu;
• Autonomous: Þessi lyf hjálpa notanda að velja vöru, leit eða fylla út eyðublöð, svokölluðum síur sem eru lítið í tengslum við áætlanir net;.
• notandi: forritið stuðla að samskiptum notenda við World Wide Web, vafra (td Opera, IE, Google Chrome, Firefox), sendimenn (Viber, símskeyti) eða e-mail forrit (MS Outlook og Qualcomm).

"Ants" og "orma" eru svipuð leitarvél "köngulær". Fyrsti form milli net og stöðugt samskipti eins og þessi maur nýlenda, "orma" er hægt að endurtaka að öðru leyti það sama og venjulegt vefskriðillinn.

Ýmsum leitarvél vélmenni

Greina á milli mörgum tegundum af crawlers. Það fer eftir tilgangi áætlunarinnar, þeir eru:

• "Mirror" - Tvítekningar eru að skoða vefsíður.
• Mobile - áhersla á hreyfanlegur útgáfa af vefsíðum.
• Quick - festa nýjar upplýsingar fljótt með því að skoða nýjustu uppfærslur.
• Reference - viðmiðunarvísitölu, telja fjölda þeirra.
• Indexers mismunandi tegundir af efni - sérstakar áætlanir um texta, hljóð, myndskeið, myndir.
• "Spyware" - að leita að síðum sem eru ekki enn birtist í leitarvél.
• "Woodpecker" - reglulega heimsókn staður til að athuga mikilvægi þeirra og skilvirkni.
• National - beit the vefur úrræði staðsett á einn af landi ríki (td Mobi eða .kz .ua).
• Global - Vísitala allar innlendar síður.

Vélmenni helstu leitarvélar

Það eru einnig nokkur leitarvél köngulær. Í orði, virkni þeirra getur verið mjög mismunandi, en í reynd forrit eru nánast eins. The aðalæð mismunur flokkun á vefsíðum vélmenni tveir helstu leitarvélar eru sem hér segir:

• The kröfuharðari að prófa. Það er talið að kerfi af crawler "Yandex" nokkuð strangari áætlar staður til að uppfylla staðla World Wide Web.
• Varðveisla heilleika síðuna. Google vefskriðillinn Vísitölur alla síðuna (þar með talið efni fjölmiðla), "Yandex" Einnig er hægt að skoða efni sértækt.
• Hraði prófa nýjar síður. Google bætir nýrri auðlind í leitarniðurstöðum innan nokkurra daga, að því er varðar "eftir Yandex" getur tekið tvær vikur eða meira.
• Tíðni endurtekinna flokkun. Skrið "Yandex" að uppfærslum tvisvar í viku, og Google - einn á 14 daga fresti.

Internet, auðvitað, ekki takmarkað við tvær leitarvélar. Aðrar leitarvélar hafa vélmenni þeirra sem fylgja eigin flokkun þeirra breytur. Að auki eru nokkrir "köngulær", sem eru hönnuð ekki Major Search auðlindir, og einstakir liðin eða vefstjóra.

algengar misskilningi

Gegn vinsæll trú, "köngulær" ekki vinna ekki upplýsingar. The program skannar aðeins og geymir vefsíðum og frekari vinnsla fer alveg mismunandi vélmenni.

Einnig, margir notendur telja að leitarvél köngulær hafa neikvæð áhrif og "skaðleg" Internet. Í staðreynd, sumir útgáfur af "köngulær" geta verulega of mikið miðlara. Það er líka mannlegur þáttur - vefstjóra, sem skapaði forrit, getur gert mistök í vélmenni stillingu. Enn flest af núverandi áætlanir eru vel hönnuð og faglega stjórnað, og allir koma vandamál þegar fjarlægð.

Hvernig á að stjórna flokkun

Leitarvél vélmenni eru sjálfvirk forrit, en flokkun aðferð er hægt að hluta stjórnað af vefstjóra. Þetta hjálpar mjög ytri og innri hagræðingu auðlindarinnar. Að auki er hægt að bæta handvirkt við nýjum staður til leita vél: stðrar hafa sérstakt form vefsíðum skráningu.