Kas yra robotas? vikšriniai priemonė "Yandex" "ir" Google "

Kiekvieną dieną internete yra didžiulis naujų medžiagų sukurti svetainė atnaujino senus tinklalapius, įkelti nuotraukas ir vaizdo įrašus. Be paslėpta nuo paieškos sistemose negali būti rastas World Wide Web, nė vienas iš šių dokumentų. Alternatyvos kaip robotų programų bet kuriuo metu neegzistuoja. Kas yra paieškos robotas, kodėl jums reikia ir kaip veikia?

Kas yra paieškos robotas

Vikšrinis svetainė (Search Engine) - tai automatinė programa, kuri gali aplankyti tinklalapių milijonus, greitai naršyti internete be jokių operatoriaus įsikišimo. Robotai yra nuolat nuskaitymo plotas apie World Wide Web, ieškant naujų tinklalapius ir reguliariai lankytis jau indeksuojami. Kiti pavadinimai Skenerių vorai, robotai, robotai.

Kodėl yra paieškos vorai

Pagrindinės funkcijos, atlieka paieškos vorai - web puslapių indeksuojami, taip pat tekstą, vaizdus, garso ir vaizdo failus, kurie yra ant jų. Robotai patikrinti nuorodas, veidrodis svetaines (kopijos) ir atnaujinimus. Robotai taip pat atlikti HTML kodas kontrolės atitikties standartus Pasaulio organizacijos, kurios rengia ir įgyvendina technologinius standartus dėl World Wide Web.

Kas yra indeksavimo, ir kodėl jis reikalingas

Indeksavimas - tai, iš tiesų, yra apsilankymą tam tikrą tinklalapį paieškos sistemose procesas. Programa nuskaito tekstą šioje svetainėje, vaizdai, video, išvykstamasis nuorodos, tada puslapis pasirodo paieškos rezultatų. Kai kuriais atvejais, svetainė negali būti nuskaitomi automatiškai, tada ji gali būti įtraukta į paieškos rankiniu administratoriui. Paprastai tai įvyksta nesant išorinių nuorodų į tam tikrą (dažnai tik neseniai sukurtas) puslapyje.

Kaip ieškoti vorai

Kiekviena paieškos sistema turi savo botas su "Google" paieškos robotas gali žymiai skirtis, atsižvelgiant į mechanizmą veikia panašiai programos "Yandex" ar kitų sistemų.

Apskritai, robotas darbo principas yra toks: programa "ateina" ne vietoje ir išorinės nuorodos nuo pagrindinio puslapio, "skaito" interneto išteklių (įskaitant ieško važtaraščius, kad nemato vartotojas). Valčių, kaip naršyti tarp puslapių svetainėje ir pereiti prie kitų.

Programa bus pasirinkti, kurios svetainės į indeksą? Dažniau, nei ne "Trip" voras prasideda naujienų svetainėse ar didelių išteklių katalogų ir kaupyklų su dideliu standartinio svorio. Vikšrinis nuolat nuskaito puslapius po vieną, dėl dydžio ir konsistencijos indeksavimo į šiuos veiksnius:

• Vidiniai: perelinovka (vidaus ryšius tarp puslapių pačiu šaltiniu), svetainės dydžio, kad teisingą kodą, patogumas vartotojui draugiškas ir tt;
• Išorinis: bendra nuoroda svoris, kuris veda į svetainę.

Pirmas dalykas, kad paieška robotas ieškos bet robots.txt svetainėje. Daugiau išteklių indeksavimas atliekamas remiantis gauta informacija, kad iš šio dokumento. Šis failas yra konkretūs nurodymai dėl "vorai", kurios gali padidinti apsilankymų puslapio galimybes paieškos sistemose, ir todėl, norint pasiekti anksti hit puslapį į "Yandex" "arba" Google ".

Programos analogų skaitytuvai

Dažnai terminas "paieška robotas" yra painiojama su protingas, naudotojo ar autonominių veiksnių, "skruzdėlės" arba "kirminų". Panardintas reikšmingų skirtumų tik lyginant su agentų, kiti apibrėžimai nurodo panašių tipų robotai.

Pavyzdžiui, agentai gali būti:

• intelektinės: programa, kuri yra perkelta iš vienos svetainės į kitą, nepriklausomai nuspręsti, ką daryti toliau; jie nėra labai dažni internete;
• Autonominis: Šie agentai padėti vartotojui renkantis produktą, paiešką, arba užpildę formas, vadinamieji filtrai, kurie mažai susiję su tinklo programas;.
• Vartotojas: programa prisideda prie sąveikos su vartotoju su World Wide Web, naršyklę (pavyzdžiui, "Opera, IE, Google Chrome", "Firefox"), pasiuntiniai (Viber, telegrama) arba el-pašto programų (MS Outlook "ir" Qualcomm).

"skruzdėlės" ir "kirminų" yra labiau panašus į paieškos variklis "vorai". Pirmoji forma tarp tinklo ir nuolat sąveikauja kaip šis skruzdėlių kolonija, "kirminų" gali atkartoti kitose atžvilgiais taikomas toks pats kaip standartinis robotas.

Įvairovė paieškos robotais

Atskirti įvairių tipų skaitytuvai. Priklausomai nuo programos tikslu jie yra:

• "Veidrodis" - Dublikatai naršote interneto svetainėse.
• Mobilus - dėmesys mobiliųjų versijų tinklalapius.
• Greita - nustatyti naują informaciją greitai peržiūrėti naujausius atnaujinimus.
• Nuoroda - nuoroda indeksas, skaičiuoti jų numerius.
• Indexers skirtingų rūšių turinį - specialias programas teksto, garso, vaizdo, vaizdus.
• "Spyware", - ieško puslapių, kurie dar nėra rodomi paieškos.
• "Genys" - periodiškai aplankyti svetaines, patikrinti jų tinkamumą ir efektyvumą.
• Nacionalinis - naršyti internete išteklius įsikūręs vienoje iš šalių domenų (pvz aprašymą arba .kz Ua).
• Globalus - indekso visi nacionaliniai svetainėse.

Robotai didžiųjų paieškos sistemų

Taip pat yra keletas paieškos vorai. Teoriškai, jų funkcionalumas gali labai skirtis, tačiau praktikoje programos yra beveik identiški. Pagrindiniai skirtumai indeksavimo tinklalapius robotai du didžiųjų paieškos sistemų, yra šie:

• Bandymų griežtumas. Manoma, kad robotas mechanizmas "Yandex" "šiek tiek griežtesni vertinimai už atitiktį World Wide Web standartų svetainę.
• Išsaugojimas teritorijos vientisumui. "Google vikšriniai indeksai visa svetainė (įskaitant žiniasklaidos turinio)," Yandex "" taip pat gali peržiūrėti turinį pasirinktinai.
• Greitis išbandyti naujus puslapius. "Google" prideda naują išteklius į paieškos rezultatų per kelias dienas, į "iki" Yandex "" proceso atveju gali užtrukti dvi savaites ar daugiau.
• Iš naujo indeksavimo dažnumas. Vikšriniai "Yandex" atnaujinimų du kartus per savaitę, o "Google" - po vieną kas 14 dienų.

Internetas, žinoma, neapsiriboja dviejų paieškos sistemų. Kitos paieškos varikliai savo robotus, kurie vadovaujasi savo indeksavimo parametrus. Be to, yra keletas "vorai", kurie yra skirti ne didžiųjų paieškos išteklius, atskirų grupių ar meistrams.

bendrų klaidingas

Priešingai populiarių įsitikinimų, "vorai" nereikia apdoroti informaciją. Programa tik nuskaito ir saugo tinklalapius ir tolesnis apdorojimas užtrunka visiškai skirtingus robotus.

Be to, daugelis vartotojų mano, kad paieškos vorai turėti neigiamos įtakos ir "kenksminga" internetu. Tiesą sakant, kai kurie "vorai" versijos gali žymiai apkrauti serverį. Taip pat yra žmogiškasis faktorius - redaktorius, kuris sukūrė programą, gali padaryti klaidų robotas konfigūracijos. Tačiau dauguma esamų programų yra gerai suprojektuoti ir profesionaliai valdoma, ir bet kylančias problemas nedelsiant pašalintos.

Kaip valdyti indeksavimo

Paieškos robotai yra automatizuotos programos, bet indeksavimo procesas gali būti iš dalies kontroliuoja administratorius. Tai labai padeda užsienio ir vidaus optimizavimas ištekliaus. Be to, jūs galite rankiniu būdu pridėti naują svetainę į paieškos: dideli ištekliai turi ypatingą formą tinklalapių registracijos.