Преглед садржаја:
Дефиниција - Шта значи Веб претраживач?
Веб претраживач је Интернет бот који помаже у индексирању веба. Они претражују једну по једну страницу по веб локацији док све странице не буду индексиране. Веб претраживачи помажу у прикупљању информација о веб локацији и везама до њих, а такође помажу у провери ХТМЛ кода и хипервеза.
Веб претраживач такође је познат и као Веб паук, аутоматски индекс или једноставно алат за индексирање.
Тецхопедиа објашњава Веб Цравлер
Веб претраживачи прикупљају информације као што су УРЛ веб локације, информације о мета ознакама, садржај веб странице, везе на веб страници и одредишта која воде од тих веза, наслов веб странице и било које друге релевантне информације. Они прате УРЛ-ове који су већ преузети како би избегли поновно преузимање исте странице. Комбинација политика као што су политика поновног посета, политика одабира, политика паралелизације и политика учтивости одређује понашање Веб претраживача. Много је изазова за претраживаче веб страница, наиме велики и континуирано развијајући се Ворлд Виде Веб, споразуми о избору садржаја, социјалне обавезе и суочавање са противницима.
Веб претраживачи су кључне компоненте веб претраживача и система који проучавају веб странице. Помажу у индексирању уноса на Вебу и омогућавају корисницима да шаљу упите на индекс, а пружају и веб странице које одговарају упитима. Друга употреба Веб претраживача је у Веб архивирању, које укључује велике скупове веб страница које се периодично прикупљају и архивирају. Веб претраживачи се такође користе у претраживању података, при чему се странице анализирају на различите особине попут статистике, а на њима се врши анализа података.
