Пошуковий робот: відмінності між версіями

Матеріал з Вікіпедії — вільної енциклопедії.
Перейти до навігації Перейти до пошуку
Інтерактивний перегляд історії
[перевірена версія][перевірена версія]
← Попереднє редагуванняНаступне редагування →
Вилучено вміст Додано вміст
ВізуальнийВікірозмітка
Немає опису редагування
Рядок 1: Рядок 1:
'''Пошуковий робот''' (також {{lang-en|web crawler}}, {{lang-en|web spider}}) — [[комп'ютерна програма|програма]], що є складовою частиною [[пошукова система|пошукової системи]] та призначена для обходу сторінок [[інтернет]]у з метою занесення [[Інформація|інформації]] про них (ключових слів) до [[База даних|бази даних]].
'''Пошуковий робот''' (також {{lang-en|web crawler}}, {{lang-en|web spider}}) — [[комп'ютерна програма|програма]], що є складовою частиною [[пошукова система|пошукової системи]] та призначена для обходу сторінок [[інтернет]]у з метою занесення [[Інформація|інформації]] про них (ключових слів) до [[База даних|бази даних]].


Павуки здійснюють загальний пошук інформації в [[Інтернет]]і. Вони повідомляють про зміст знайденого документа, [[Індекс бази даних|індексують]] його і добувають підсумкову інформацію. Вони також переглядають заголовки, деякі посилання і відправляють проіндексовану інформацію до бази даних пошукового механізму.
Пошукові роботи здійснюють загальний пошук інформації в [[Інтернет]]і. Вони повідомляють про зміст знайденого документа, [[Індекс бази даних|індексують]] його і добувають підсумкову інформацію. Вони також переглядають заголовки, деякі посилання і відправляють проіндексовану інформацію до бази даних пошукового механізму.


{{приєднати|Краулінг|дата=грудень 2017}}
{{приєднати|Краулінг|дата=грудень 2017}}

Версія за 09:13, 28 лютого 2019

Пошуковий робот (також англ. web crawler, англ. web spider) — програма, що є складовою частиною пошукової системи та призначена для обходу сторінок інтернету з метою занесення інформації про них (ключових слів) до бази даних.

Пошукові роботи здійснюють загальний пошук інформації в Інтернеті. Вони повідомляють про зміст знайденого документа, індексують його і добувають підсумкову інформацію. Вони також переглядають заголовки, деякі посилання і відправляють проіндексовану інформацію до бази даних пошукового механізму.

Було запропоновано приєднати статтю Краулінг до цієї статті або розділу, але, можливо, це варто додатково обговорити. Пропозиція з грудня 2017.

Як закрити сайт від індексації

  1. За допомогою файла robots.txt
  2. За допомогою мета-тегу

Посилання


Інтернет Це незавершена стаття про Інтернет.
Ви можете допомогти проєкту, виправивши або дописавши її.
Ця стаття потребує додаткових посилань на джерела для поліпшення її перевірності. Будь ласка, допоможіть удосконалити цю статтю, додавши посилання на надійні (авторитетні) джерела. Зверніться на сторінку обговорення за поясненнями та допоможіть виправити недоліки.
Матеріал без джерел може бути піддано сумніву та вилучено.
Отримано з https://uk.wikipedia.org/w/index.php?title=Пошуковий_робот&oldid=24585163