Google wprowadza dwa nowe roboty indeksujące, które zrewolucjonizują sposób, w jaki gromadzone są dane wizualne. Nowe roboty, GoogleOther-Image i GoogleOther-Video, zostały zoptymalizowane do indeksowania treści graficznych oraz wideo – otwiera to nowe możliwości badaczom i deweloperom.
Źródło: https://img.freepik.com/free-photo/financial-analysis_1098-1985.jpg?t=st=1716033483~exp=1716037083~hmac=e6627b5d29a00abfc7b8fc929d7348ccdde0fd7ce2c767f2cf723d93646d8f85&w=1380
Nowe roboty indeksujące – GoogleOther-Image i GoogleOther-Video
GoogleOther-Image i GoogleOther-Video to dwa nowe roboty indeksujące, które zostały zaprojektowane z myślą o gromadzeniu danych nie będących tekstem, czyli obrazów i wideo.
Ich zadaniem jest przetwarzanie binarnych danych – nie zajmują się plikami tekstowymi typu HTML, lecz plikami, które nie mogą być otwarte w aplikacjach do przeglądania tekstu (np. obrazy, audio i wideo).
Cel nowych robotów
Nowe roboty są częścią rodziny GoogleOther, która została wprowadzona w kwietniu 2023 roku. GoogleOther jest opisany jako ogólny robot, który może być używany przez różne zespoły produktowe Google do pobierania publicznie dostępnych treści z witryn internetowych.
Głównym celem tych robotów jest przeprowadzanie jednorazowych indeksowań na potrzeby badań i rozwoju.
Zdj 1. Dokument Google zawierający nowe roboty indeksujące.
Źródło: developers.google.com/search/docs/crawling-indexing/overview-google-crawlers?hl=pl#googleother-image
GoogleOther-Image i GoogleOther-Video: specyfika działania
Nowe roboty indeksujące mają swoje specyficzne identyfikatory, które można wykorzystać w plikach robots.txt, aby blokować ich dostęp do witryny. Pełne ciągi identyfikacyjne (user agent strings) dla tych robotów to:
- GoogleOther-Image – GoogleOther-Image/1.0
- GoogleOther-Video – GoogleOther-Video/1.0
Google zaktualizowało również ciągi identyfikacyjne dla zwykłego robota GoogleOther, pozwalając na łatwe rozpoznanie, że mamy do czynienia z autentycznymi robotami Google.
