Wstęp
MetaCrawler to wyszukiwarka internetowa, która została opracowana w 1994 roku na Uniwersytecie Waszyngtońskim przez Erika Selberga i profesora Orena Etzioni. To innowacyjne narzędzie, które łączyło wyniki wyszukiwania z różnych źródeł, takich jak Google, Yahoo!, Bing i wiele innych, miało na celu uproszczenie procesu poszukiwania informacji w sieci. Dzięki możliwości jednoczesnego przeszukiwania wielu wyszukiwarek, MetaCrawler oszczędzał czas użytkowników i zwiększał efektywność wyszukiwań. W artykule tym przyjrzymy się historii MetaCrawler, jego funkcjom oraz osiągnięciom, a także wpływowi, jaki miał na rozwój wyszukiwarek internetowych.
Historia MetaCrawler
MetaCrawler został stworzony jako projekt kwalifikacyjny doktora przez Erika Selberga. Jego celem było dostarczenie niezawodnej warstwy abstrakcji dla programów wyszukiwarek internetowych oraz badanie struktury semantycznej w sieci WWW. Chociaż MetaCrawler nie był pierwszą metawyszukiwarką (pierwszeństwo należało do SavvySearch), to szybko zyskał dużą popularność po uruchomieniu w lipcu 1995 roku.
W krótkim czasie MetaCrawler stał się dostępny dla użytkowników, oferując dostęp do sześciu usług wyszukiwania, takich jak Galaxy, InfoSeek, Lycos, Open Text, WebCrawler oraz Yahoo. Jego twórcy napotykali jednak trudności w ustaleniu modelu biznesowego, co doprowadziło do sprzedaży MetaCrawlera startupowi Go2Net w styczniu 1997 roku. Go2Net, który zyskał znaczną inwestycję od współzałożyciela Microsoftu Paula Allena, wszedł na giełdę Nasdaq w tym samym roku.
W roku 2000 MetaCrawler został przejęty przez InfoSpace. Dalsze zmiany nastąpiły w 2014 roku, kiedy to MetaCrawler połączono z Zoo.com. Domeny MetaCrawler początkowo przekierowywały do Zoo.com, ale później zmieniono je na stronę msxml.excite.com. W lipcu 2016 roku InfoSpace zostało sprzedane firmie OpenMail za 45 milionów dolarów, co uczyniło MetaCrawlera własnością OpenMail. W 2017 roku nastąpiła kolejna zmiana – MetaCrawler został ponownie uruchomiony jako osobna wyszukiwarka.
Funkcje i możliwości MetaCrawler
Jedną z kluczowych cech MetaCrawlera była jego zdolność do przeszukiwania wielu wyszukiwarek jednocześnie. Dzięki temu użytkownicy mogli uzyskać wyniki z różnych źródeł w jednym miejscu, co znacznie ułatwiało proces poszukiwania informacji. Po zadaniu zapytania MetaCrawler zbierał wyniki z sześciu różnych wyszukiwarek i eliminował te, które były martwe lub zmodyfikowane.
W praktyce oznaczało to, że średnio około 14,88% wyników było usuwanych z powodu braku aktywności lub błędnych linków. Po odfiltrowaniu wyników odbywała się ich ponowna ocena na podstawie hasła zapytania. Dzięki temu użytkownicy otrzymywali bardziej trafne i aktualne wyniki.
MetaCrawler oferował również różnorodne opcje wyszukiwania, które obejmowały nie tylko strony internetowe, ale także obrazy, filmy oraz wiadomości. Umożliwiał także dostęp do książek telefonicznych zarówno dla osób prywatnych, jak i dla firm. W pewnym momencie umożliwiał nawet wyszukiwanie plików audio. Te dodatkowe funkcje sprawiły, że MetaCrawler stał się wszechstronnym narzędziem do wyszukiwania informacji w Internecie.
Statystyki i popularność
MetaCrawler zyskał dużą popularność już na początku swojego istnienia. Pod koniec 1995 roku rejestrował ponad 7 000 zapytań tygodniowo. Ta liczba szybko rosła – pod koniec 1996 roku liczba zapytań wzrosła do ponad 150 000 dziennie. Na początku 1997 roku MetaCrawler miał około 30 000 odwiedzających dziennie.
Jednak największy wzrost popularności nastąpił w połowie 1998 roku, kiedy to liczba odwiedzających wzrosła do imponujących 275 000 dziennie. Taki wzrost zainteresowania wskazuje na rosnącą potrzebę efektywnych narzędzi do przeszukiwania Internetu oraz na skuteczność działania MetaCrawlera jako metawyszukiwarki.
Wpływ na rozwój wyszukiwarek internetowych
MetaCrawler odegrał ważną rolę w rozwoju technologii wyszukiwania w Internecie. Jako jedna z pierwszych metawyszukiwarek umożliwił użytkownikom łatwiejszy dostęp do informacji poprzez agregację wyników z różnych źródeł. Jego innowacyjne podejście zainspirowało kolejne projekty i rozwój nowych technologii w obszarze wyszukiwania.
Dzięki funkcjom filtrowania i eliminowania martwych linków MetaCrawler wpłynął na sposób myślenia o jakości wyników wyszukiwania. Przez lata wiele nowoczesnych wyszukiwarek zaczęło implementować podobne mechanizmy optymalizacji wyników oraz filtrowania treści.
Zakończenie
MetaCrawler to nie tylko przykład innowacyjnej metawyszukiwarki stworzonej w latach 90-tych XX wieku, ale także symbol ciągłych zmian i ewolucji technologii wyszukiwania w Internecie. Jego historia pokazuje zarówno wyzwania związane z komercjalizacją technologii internetowej, jak i potencjał dla innowacyjnych rozwiązań dostosowanych do rosnących potrzeb użytkowników. Mimo że czasy się zmieniają, wartościowe zasady działania MetaCrawlera nadal mają wpływ na sposób działania współczesnych wyszukiwarek internetowych.
Artykuł sporządzony na podstawie: Wikipedia (PL).