Google (МФА [ɡuːɡl], MWCD /ˈgü-gəl/, рус. Гугл) — крупнейшая поисковая система, принадлежащая корпорации Google Inc.
Первая по популярности (79.65 %[5]), обрабатывает 41 млрд 345 млн запросов в месяц (доля рынка 62,4 %)., индексирует более 25 миллиардов веб-страниц, может находить информацию на 191 языке (c 15 октября 2009).
Поддерживает поиск в документах форматов PDF, RTF, PostScript, Microsoft Word, Microsoft Excel, Microsoft PowerPoint и других.
Поисковая система Google была создана в качестве учебного проекта студентов Стэнфордского университета Ларри Пейджа и Сергея Брина. Они в 1996 году работали над поисковой системой BackRub, а в 1998 году на её основе создали новую поисковую систему Google.
Хотя корпорация была основана 2 сентября 1998 года, а домен Google.com зарегистрирован 15 сентября 1997 года, поисковик (с 2000 года) иногда отмечает свой день рождения и в другой день: как 7, так и 27 сентября.
Название Google произошло от намеренно искажённого Сергеем Брином слова Гугол (Googol), которое означает «десять в сотой степени»
Про пошук в google можна дізнатись тут http://www.google.com/intl/ru/help/features.html
Yahoo!
Yahoo!(вимовляється як яху!) - американська компанія, яка володіє другою за популярністю (5.88% [1]) в світі пошуковою системою і надає ряд сервісів, об'єднаних інтернет-порталом Yahoo! Directory; портал включає в себе популярний сервіс електронної пошти Yahoo! Mail, один з найстаріших і найбільш популярних в Інтернеті. У 2004 році була запущена нова версія поштового інтерфейсу, заснована на AJAX.
Компанія Yahoo! була заснована аспірантами Стенфордського університету Девідом Файло (англ. David Filo) і Джері Янгом (англ. Jerry Yang) в січні 1994 року; стала корпорації 2 березня 1995 року. Головний офіс компанії знаходиться в місті Саннівейл (англ. Sunnyvale), штат Каліфорнія, США.
Згідно зі статистикою Alexa Internet, на сьогоднішній день [коли?] Yahoo! - четвертий за відвідуваністю веб-сайт в мережі Інтернет, і приблизно 28% відвідувань складаються з перегляду тільки однієї сторінки.
Компанія Yahoo! була заснована аспірантами Стенфордського університету Девідом Файло (англ. David Filo) і Джері Янгом (англ. Jerry Yang) в січні 1994 року; стала корпорації 2 березня 1995 року. Головний офіс компанії знаходиться в місті Саннівейл (англ. Sunnyvale), штат Каліфорнія, США.
Згідно зі статистикою Alexa Internet, на сьогоднішній день [коли?] Yahoo! - четвертий за відвідуваністю веб-сайт в мережі Інтернет, і приблизно 28% відвідувань складаються з перегляду тільки однієї сторінки.
МЕТА дозволяє шукати інформаційні ресурси по заданому запиту по всьому українському Інтернету. Вам пропонується ввести запит, за яким буде здійснено пошук. Пошук ведеться по повнотекстової бази даних, з урахуванням російської,української та англійської морфології. Точність і ефективність результатів пошуку залежить тільки від того як складений запит.Повнотекстовий пошук йде з урахуванням російської і української морфології. Це означає, що незалежно від граматичної форми ключових слів, Ви отримаєтедокументи, які містять шукані слова у всіх формах. Наприклад, за запитом глибокіденця будуть знайдені документи, що містять слова глибоке дно, за запитом рушниквишиваний - документи, що містять слова вишиваному рушникові і т. п.
Зверніть увагу на таку особливість: у багатослівних запитах система не ігнорує такзвані "стоп-слова", до яких відносять приводи, частинки, союзи і т. п. Більшістьпошукових систем при пошуку їх ігнорують, тобто, при запиті крем від засмагиприйменник "від" буде проігнорований і серед результатів будуть документи із словосполученням "крем для загару". <META> Видасть документи, які точнозбігаються з Вашим запитом.
Ви можете використовувати ряд службових операторів, що дозволяють уточнитиВаш запит.
Зверніть увагу на таку особливість: у багатослівних запитах система не ігнорує такзвані "стоп-слова", до яких відносять приводи, частинки, союзи і т. п. Більшістьпошукових систем при пошуку їх ігнорують, тобто, при запиті крем від засмагиприйменник "від" буде проігнорований і серед результатів будуть документи із словосполученням "крем для загару". <META> Видасть документи, які точнозбігаються з Вашим запитом.
Ви можете використовувати ряд службових операторів, що дозволяють уточнитиВаш запит.
| Оператор | Описание |
|---|---|
| + | Логическое И. Данный оператор подразумевается и действует первым, т. е. запрос украинские рефераты равносилен запросу украинские + рефераты. |
| - | Логическое НЕ позволяет исключить из списка результатов документы, в которых содержится идущее после оператора слово. Например, по запросу:кофейный напиток - кофе, будут найдены только те документы, в которых есть слова кофейный напиток, но нет слова кофе. |
| | | Логическое ИЛИ позволяет найти документы, которые содержат хотя бы одно слово в запросе. Например, по запросу: козаки | казаки будут найдены документы, которые содержат либо слово козаки, либо слово казаки. |
Порядок дії логічних операторів можна задавати круглими дужками ().
Наприклад, за запросухарьковскіе | київські підприємства Ви отримаєте документи, що містять або слово харківські, або одночасно слова київські і підприємства,оскільки оператор + мається на увазі і діє першим. Якщо ж необхідно знайти документи, в яких зустрічаються слова харківські підприємства або київськіпідприємства, запит повинен бути таким: (харківські | київські) підприємства.
Крім логічних виразів Ви можете визначати відстань між словами запиту.
Наприклад, за запросухарьковскіе | київські підприємства Ви отримаєте документи, що містять або слово харківські, або одночасно слова київські і підприємства,оскільки оператор + мається на увазі і діє першим. Якщо ж необхідно знайти документи, в яких зустрічаються слова харківські підприємства або київськіпідприємства, запит повинен бути таким: (харківські | київські) підприємства.
Крім логічних виразів Ви можете визначати відстань між словами запиту.
| Оператор | Описание |
|---|---|
| "..." | Двойные кавычки позволяют находить точное словосочетание, указанное в них. При этом фиксируется грамматическая форма слов, т.е. по запросу"погода в Крыму" будут найдены документы, в которых содержится точно такое же словосочетание - погода в Крыму. |
| {...} | Фигурные скобки позволяют находить словосочетание, близкое к указанному в них, т. е. в отличие от предыдущего оператора по запросу {погода в Крыму}будут найдены документы, содержащие следующие словосочетания: "погода в Крыму", "погоде в Крыму", "погоды в Крыму", т. е. грамматическая форма слов в данном случае не фиксируется. |
| [n, ...] | Этот оператор используется в том случае, если необходимо ограничить расстояние между словами Вашего запроса. Например, по запросу [5, мобильный телефон] будут найдены только те документы, в которых словамобильный и телефон расположены в фрагменте текста, не превышающем 5 слов. |
Оператор | Описание |
|---|---|
| Title | Данный оператор позволяет искать только по названию документа. Например, по запросу: title(прайс-лист) будут найдены те документы, в заголовке которых содержится прайс-лист, по запросу title("доска объявлений") будут найдены документы, которые содержат в заголовке словосочетание доска объявлений. |
| Heading | Данный оператор позволяет проводить поиск по названиям разделов документов. Например, по запросу: heading(бизнес-план) будут найдены документы, содержащие бизнес-план в поле heading документов. |
Опис ІПС
BIGMIR)NEThttp://www.bigmir.net У листопаді 2003 року Internet-холдинг Sputnikmedia.net оголосив про завершення розробки власної пошукової системи по українським сайтам і введенні її в експлуатацію. Новий сервіс доступний всім бажаючим з головної сторінки порталу bigmir)net. Зі слів головного розробника проекту Дениса Місько, на сьогоднішній день проіндексовано близько 7 млн. сторінок на 52 тис. серверах, що відносяться до України.
МЕТАhttp://www.meta.ua Проект "Мета" досить молодий, однак вже встиг зарекомендувати себе як авторитетний ресурс в української Internet. На заголовній сторінці є можливість вибору української, англійської або російської версії сайту. Пошук можна проводити як по всьому документу, так і по тексту, заголовку, ключовим словам, підписам до картинок, посиланням і коментарям. У 2001 р. Мета розробила нове програмне ядро пошукової системи, основною перевагою якого став координатний індекс, що враховує взаємне розташування слів в документі при пошуку, що дозволяє більш точно знаходити не просто окремі слова, а і словосполучення. Крім цього, з'явилася можливість угрупування результатів пошуку по серверах, реконструкції змісту документів безпосередньо на пошуковому сервері; розширена мова запитів. Нове ядро стало базою для створення цілої лінійки продуктів: корпоративної пошукової системи, пошукової системи для сайтів, CD, ПК і локальних мереж. За останні два роки у Мети з'явилася можливість повнотекстового пошуку по заданих регіонах України, новинах, довіднику "Бізнес-Україна", декількох електронних магазинах. "МЕТА" навчилася розуміти нові формати документів, такі, як .doc, .xls, .rtf, .zip, .rar і т. п. У доповнення до словникових морфологічних аналізаторів, що використовуються в системі, були розроблені модулі "ймовірностної морфології" для української, російської та англійської мов. Вони дозволяють з дуже високою точністю відмінювати "несловникові" слова (прізвища, абревіатури, неологізми і т. п.). За минулий період кількість запитів до системи збільшилася в п'ять разів, в той час як пошуковий індекс виріс майже в десять разів. Щоб устигати за таким зростанням, доводиться постійно розвивати програмну частину і нарощувати апаратні потужності. Так, наприклад, влітку 2003 року "МЕТА" перейшла на кластерну технологію, внаслідок чого пошуковий індекс був рознесений на декілька комп'ютерів - це дозволило істотно підвищити продуктивність системи і скоротити час повного оновлення індексу приблизно до одного місяця. Влітку 2003 МЕТА року почала нарощування технічної бази, відповідаючи зростанню активності користувачів ресурсу. МЕТА щодня відповідає на майже 100 тисяч пошукових запитів від більше за 30 тисяч користувачів. Система з 4-х пошуково-індексуючих серверів і 1-го веб-сервера дозволила значно прискорити оновлення пошукового індексу і додання нових українських ресурсів, підвищивши також і швидкість обробки запитів. На сьогоднішній день система щодня обробляє близько 4-5 GB нових документів, а загальний об'єм документів в індексі перевищує 100 GB (5 млн. 567 тис URL).
RAMBLERhttp://www.rambler.ru Сервер Rambler компанії Stack є одним з самих великих і найбільш відомих пошукувачів російської Internet. Спайдер Rambler індексує сайти, розташовані в доменах СНД. Якщо ж ваша сторінка знаходиться на іноземному сервері, то про це потрібно окремо повідомити розробників. Система містить мільйони документів з більш ніж 15 тис. Web-вузлів, має в середньому 500 тис. хіт в день, а над підтримкою всього цього проекту трудяться біля сотні фахівців. Rambler надає відвідувачам безліч послуг: дозволяє, наприклад, збільшувати або зменшувати значущість окремих слів в ключовій фразі за допомогою символів "+" і"- ", полегшує пошук в адресах URL, заголовках сторінок і навіть в декількох абзацах на початку документа. За допомогою даної системи можна легко знаходити "схожі" сторінки, здійснювати повторний пошук адрес серед вже знайдених. У відповідь на запит Rambler видає клієнтам список посилань, забезпечуючи кожну з них невеликою анотацією, з якої ви взнаєте кодування документа, його розмір, дату створення/оновлення, а також прочитаєте фрагмент пропозиції з шуканою ключовою фразою. АПОРТ!http://www.aport.ru Пошукова система "Апорт!" належить компанії "Агама" і розробляється при підтримці Intel. До речі сказати, дані компанії беруть також участь в створенні російськомовного каталога "Ау!". Пошук в "Апорт!" ведеться по базі даних, що містить понад двох мільйонів документів, оригінали яких розташовані на більш ніж 13 тис. серверів. Система може шукати необхідну інформацію по різних словоформах введених слів, виправляти в них помилки, підтримує пошук по фразах, в ній легко указати обмеження у відстані між фрагментами тексту, задане потрібною кількістю слів або фраз, а також допустиме тимчасової період створення документів. Можливий пошук за адресами URL, заголовками документів, підписами до картинок, посиланнями і коментарями. Більш того система може здійснювати автоматичний переклад з російського на англійський і з англійського на російський не тільки ключової фрази при запиті, але і отриманої внаслідок інформації. Підсумки пошуку упорядковуються по частоті використання шуканих термінів в документі. Разом з посиланням відображаються фрагмент тексту, де зустрічаються ключові слова, а також дата і час останньої модифікації файла. Це дуже зручне, оскільки дозволяє визначити, наскільки документ відповідає по значенню заданій ключовій фразі. Серед інших приємних особливостей цього сайту можна назвати індикатор завантаження, рейтинги самих уживаних ключових слів і найбільш популярних серверів. ЯNDEXhttp://www.yandex.ru Сайт Яndex, що належить компанії CompNet, є одним з проектів, що найдинамічно розвиваються, в РуНеті. У ньому пошук ведеться більш ніж по 30 тис. серверів, проіндексовано біля 2 млн документів, і показники ці постійно зростають. Основною перевагою системи Яndex є здатність знаходити задані слова незалежно від форми, в якій вони вживаються в документах. Цікаво, що система здатна "відмінювати" навіть ті слова, яких немає в словнику, причому пошук може вестися як за всіма формами ключових слів, так і по конкретно заданій. Дана пошукова система дозволяє встановлювати відстань між фрагментами ключової фрази з урахуванням їх порядку, посилювати значущість того або іншого слова, використати уточнюючі слова. Пошук можна також вести по заголовках документів, по посиланнях, що зустрічаються на сторінках. Крім того, в Яndex легко знайти документи, схожі по значенню на ті, що зацікавили вас по попередньому запиту. Можна обмежувати пошук вже в знайдених документах, т. е. проводити своєрідне "чищення" результатів запиту. При впорядкуванні списку посилань, що отримується користувачем, враховується число ключових слів, що зустрілися в документі, їх положення і відстань між ними. крім того, кожний з адрес URL містить коротку анотацію знайденого документа. Серйозною загальносвітовою проблемою Internet-пошуку є складність ефективного виявлення дуже схожих документів, так званих "майже-дублікатів". Для її розв'язання в першій половині 2002 р. Яndex впровадив процедуру чищення бази на основі оригінального алгоритму, який регулярно скорочує розміри індексу на 15-20%. Цей механізм дозволив істотно підвищити якість пошуку, виявлення спама і т. д. YAHOO!http://www.yahoo.com Одним з найвідоміших порталів в мережі був, є і залишається сайт компанії Yahoo. У квітні 1994 р. два співробітники Стенфордського університету Девід Філ і Джеррі Янг вирішили серйозно зайнятися збором різних посилань в Internet і угрупуванням їх по тематичних розділах. Протягом всього 1994 р. ця колекція сумлінно поповнювалася, поки на початку 1995 р. легендарний Марк Андріссен, працюючий в той час ще в Netscape Communications, запропонував перенести базу даних посилань на комп'ютери своєї компанії. Пропозиція була прийнята, що, в свою чергу, сприяло і популяризації Yahoo! як кошти пошуку інформації в Internet, і розвантаженню комп'ютерних мереж Стенфордського університету. Довгий час в компанії Yahoo користувалися послугами AltaVista, але після того як остання підписала угоду про співпрацю з LookSmart, керівництво Yahoo убачило в альянсі серйозного конкурента, що створився і вдалося до допомоги пошукової системи Inktomi. Сьогодні для багатьох людей Yahoo! є одним з самих авторитетних джерел інформації. Каталог містить посилання, які найбільш повно відповідають вказаній вами тематиці, в Yahoo! ніколи не зареєструють сайт, який перебуває в стадії розробки, в полі зору творців цієї чудової пошукової системи не попадуть сервери, чиї господарі стараються заманити до себе клієнтів за допомогою рекламних закликів, абсолютно далеких за змістом від істинного інформаційного наповнення сторінок. У компанії Yahoo не розголошують інформації про те, скільки всього сайтов зареєстровано на її сервері, але на власному досвіді переконуєшся, що це - масштабний і проект, що постійно розвивається. Сервер Yahoo! має приблизно 40 млн. відвідувачів в місяць, і це число безперервно зростає. Крім того, багато шанувальників і у розділу Yahoo! Headlines, де зібрані новини від провідних інформаційних агентств: Reuters, AP, MSNBC і інш. Є і більше за 50 розділів, що стосуються самих різних областей, - Yahoo! Finance для бізнесменів і фінансистів, Yahoo! Travel для мандрівників, Yahooligans! for Kids для неповнолітніх і безліч інших. Є і вичерпне керівництво для покупців різних товарів. Відвідувачі сайту можуть отримати безкоштовно адресу електронної пошти, скористатися можливостями мережевого пейджинга (Instant Messaging), взяти участь в on-line дискусіях (Chat) і, що особливо ціниться клієнтами, створити індивідуальний портал (My Yahoo!). Сайт має 14 локалізованих версій, де розташована інформація, що стосується тільки конкретного регіону, наприклад Yahoo! Germany або Yahoo! Asia. ALTAVISTAhttp://www.altavista.com Весною 1995 р. троє співробітників дослідницької лабораторії DEC отримали в своє розпорядження новітній на той час супершвидкісний сервер Alpha 8400 (кодова назва TurboLaser) і розмістили на ньому доступну для пошуку інформацію з дошок оголошень (bulletin boards) за останні десять років. Як говорять співробітники компанії сьогодні: "Все почалося з любові до порядку". Але по іронії долі, AltaVista отримала свою назву саме через відсутність порядку. Під час чергової планерки на погано витертій дошці залишилося декілька слів - Alto, взяте з імені міста Пало-Алто (штат Каліфорнія), і Vista - вигляд, перспектива. Розробникам сподобалося поєднання AltaVista - "вигляд зверху", і воно стало торгової мазкої пошукової машини, яка незабаром набула велику популярності в Мережі. На сьогоднішній день база даних AltaVista нараховує більше за 140 млн сторінок. Реєстрація сайтів в ній відбувається протягом 48 годин, і якщо інші пошукові машини іноді відключаються на технічну перерву, відмовляються приймати адреси або включають їх в базу даних з великим спізненням, то за AltaVista таких "гріхів" не помічалося. Серед особливостей цієї пошукової системи можна указати такі додаткові механізми, як Photo Finder - інструмент пошуку зображень, технологію онлайнового перекладу документів, розроблену компанією Babelfish. До речі, остання властивість дозволила пошуковій машині індексувати документи на декількох мовах, список яких ви знайдете на її заголовній сторінці. EXCITEhttp://www.excite.com Пошукова машина Excite ще до недавніх часів належала однойменній корпорації. Але на даний момент портал є власністю @Home - дочірньої компанії AT&T. Історія виникнення Excite досить стандартна для Силіконовий Долини. Зимою 1993 р. шестеро випускників Стенфордського університету вирішили організувати власну комп'ютерну компанію Architext Software, яка б займалася розробкою програмного забезпечення для пошуку і рубрикації інформації в Мережі. Саме з цієї ідеї і почалося створення пошукової машини порталу Excite. У грудні 1994 р. одна з інвестиційних компаній штату Каліфорнія, повіривши в заяви розробників, вклала перші 4 тис. доларів в майбутній мультимільйонний проект (до речі, всі ці гроші пішли на купівлю жорсткого диска). Практично відразу ж після початку функціонування порталу компанія Architext Software придбала популярність і почала залучати солідні фінансові інвестиції і рекламодавців. Це дозволило її керівництву вже в 1996 р. подать заяву про акціонування проекту Excite, і відтоді оборот однієї з самих великих Internet-компаній почав обчислюватися мільйонами доларів. Фірму очолив ветеран індустрії Джордж Белл (George Bell), а загальне число співробітників перевищило 200. Що ж відрізняє Excite від інших подібних серверів? У її алгоритмі пошуку з самого початку закладена технологія ICE (Intelligent Concept Extraction), яка дозволяє працювати не тільки з окремими ключовими словами, але і з поняттями, об'єднуючими їх. Так, якщо ви ввели ключову фразу "догляд за волоссям", то пошукова машина перегляне також сторінки, що містять слова "шампунь", "лупа" і т. д. Excite надзвичайно зручна для первинного пошуку матеріалів по ключовій фразі. А ось з окремими ключовими словами система працює декілька гірше. Технологія Excite ліцензована компанією Netscape Communications для використання на порталі NetCenter, а також корпорацією America Online, причому в останньому випадку з правом доповнення бази даних, а значить, результати пошуку в Excite і AOL NetFind можуть дещо відрізнятися. LYCOShttp://www.lycos.com Рішення про заснування порталу та пошукової машини Lycos багатьма фахівцями було зустрінуте без ентузіазму, вони сумнівалися, що цій системі вдасться створити гідну конкуренцію таким гігантам, як AltaVista, Excite або Yahoo!. Але на сьогоднішній день Lycos є прекрасним інструментом пошуку, особливо в сфері Internet-торгівлі. На сайті є поради для покупців в США (від автомобілів до квартир, а також по вибору міста, де жити дешевше і краще). База даних системи регулярно поповнюється, хоч сам механізм пошуку за останні декілька років істотних змін не зазнав. Партнери і рекламодавці Lycos працюють в самих різноманітних областях бізнесу і пропонують широкий спектр послуг, так що вибирати є з чого. Портал виділяється з ряду інших наявністю найвідомішого каталога WhoWhere з персональною інформацією про користувачів Internet, а також (завдяки придбанню компанії Tripod) розвиненими коштами по наданню послуг електронної пошти (є можливість створювати підпапки для зберігання кореспонденції і адресні книги) і розміщенню безкоштовних міні-сайтів. З допомогою Personal Lycos можна створити персональний календар, щоденник, список нагадувань і менеджера контактів. WEBCRAWLERhttp://www.webcrawler.com Спочатку даний проект був дипломною роботою Брайана Пінкертона, аспіранта Університету штату Вашингтон, і був покликаний полегшити пошук інформації в Internet з використанням ключових слів. У міру розвитку проекту друзі переконали Пінкертона в необхідності створення повноцінного Web-інтерфейса для свого прикладення, оскільки пошук інформації в мережі цікавить всіх. На відміну від Excite, гроші і спонсорська допомога на розробку WebCrawler знайшлися самі, а незабаром компанія Dealernet, розташована в Сиетле, піднесла Брайану подарунок у вигляді нового сервера. У обмін на це на заголовній сторінці WebCrawler був вміщений логотип Dealernet, таким чином, почалася комерціалізація проекту. Невдовзі компанія StarWave заявила про своє бажання підтримати роботу Пінкертона, і він отримав ще один безкоштовний сервер. У 1995 р. почався бум Internet, що приніс швидкий успіх проекту WebCrawler. У тому ж році розробка була продана компанії America Online, а її автор почав працювати в компанії NeXT, належній невтомному Стіву Джобсу, до того часу Apple, що вже покинув. У 1996 р. проект WebCrawler перекупила Excite, а Пінкертону було запропоноване місце віце-президента нової компанії, де він і працює по сьогоднішній день. Якщо ви зайдете на заголовну сторінку WebCrawler, то виявите логотип Excite, оскільки дана пошукова машина є складовою частиною Excite Network. Її творці звертають увагу на те, що багато які більш пізні технології, включаючи Lycos і InfoSeek, були розроблені вже після появи WebCrawler. База даних проекту продовжує регулярно поповнюватися, використати цю систему рекомендується у випадках, коли потрібен пошук по одному або двом ключовим словам. HOTBOThttp://www.hotbot.com Наприкінці 1998 р. компанія Lycos повідомила, що її черговим придбанням стане Wired Digital. Таким чином, пошукова машина HotBot виявилася підлеглою керівництву Lycos. Однак не треба думати, що HotBot став просто додатком до пошукової системи Lycos, він, як і раніше, продовжує функціонувати самостійно, не поступаючись, а в багатьох випадках навіть перевершуючи свого нового господаря. У Wired Digital необхідність розробки пошукової системи усвідомили в 1996 р., коли користувачі сайту HotWired почали все частіше вимагати наявності там доброго пошукового механізму. До цього часу в Мережі вже функціонували Lycos, InfoSeek і трохи інших великих систем. Тоді співробітники Wired зацікавилися однією з дипломних робіт на факультеті комп'ютерних наук Університету штату Каліфорнія, метою якої було створення технології пошуку документів в Internet під назвою Inktomi. І незабаром з'явився новий могутній пошуковий механізм, заснований на цій технології. Вже в перший рік свого існування HotBot був визнаний багатьма відомими комп'ютерними виданнями кращою пошуковою системою в Internet. За твердженням HotBot, відвідувачі даного пошукового сервера - в основному комп'ютерщики-професіонали. У ньому можна здійснювати повноцінний текстовий пошук по довільному ключовому слову. Його радять використати для пошуку необхідного програмного забезпечення і даних, пов'язаного з інформаційними технологіями. Однак комп'ютерною тематикою дана пошукова система, безумовно, не обмежується. Більш того постійно ведеться робота, направлена на подальший її розвиток: поповнюється база даних Inktomi, випускаються нові версії алгоритмів. PLANET SEARCHhttp://www.planetsearch.com Можливо, у найближчому майбутньому на "небосхилі" порталів зійде нова зірка. Компанія PlanetSearch Networks замість створення однієї загальної пошукової системи вирішила зосередитися на формуванні "онлайновых співтовариств", в які люди змогли б об'єднуватися по інтересах і захопленнях і користуватися не тільки механізмом пошуку, але і тематичними дошками електронних оголошень, а також чатом. І хоч розробка цього проекту знаходиться ще на початковому етапі, але є всі основи вважати, що дана ідея себе виправдає, і в швидкому майбутньому компанія зможе запропонувати користувачам прекрасний набір тематичних сайтів і відповідних пошукових систем, правда, потрібно відмітити, що подібного роду послуги деякі компанії вже давним-давно надають в Мережі. SEARCHKINGhttp://www.searchking.com Компанія SearchKing, що володіє однойменною пошуковою системою, вирішила сконцентрувати свої зусилля на доставці користувачам найбільш релевантної інформації. При побудові рейтингу SearchKing враховує кількість натиснень на посиланнях, що відвідуються внаслідок пошуку. Таким чином, кожний користувач як би голосує за самий популярний сайт. Ідея, можливо, і заслуговує уваги, але є в ній один недолік: цей рейтинг не можна назвати об'єктивним, оскільки відвідуючи який-небудь сайт з списку знайдених, користувач ще не знає його змісту і фактично продовжує пошук. Є у цього Web-вузла свої постійні клієнти, і, бути може, в швидкому майбутньому ця система займе одну з лідируючих позицій серед пошукових машин. GOOGLEhttp://www.google.com Сьогодні Google індексує 4 млрд. документів, що не порівнянно з показниками дворічної давності. Збільшений не тільки об'єм, але і частота індексації, яка зараз обчислюється мільйонами сторінок щодня. Крім цього, цікаво спостерігати за тим, як технології Web-пошуку поступово перетікають у технології для Internet-реклами. Це відбувається і в Google, оскільки він старається зробити рекламу своїх клієнтів максимально оперативною, цілеспрямованою і дійовою. Дві основні задачі програмістів Google - це релевантність результатів і зручність пошуку. За останні два роки Google поліпшив Web-інтерфейс пошуківця (додалися посилання на пошук ілюстрацій, новин, конференцій Usenet і каталога). Алгоритми для визначення релевантності знаходяться в стані постійного оновлення - щомісяця Google впроваджує декілька нових механізмів, покликаних поліпшити якість пошуку.
BIGMIR)NEThttp://www.bigmir.net У листопаді 2003 року Internet-холдинг Sputnikmedia.net оголосив про завершення розробки власної пошукової системи по українським сайтам і введенні її в експлуатацію. Новий сервіс доступний всім бажаючим з головної сторінки порталу bigmir)net. Зі слів головного розробника проекту Дениса Місько, на сьогоднішній день проіндексовано близько 7 млн. сторінок на 52 тис. серверах, що відносяться до України.
МЕТАhttp://www.meta.ua Проект "Мета" досить молодий, однак вже встиг зарекомендувати себе як авторитетний ресурс в української Internet. На заголовній сторінці є можливість вибору української, англійської або російської версії сайту. Пошук можна проводити як по всьому документу, так і по тексту, заголовку, ключовим словам, підписам до картинок, посиланням і коментарям. У 2001 р. Мета розробила нове програмне ядро пошукової системи, основною перевагою якого став координатний індекс, що враховує взаємне розташування слів в документі при пошуку, що дозволяє більш точно знаходити не просто окремі слова, а і словосполучення. Крім цього, з'явилася можливість угрупування результатів пошуку по серверах, реконструкції змісту документів безпосередньо на пошуковому сервері; розширена мова запитів. Нове ядро стало базою для створення цілої лінійки продуктів: корпоративної пошукової системи, пошукової системи для сайтів, CD, ПК і локальних мереж. За останні два роки у Мети з'явилася можливість повнотекстового пошуку по заданих регіонах України, новинах, довіднику "Бізнес-Україна", декількох електронних магазинах. "МЕТА" навчилася розуміти нові формати документів, такі, як .doc, .xls, .rtf, .zip, .rar і т. п. У доповнення до словникових морфологічних аналізаторів, що використовуються в системі, були розроблені модулі "ймовірностної морфології" для української, російської та англійської мов. Вони дозволяють з дуже високою точністю відмінювати "несловникові" слова (прізвища, абревіатури, неологізми і т. п.). За минулий період кількість запитів до системи збільшилася в п'ять разів, в той час як пошуковий індекс виріс майже в десять разів. Щоб устигати за таким зростанням, доводиться постійно розвивати програмну частину і нарощувати апаратні потужності. Так, наприклад, влітку 2003 року "МЕТА" перейшла на кластерну технологію, внаслідок чого пошуковий індекс був рознесений на декілька комп'ютерів - це дозволило істотно підвищити продуктивність системи і скоротити час повного оновлення індексу приблизно до одного місяця. Влітку 2003 МЕТА року почала нарощування технічної бази, відповідаючи зростанню активності користувачів ресурсу. МЕТА щодня відповідає на майже 100 тисяч пошукових запитів від більше за 30 тисяч користувачів. Система з 4-х пошуково-індексуючих серверів і 1-го веб-сервера дозволила значно прискорити оновлення пошукового індексу і додання нових українських ресурсів, підвищивши також і швидкість обробки запитів. На сьогоднішній день система щодня обробляє близько 4-5 GB нових документів, а загальний об'єм документів в індексі перевищує 100 GB (5 млн. 567 тис URL).
RAMBLERhttp://www.rambler.ru Сервер Rambler компанії Stack є одним з самих великих і найбільш відомих пошукувачів російської Internet. Спайдер Rambler індексує сайти, розташовані в доменах СНД. Якщо ж ваша сторінка знаходиться на іноземному сервері, то про це потрібно окремо повідомити розробників. Система містить мільйони документів з більш ніж 15 тис. Web-вузлів, має в середньому 500 тис. хіт в день, а над підтримкою всього цього проекту трудяться біля сотні фахівців. Rambler надає відвідувачам безліч послуг: дозволяє, наприклад, збільшувати або зменшувати значущість окремих слів в ключовій фразі за допомогою символів "+" і"- ", полегшує пошук в адресах URL, заголовках сторінок і навіть в декількох абзацах на початку документа. За допомогою даної системи можна легко знаходити "схожі" сторінки, здійснювати повторний пошук адрес серед вже знайдених. У відповідь на запит Rambler видає клієнтам список посилань, забезпечуючи кожну з них невеликою анотацією, з якої ви взнаєте кодування документа, його розмір, дату створення/оновлення, а також прочитаєте фрагмент пропозиції з шуканою ключовою фразою. АПОРТ!http://www.aport.ru Пошукова система "Апорт!" належить компанії "Агама" і розробляється при підтримці Intel. До речі сказати, дані компанії беруть також участь в створенні російськомовного каталога "Ау!". Пошук в "Апорт!" ведеться по базі даних, що містить понад двох мільйонів документів, оригінали яких розташовані на більш ніж 13 тис. серверів. Система може шукати необхідну інформацію по різних словоформах введених слів, виправляти в них помилки, підтримує пошук по фразах, в ній легко указати обмеження у відстані між фрагментами тексту, задане потрібною кількістю слів або фраз, а також допустиме тимчасової період створення документів. Можливий пошук за адресами URL, заголовками документів, підписами до картинок, посиланнями і коментарями. Більш того система може здійснювати автоматичний переклад з російського на англійський і з англійського на російський не тільки ключової фрази при запиті, але і отриманої внаслідок інформації. Підсумки пошуку упорядковуються по частоті використання шуканих термінів в документі. Разом з посиланням відображаються фрагмент тексту, де зустрічаються ключові слова, а також дата і час останньої модифікації файла. Це дуже зручне, оскільки дозволяє визначити, наскільки документ відповідає по значенню заданій ключовій фразі. Серед інших приємних особливостей цього сайту можна назвати індикатор завантаження, рейтинги самих уживаних ключових слів і найбільш популярних серверів. ЯNDEXhttp://www.yandex.ru Сайт Яndex, що належить компанії CompNet, є одним з проектів, що найдинамічно розвиваються, в РуНеті. У ньому пошук ведеться більш ніж по 30 тис. серверів, проіндексовано біля 2 млн документів, і показники ці постійно зростають. Основною перевагою системи Яndex є здатність знаходити задані слова незалежно від форми, в якій вони вживаються в документах. Цікаво, що система здатна "відмінювати" навіть ті слова, яких немає в словнику, причому пошук може вестися як за всіма формами ключових слів, так і по конкретно заданій. Дана пошукова система дозволяє встановлювати відстань між фрагментами ключової фрази з урахуванням їх порядку, посилювати значущість того або іншого слова, використати уточнюючі слова. Пошук можна також вести по заголовках документів, по посиланнях, що зустрічаються на сторінках. Крім того, в Яndex легко знайти документи, схожі по значенню на ті, що зацікавили вас по попередньому запиту. Можна обмежувати пошук вже в знайдених документах, т. е. проводити своєрідне "чищення" результатів запиту. При впорядкуванні списку посилань, що отримується користувачем, враховується число ключових слів, що зустрілися в документі, їх положення і відстань між ними. крім того, кожний з адрес URL містить коротку анотацію знайденого документа. Серйозною загальносвітовою проблемою Internet-пошуку є складність ефективного виявлення дуже схожих документів, так званих "майже-дублікатів". Для її розв'язання в першій половині 2002 р. Яndex впровадив процедуру чищення бази на основі оригінального алгоритму, який регулярно скорочує розміри індексу на 15-20%. Цей механізм дозволив істотно підвищити якість пошуку, виявлення спама і т. д. YAHOO!http://www.yahoo.com Одним з найвідоміших порталів в мережі був, є і залишається сайт компанії Yahoo. У квітні 1994 р. два співробітники Стенфордського університету Девід Філ і Джеррі Янг вирішили серйозно зайнятися збором різних посилань в Internet і угрупуванням їх по тематичних розділах. Протягом всього 1994 р. ця колекція сумлінно поповнювалася, поки на початку 1995 р. легендарний Марк Андріссен, працюючий в той час ще в Netscape Communications, запропонував перенести базу даних посилань на комп'ютери своєї компанії. Пропозиція була прийнята, що, в свою чергу, сприяло і популяризації Yahoo! як кошти пошуку інформації в Internet, і розвантаженню комп'ютерних мереж Стенфордського університету. Довгий час в компанії Yahoo користувалися послугами AltaVista, але після того як остання підписала угоду про співпрацю з LookSmart, керівництво Yahoo убачило в альянсі серйозного конкурента, що створився і вдалося до допомоги пошукової системи Inktomi. Сьогодні для багатьох людей Yahoo! є одним з самих авторитетних джерел інформації. Каталог містить посилання, які найбільш повно відповідають вказаній вами тематиці, в Yahoo! ніколи не зареєструють сайт, який перебуває в стадії розробки, в полі зору творців цієї чудової пошукової системи не попадуть сервери, чиї господарі стараються заманити до себе клієнтів за допомогою рекламних закликів, абсолютно далеких за змістом від істинного інформаційного наповнення сторінок. У компанії Yahoo не розголошують інформації про те, скільки всього сайтов зареєстровано на її сервері, але на власному досвіді переконуєшся, що це - масштабний і проект, що постійно розвивається. Сервер Yahoo! має приблизно 40 млн. відвідувачів в місяць, і це число безперервно зростає. Крім того, багато шанувальників і у розділу Yahoo! Headlines, де зібрані новини від провідних інформаційних агентств: Reuters, AP, MSNBC і інш. Є і більше за 50 розділів, що стосуються самих різних областей, - Yahoo! Finance для бізнесменів і фінансистів, Yahoo! Travel для мандрівників, Yahooligans! for Kids для неповнолітніх і безліч інших. Є і вичерпне керівництво для покупців різних товарів. Відвідувачі сайту можуть отримати безкоштовно адресу електронної пошти, скористатися можливостями мережевого пейджинга (Instant Messaging), взяти участь в on-line дискусіях (Chat) і, що особливо ціниться клієнтами, створити індивідуальний портал (My Yahoo!). Сайт має 14 локалізованих версій, де розташована інформація, що стосується тільки конкретного регіону, наприклад Yahoo! Germany або Yahoo! Asia. ALTAVISTAhttp://www.altavista.com Весною 1995 р. троє співробітників дослідницької лабораторії DEC отримали в своє розпорядження новітній на той час супершвидкісний сервер Alpha 8400 (кодова назва TurboLaser) і розмістили на ньому доступну для пошуку інформацію з дошок оголошень (bulletin boards) за останні десять років. Як говорять співробітники компанії сьогодні: "Все почалося з любові до порядку". Але по іронії долі, AltaVista отримала свою назву саме через відсутність порядку. Під час чергової планерки на погано витертій дошці залишилося декілька слів - Alto, взяте з імені міста Пало-Алто (штат Каліфорнія), і Vista - вигляд, перспектива. Розробникам сподобалося поєднання AltaVista - "вигляд зверху", і воно стало торгової мазкої пошукової машини, яка незабаром набула велику популярності в Мережі. На сьогоднішній день база даних AltaVista нараховує більше за 140 млн сторінок. Реєстрація сайтів в ній відбувається протягом 48 годин, і якщо інші пошукові машини іноді відключаються на технічну перерву, відмовляються приймати адреси або включають їх в базу даних з великим спізненням, то за AltaVista таких "гріхів" не помічалося. Серед особливостей цієї пошукової системи можна указати такі додаткові механізми, як Photo Finder - інструмент пошуку зображень, технологію онлайнового перекладу документів, розроблену компанією Babelfish. До речі, остання властивість дозволила пошуковій машині індексувати документи на декількох мовах, список яких ви знайдете на її заголовній сторінці. EXCITEhttp://www.excite.com Пошукова машина Excite ще до недавніх часів належала однойменній корпорації. Але на даний момент портал є власністю @Home - дочірньої компанії AT&T. Історія виникнення Excite досить стандартна для Силіконовий Долини. Зимою 1993 р. шестеро випускників Стенфордського університету вирішили організувати власну комп'ютерну компанію Architext Software, яка б займалася розробкою програмного забезпечення для пошуку і рубрикації інформації в Мережі. Саме з цієї ідеї і почалося створення пошукової машини порталу Excite. У грудні 1994 р. одна з інвестиційних компаній штату Каліфорнія, повіривши в заяви розробників, вклала перші 4 тис. доларів в майбутній мультимільйонний проект (до речі, всі ці гроші пішли на купівлю жорсткого диска). Практично відразу ж після початку функціонування порталу компанія Architext Software придбала популярність і почала залучати солідні фінансові інвестиції і рекламодавців. Це дозволило її керівництву вже в 1996 р. подать заяву про акціонування проекту Excite, і відтоді оборот однієї з самих великих Internet-компаній почав обчислюватися мільйонами доларів. Фірму очолив ветеран індустрії Джордж Белл (George Bell), а загальне число співробітників перевищило 200. Що ж відрізняє Excite від інших подібних серверів? У її алгоритмі пошуку з самого початку закладена технологія ICE (Intelligent Concept Extraction), яка дозволяє працювати не тільки з окремими ключовими словами, але і з поняттями, об'єднуючими їх. Так, якщо ви ввели ключову фразу "догляд за волоссям", то пошукова машина перегляне також сторінки, що містять слова "шампунь", "лупа" і т. д. Excite надзвичайно зручна для первинного пошуку матеріалів по ключовій фразі. А ось з окремими ключовими словами система працює декілька гірше. Технологія Excite ліцензована компанією Netscape Communications для використання на порталі NetCenter, а також корпорацією America Online, причому в останньому випадку з правом доповнення бази даних, а значить, результати пошуку в Excite і AOL NetFind можуть дещо відрізнятися. LYCOShttp://www.lycos.com Рішення про заснування порталу та пошукової машини Lycos багатьма фахівцями було зустрінуте без ентузіазму, вони сумнівалися, що цій системі вдасться створити гідну конкуренцію таким гігантам, як AltaVista, Excite або Yahoo!. Але на сьогоднішній день Lycos є прекрасним інструментом пошуку, особливо в сфері Internet-торгівлі. На сайті є поради для покупців в США (від автомобілів до квартир, а також по вибору міста, де жити дешевше і краще). База даних системи регулярно поповнюється, хоч сам механізм пошуку за останні декілька років істотних змін не зазнав. Партнери і рекламодавці Lycos працюють в самих різноманітних областях бізнесу і пропонують широкий спектр послуг, так що вибирати є з чого. Портал виділяється з ряду інших наявністю найвідомішого каталога WhoWhere з персональною інформацією про користувачів Internet, а також (завдяки придбанню компанії Tripod) розвиненими коштами по наданню послуг електронної пошти (є можливість створювати підпапки для зберігання кореспонденції і адресні книги) і розміщенню безкоштовних міні-сайтів. З допомогою Personal Lycos можна створити персональний календар, щоденник, список нагадувань і менеджера контактів. WEBCRAWLERhttp://www.webcrawler.com Спочатку даний проект був дипломною роботою Брайана Пінкертона, аспіранта Університету штату Вашингтон, і був покликаний полегшити пошук інформації в Internet з використанням ключових слів. У міру розвитку проекту друзі переконали Пінкертона в необхідності створення повноцінного Web-інтерфейса для свого прикладення, оскільки пошук інформації в мережі цікавить всіх. На відміну від Excite, гроші і спонсорська допомога на розробку WebCrawler знайшлися самі, а незабаром компанія Dealernet, розташована в Сиетле, піднесла Брайану подарунок у вигляді нового сервера. У обмін на це на заголовній сторінці WebCrawler був вміщений логотип Dealernet, таким чином, почалася комерціалізація проекту. Невдовзі компанія StarWave заявила про своє бажання підтримати роботу Пінкертона, і він отримав ще один безкоштовний сервер. У 1995 р. почався бум Internet, що приніс швидкий успіх проекту WebCrawler. У тому ж році розробка була продана компанії America Online, а її автор почав працювати в компанії NeXT, належній невтомному Стіву Джобсу, до того часу Apple, що вже покинув. У 1996 р. проект WebCrawler перекупила Excite, а Пінкертону було запропоноване місце віце-президента нової компанії, де він і працює по сьогоднішній день. Якщо ви зайдете на заголовну сторінку WebCrawler, то виявите логотип Excite, оскільки дана пошукова машина є складовою частиною Excite Network. Її творці звертають увагу на те, що багато які більш пізні технології, включаючи Lycos і InfoSeek, були розроблені вже після появи WebCrawler. База даних проекту продовжує регулярно поповнюватися, використати цю систему рекомендується у випадках, коли потрібен пошук по одному або двом ключовим словам. HOTBOThttp://www.hotbot.com Наприкінці 1998 р. компанія Lycos повідомила, що її черговим придбанням стане Wired Digital. Таким чином, пошукова машина HotBot виявилася підлеглою керівництву Lycos. Однак не треба думати, що HotBot став просто додатком до пошукової системи Lycos, він, як і раніше, продовжує функціонувати самостійно, не поступаючись, а в багатьох випадках навіть перевершуючи свого нового господаря. У Wired Digital необхідність розробки пошукової системи усвідомили в 1996 р., коли користувачі сайту HotWired почали все частіше вимагати наявності там доброго пошукового механізму. До цього часу в Мережі вже функціонували Lycos, InfoSeek і трохи інших великих систем. Тоді співробітники Wired зацікавилися однією з дипломних робіт на факультеті комп'ютерних наук Університету штату Каліфорнія, метою якої було створення технології пошуку документів в Internet під назвою Inktomi. І незабаром з'явився новий могутній пошуковий механізм, заснований на цій технології. Вже в перший рік свого існування HotBot був визнаний багатьма відомими комп'ютерними виданнями кращою пошуковою системою в Internet. За твердженням HotBot, відвідувачі даного пошукового сервера - в основному комп'ютерщики-професіонали. У ньому можна здійснювати повноцінний текстовий пошук по довільному ключовому слову. Його радять використати для пошуку необхідного програмного забезпечення і даних, пов'язаного з інформаційними технологіями. Однак комп'ютерною тематикою дана пошукова система, безумовно, не обмежується. Більш того постійно ведеться робота, направлена на подальший її розвиток: поповнюється база даних Inktomi, випускаються нові версії алгоритмів. PLANET SEARCHhttp://www.planetsearch.com Можливо, у найближчому майбутньому на "небосхилі" порталів зійде нова зірка. Компанія PlanetSearch Networks замість створення однієї загальної пошукової системи вирішила зосередитися на формуванні "онлайновых співтовариств", в які люди змогли б об'єднуватися по інтересах і захопленнях і користуватися не тільки механізмом пошуку, але і тематичними дошками електронних оголошень, а також чатом. І хоч розробка цього проекту знаходиться ще на початковому етапі, але є всі основи вважати, що дана ідея себе виправдає, і в швидкому майбутньому компанія зможе запропонувати користувачам прекрасний набір тематичних сайтів і відповідних пошукових систем, правда, потрібно відмітити, що подібного роду послуги деякі компанії вже давним-давно надають в Мережі. SEARCHKINGhttp://www.searchking.com Компанія SearchKing, що володіє однойменною пошуковою системою, вирішила сконцентрувати свої зусилля на доставці користувачам найбільш релевантної інформації. При побудові рейтингу SearchKing враховує кількість натиснень на посиланнях, що відвідуються внаслідок пошуку. Таким чином, кожний користувач як би голосує за самий популярний сайт. Ідея, можливо, і заслуговує уваги, але є в ній один недолік: цей рейтинг не можна назвати об'єктивним, оскільки відвідуючи який-небудь сайт з списку знайдених, користувач ще не знає його змісту і фактично продовжує пошук. Є у цього Web-вузла свої постійні клієнти, і, бути може, в швидкому майбутньому ця система займе одну з лідируючих позицій серед пошукових машин. GOOGLEhttp://www.google.com Сьогодні Google індексує 4 млрд. документів, що не порівнянно з показниками дворічної давності. Збільшений не тільки об'єм, але і частота індексації, яка зараз обчислюється мільйонами сторінок щодня. Крім цього, цікаво спостерігати за тим, як технології Web-пошуку поступово перетікають у технології для Internet-реклами. Це відбувається і в Google, оскільки він старається зробити рекламу своїх клієнтів максимально оперативною, цілеспрямованою і дійовою. Дві основні задачі програмістів Google - це релевантність результатів і зручність пошуку. За останні два роки Google поліпшив Web-інтерфейс пошуківця (додалися посилання на пошук ілюстрацій, новин, конференцій Usenet і каталога). Алгоритми для визначення релевантності знаходяться в стані постійного оновлення - щомісяця Google впроваджує декілька нових механізмів, покликаних поліпшити якість пошуку.
Немає коментарів:
Дописати коментар