Використання метапошукових серверів глобальної мережі Інтернет та спеціалізованих метапошукових програмних комплексів
Кожен звичайний (назвемо його "традиційним") пошуковик має тільки свій власний, обмежений своїми ресурсами перелік (індекс) документів, які доступні для пошуку. Жодна з подібних систем не може охопити всіх ресурсів, які існують в мережі Інтернет.
Тому може виникнути ситуація, коли користувача не задовольняють результати пошукової видачі. В цьому випадку користувач переходить на інший пошуковик і намагається знайти там, що йому потрібно. Але цей вид пошуку займає досить багато часу, і потребує від користувача постійної уваги в процесі проведення пошуку. Для вирішення цієї проблеми були створені так звані метапошукові системи.Метапошукова система (інша назва: метапошукова машина, мета пошуковий сервер, метакраулер або мультипотокова система, машина) - це пошуковий інструмент, який посилає Ваш запит одночасно на декілька пошукових систем і каталогів. Частина запитів надсилається в так звану невидиму (приховану) павутину, що не проіндексована традиційними пошуковими системами. Зібравши результати, метапошукова система видаляє дублюючі посилання і, відповідно до свого алгоритму об'єднує та ранжує результати в загальному списку. На відміну від класичних пошукових машин не має власної бази даних і власного пошукового індексу.
Найбільш популярні метапошукові системи:
1. DuckDuckGo (https://duckduckgo.com/) - це досить відома мета- пошукова система з відкритим вихідним кодом. Сервери знаходяться в США. Крім власного робота, пошуковик використовує результати інших джерел: Yahoo! Search BOSS, Google, «Вікіпедія», Wolfram Alpha.
2. Metabot (http://www.metabot.ru) - присутня можливість пошуку по російським і світовим ресурсам, а також по MP3, відео файлів і серверів новин. Видається інформація про стратегію пошуку, синтаксисі пошукової машини і опитуваних систем.
3. Debriefing (http://www.dogpile.com) Потужна метапошукова система Dogpile використовує для метапошуку не тільки пошукові системи, але і FTP-сервери, а також новинні сайти, котирування фондових бірж і навіть "жовті сторінки" Інтернету.
4. Ixquick (https://www.ixquick.com) - система метапошуку Ixquick працює з десятьма зовнішніми базами. Це пошуковики Bing, Yahoo! Ask, All the Web, Cuil, Entire Web, Gigablast, каталоги Qkport і Open Directory, а також Wikipedia. У списку баз відсутня Google, однак охоплення альтернативних систем варто визнати досить широким. Підтримується пошук на вісімнадцяти мовах, в тому числі російською.
5. Metabear (http://www.metabear.com) - надає релевантні результати як з міжнародних, так і з російських сайтів.
6. Search 66 [http://search66.com] - ця австралійська метапошукова система включає пошук по 10 пошуковим серверам. Групує разом сторінки від одного і того ж домена.
Також особливої уваги потребують так звані пошукові утиліти (пошукові додатки робочого столу). Це завантажуванні інструменти метапошуку, які шукають в численних пошукових системах. Результати упорядковуються і ранжуються за релевантністю з видаленням повторів. Це не безкоштовні системи, але у більшості з них є безкоштовна пробна версія. Ціна - кілька десятків доларів. Найбільш яскраві представники цих програмних комплексів виглядають таким чином:
1. SiteSputnik;
2. PDS Поисковик;
3. Info Pilot
SiteSputnik - програмний комплекс, що дозволяє вести пошук і обробку результатів в видимих і невидимих частинах Інтернету, використовуючи всі необхідні користувачу пошуковики. Основне призначення: організація та автоматизація професійного пошуку і збору інформації з відкритих джерел Ін- тернету, моніторинг появи нових посилань на задану тему. Неофіційне найменування «програма для допиту Інтернету».
Виконання простого запиту в програмі SiteSputnik.
• На верхній панелі інструментів натисніть на іконку «Золотий ключик» (рис. 69)
Рис. 70
Введіть текст запиту, наприклад, Днепр наркотики купить, або свій запит (рис. 71 )
Рис.
71Якщо Ви, більше нічого не роблячи, відразу натиснете на кнопку «Пошук», то за замовчуванням запит виконається в Яндексі, Google, Yahoo, Рамблере, Bing (MSN), Mail, в коментарях і блогах Яндекса і в блогах Google на глибину трьох або двох сторінок пошуку для кожного джерела. Дублі посилань будуть відкинуті, видача буде єдиною, як ніби Ви задіяли не 9 джерел, а одне джерело.
Якщо Вам потрібно знайти інформацію в інших джерелах, то спочатку натисніть на поле вибору джерела або наведіть курсів на кнопку |||. Це призведе до відкриття меню доступних на даний момент джерел. Вибираємо ме- ню Сценарии, підменю, наприклад, СоцСети та підменю Везде. Таким чином ми примусово встановили напрямок пошуку. У даному випадку пошук буде проведено у всіх популярних соціальних мережах (Vk, Twitter, Facebook, YandexPiople, Однокласники і т.п.) (рис. 72).
Рис. 72
Після вибору джерела Ви побачите наступне: (рис. 73)
Рис. 73
Глибину пошуку, розміщену в третьому полі, можливо змінити вручну. Глибина - це кількість пошукових сторінок, які автоматично відкриваються СайтСпутніком. В переважній більшості випадків пошук через дану програму набагато ефективніший, ніж пошук через зовнішні пошукові системи, наприклад, Яндекс або Google. Однією із важливих функцій програми також є додавання користувачем нових джерел для проведення пошуку.
PDS Поисковик - являє собою програмний продукт, що забезпечує пошук, моніторинг, сортування, обробку та групування інформації, що дозволяє шляхом «перехресного пошуку» на глобальному, регіональному, локальному та місцевому рівнях без зусиль знайти необхідну інформацію. Основними функціональними елементами комплексу є:
• виключення можливості повтору одних і тих же посилань;
• фільтр тонкої настройки, який дозволяє додатково уточнити ознаки пошукового запиту, що дає високу ступінь точності знаходження потрібної інформації не тільки за ознакою релевантності, а й за сукупністю синтаксичного і логічного відбору;
• легко конфігуруємі можливості пошукової системи дозволяють користувачеві без проблем налаштовувати параметри пошуку інформації;
• великий структурований інтерактивний класифікатор за видами і групам інформації, що перетворює процес збору та систематизації інформації в просту, необтяжливу процедуру;
• постійний процес автоматичного поновлення згрупованої інформації;
• інтеграція з іншими програмними продуктами (рис.
74).
Рис. 74
Info Pilot - утиліта пошуку в Інтернеті, яка відсилає ваш запит на пошукові машини мережі Інтернет (Google, AltaVista, Yandex, HotBot і т.д.) і видалить все повторювані посилання. Результати пошуку можуть бути збережені у форматі PDF, HTML, CSV, текстовий формат (рис. 75).
Рис. 75
4.3.
Еще по теме Використання метапошукових серверів глобальної мережі Інтернет та спеціалізованих метапошукових програмних комплексів:
- Організація простого та розширеного пошуку інформації у пошукових серверах глобальної мережі Інтернет
- Робота зі спеціалізованим аналітичним програмним комплексом IBM i2 Analysts Notebook
- Лекція № 2 (денна форма навчання) Тема 2. Організаційні та правові основи діяльності осіб у мережі Інтернет в Україні та за її межами
- Заняття № 2 (денна форма навчання) Тема 2. Організаційні та правові основи діяльності осіб у мережі Інтернет в Україні та за її межами
- Розділ IV. МЕТОДИКА ОРГАНІЗАЦІЇ ПОШУКУ ПРАЦІВНИКАМИ НАЦІОНАЛЬНОЇ ПОЛІЦІЇ У ВІДКРИТИХ ДЖЕРЕЛАХ МЕРЕЖІ ІНТЕРНЕТ З МЕТОЮ ЕФЕКТИВНОГО ВИКОНАННЯ СВОЇХ СЛУЖБОВИХ ОБОВ’ЯЗКІВ
- 3.14. Ухвала Вищого спеціалізованого суду України з розгляду цивільних і кримінальних від 30.01.2013 р. за скаргою Публічного акціонерного товариства «ДТЕК Донецькобленерго» в інтересах структурного підрозділу «Донецькі електричні мережі» на дії Відділу державної виконавчої служби Київського районного управління юстиції у м. Донецьку, за касаційною скаргою Публічного акціонерного товариства «ДТЕК Донецькобленерго» на ухвалу Апеляційного суду Донецької області від 21 серпня 2012 року.
- Основні поняття інтернету
- Інтернет, як специфічне соціальне середовище, має низку особливостей, які значно ускладнюють контроль з боку правоохоронних структур.
- 11.5. Правове забезпечення охорони природного середовища при експлуатації тваринницьких ферм і комплексів
- 12. Каналізаційні мережі
- Формування національної екологічної мережі
- КОРИСНІ ІНТЕРНЕТ-РЕСУРСИ
- Правовий порядок програмно-цільового фінансування