Что такое невидимая сеть?
Знаете ли вы, что существует огромное количество данных, которые поисковые системы не будут показывать вам без определенного поиска? Термин «невидимая сеть» в основном относится к обширному хранилищу информации, в котором поисковые системы и каталоги не имеют прямого доступа к базам данных.
В отличие от страниц на видимой веб-странице (то есть в Интернете, доступ к которой вы можете получить из поисковых систем и каталогов), информация в базах данных обычно недоступна программным паукам и сканерам, которые создают индексы поисковых систем. Пользователи могут получить доступ к большей части этой информации, но только через определенные поисковые запросы, которые разблокируют, где эта информация живет.
Насколько велик невидимый интернет?
Невидимая сеть оценивается буквальнов тысячи раз больше чем веб-контент, найденный в общих запросах поисковой системы. Согласно Bright Planet, поисковой организации, специализирующейся на извлечения невидимого веб-контента, Invisible Web содержит около 550 миллиардов отдельных документов по сравнению с одним миллиардом веб-страниц.
Основные поисковые системы - Google, Yahoo, Bing - не возвращают весь «скрытый» контент в обычном поиске, просто потому, что они не могут видеть это содержимое без специальных параметров поиска и / или опыта поиска. Однако, как только поисковик знает, как получить доступ к этим данным, существует огромное количество доступной информации.
Почему это называется «Невидимая сеть»?
Пауки, которые в основном представляют собой небольшие программные продукты, меандр в Интернете, индексируют адреса страниц, которые они открывают. Когда эти программные программы попадают на страницу из Invisible Web, они не знают, что с этим делать. Эти пауки могут записывать адрес, но не могут получить доступ к информации о странице.
Зачем? Есть много факторов, но в основном они сводятся к техническим барьерам и / или преднамеренным решениям владельца (ов) сайта, чтобы исключить их страницы из пауков поисковых систем. Например, сайты университетской библиотеки, которые требуют доступа паролей к своей информации, не будут включены в результаты поисковой системы, а также страницы на основе скриптов, которые нелегко читают пауки поисковых систем.
Почему важна невидимая сеть?
Многие пользователи считают, что было бы проще просто придерживаться того, что можно найти в Google или Yahoo. Однако не всегда легко найти то, что вы ищете с помощью поисковой системы, особенно если вы ищете что-то немного сложное или неясное.
Подумайте о Сети как обширной библиотеке. Большинство людей не ожидало, что просто войдет в парадную дверь и сразу найдет информацию об истории скрепки, лежащей на стойке регистрации; они ожидали бы, чтобы копать его. Здесь поисковые системы не обязательно помогут вам, но незримый веб.
Тот факт, что поисковые системы ищут только небольшую часть сети, делает Invisible Web очень заманчивым ресурсом. Там гораздо больше информации, чем мы могли себе представить.
Как использовать невидимую сеть?
Есть много других людей, которые задали себе один и тот же вопрос и собрали великолепные сайты, которые служат отправной точкой в невидимой сети. Вот несколько шлюзов для разных предметов:
гуманитарные науки
- Voice of the Shuttle: «VoS», созданная в 1994 году, является одной из старейших и крупнейших баз данных гуманитарных наук в Интернете, предлагая эксклюзивный индекс контента для темы, начиная от антропологии и заканчивая технологией письма.
Специально для правительства США
- Университетский центр правительственных документов Мичигана: здесь вы найдете отчеты, статистику и другие документы со всех уровней правительства США. Предлагаемые базы данных включают в себя: искусство, медико-санитарные науки, социальные науки и международные исследования.
- USA.gov: портал с красной ковровой дорожкой в глубине многих организаций правительства Соединенных Штатов. Включает правительственные рабочие места, список правительственных учреждений от А до Я и информацию о поиске грантов, займов и финансовой помощи.
Здоровье и наука
- PsycNET: используйте эту базу данных из Американской психологической ассоциации, чтобы найти рефераты и целые журналы по различным психологическим темам (плата распространяется на полные записи в журнале, тезисы обычно бесплатны).
- Healthfinder: профессионально проверенная информация из более тысячи различных баз данных о здоровье в Интернете. Здесь доступен широкий спектр ресурсов по головокружительному набору проблем здравоохранения.
- RXList: Если вы ищете надежную информацию о наркотиках, то эта база данных по лекарственным средствам, отпускаемым по рецепту, лекарствам и пилюлям для вас. Предлагает индексы от А до Я, коллекции изображений и словарь терминов.
Мега-порталы
- Виртуальная библиотека проста и проста в использовании, с аннотированными темами. Я особенно ценю аннотации, потому что это помогает исключить постороннее время поиска.
Что о других невидимых веб-ресурсах?
Есть много, много сайтов, которые настроены, чтобы врываться в Невидимый Интернет. Большая часть информации о невидимой сети поддерживается академическими учреждениями и имеет более высокое качество, чем результаты поисковой системы. Есть «академические шлюзы», которые могут помочь вам найти эту информацию. Чтобы найти практически любой образовательный ресурс в Интернете, просто введите эту строку поиска в свою любимую поисковую систему:
сайт: .edu "тема, которую я ищу"
Ваш поиск будет возвращен только с сайтами, связанными с .edu.Если у вас есть определенная школа в виду, что вы хотите искать, используйте URL этой школы в своем поиске:
сайт: www.school.edu "тема Я ищу"
Создайте свой объект в цитатах, если это более двух слов; это позволяет поисковой системе, которую вы используете, знать, что вы хотите найти эти два слова рядом друг с другом. Узнайте больше о трюках поиска, чтобы стать более опытными в поиске в Интернете.
Нижняя линия о невидимой сети
Invisible Web предлагает множество ресурсов на все, о чем вы можете подумать. Ссылки, выделенные в этой статье, едва начинают касаться огромных ресурсов, доступных в Invisible Web. С течением времени Invisible Web будет только больше, и именно поэтому сейчас неплохо научиться изучать его.
