- Регистрация
- 26.12.19
- Сообщения
- 152
- Онлайн
- 7д 10ч 45м
- Сделки
- 0
- Нарушения
- 0 / 1
Доброго Вам времени! Возможно, Вы не раз читали различные статьи о скрытых от глаз простых обывателей, интернет-ресурсах или видели картинку на которой сеть интернет представленна в виде айсберга. Вам захотелось прикоснуються к чему-то скрытому и глубинному, к сожалению, в обоих случаях это скорее преувеличение, нежели действительность. Вы частично используете глубинные веб-ресурсы (хотя и неосознанно), и графика айсберга не совсем соответствует реальности.
Скрытый, невидимый, глубинный - это слова, которые вызовут интерес у любого читателя. Вместе со словом «интернет» они определяют ресурсы, которые доступны не всем. Но здесь ВАЖНО понимать какой смысл стоит вкладывать в такие определения.
Не помню, кто впервые использовал сравнение с айсбергом, но представленная там «многоуровневая» структура не совсем верна. Так как же на самом деле выглядят ресурсы сети интернет?
КАКОЙ РАЗМЕР ИНТЕРНЕТА И ЧТО ВЫ МОЖЕТЕ УВИДЕТЬ В GOOGLE?
Все, что вы можете найти благодаря поисковым системам, это так называемая надводнаяная сеть. Поисковые системы используют роботов для поиска в Интернете и сохранения найденных страниц архивах. Они находят и сохраняют страницы, файлы, данные, которые могут распознать в рамках заданных им алгоритмов. Из-за алгоритмов и технических ограничений поисковая система не охватывает всю сеть, только ее часть (каждая поисковая система может отличаться в этом отношении).
Что вы найдете в поисковых системах? Все те страницы, к которым вы можете получить доступ без проблем, и доступ к ним совсем не сложен. Надводная сеть включает в себя, например: Wiki, Facebook, Amazon, Youtube, веб-сайт президента какого-либо государства и многие другие сайты. Вы сталкиваетесь с ними, вводя адрес вашего браузера напрямую или вводя запрос поисковой системы.
Говорят, что поисковые системы индексируют 3,5-4% страниц. Размер интернета согласно WorldWideWebSize на 26 августа 2019 года это 5,31 трлн страниц. Google сообщает в своих материалах, что «индексирующие роботы собирают информацию с сотен миллиардов веб-сайтов» ... то есть у них, вероятно, до сих пор не хватает разряда в этой цифре ... Где же остальные?
DEEPNET
В Интернете есть ресурсы, которые не видны поисковым системам, это означает ничто иное, как тот факт, что роботы поисковых систем не могут справиться с данными, содержащимися на каком-либо веб-сайте, или не могут проникнуть / интерпретировать их. Что скрыто от поисковика?
Что Google не индексирует:
Вы также можете найти ресурсы, к которым у вас нет доступа, например закрытые форумы и сайты доступ к которым осществляется только по приглашению одного из участников.
DARKNET
Есть места, которые действительно не доступны из простого Интернета. Обычные поисковые системы не найдут их. Это сети, доступ к которым возможен только благодаря специальным программам, созданным для этой цели, которые обеспечивают анонимность для пользователей такой сети: они маскируют местоположения и действия пользователей. Наиболее известным из них является .onion, доступ к которому можно получить после установки программы TOR (знаете ли вы, что TOR был изначально разработан исследовательской лабораторией ВМС США?). Но это не единственная действительно скрытая сеть, кроме нее есть также: Invisible Internet Project (i2p) или Freenet.
Даркнет, как это ни печально для большинства ассоциируется с разбоем, торговлей оружием и наркотиками, порнографией и всем злом на Земле. Конечно, анонимные сети используются преступниками, но другие люди могут использовать ее для блага широкой общественности и для защиты своей конфиденциальности или обеспечения своей безопасности. Анонимность важна из-за возможностей, которые она создает для продвижения демократии и поддержки ее основ. Она предоставляет пространство для свободы выражения мнений не схожих с точкой зрения властей того или иного государства, кроме того, анонимность обеспечивает как защиту личности, которая можетявляться представителя меньшинства. Причин может быть много и все они разные, но только некоторые из них взращщиваются и культивируются в массовом сознании.
Darknet - это не только грабеж и торговля оружием! Политические активисты, блогеры, журналисты и реформаторы используют сеть TOR. Human Rights Watch, «Репортеры без границ» или Global Voices также ей пользуются. Любой может использовать анонимные сети, потому что их использование законно, незаконным может быть то, для чего вы их используете и что вы там делаете.
ПОДВЕДЕМ ИТОГИ
Теперь вы знаете, что глубинная сеть и даркнет не являются чем-то таинственным и сокральным. Проблема глубинной сети заключается в том, что по большей части это сетевой ресурс, доступ к которому необходимо настроить в ручную(например: установить TOR).
Я не знаю смельчака, который сегодня занимался бы измерением и оценкой невидимой сети (если вы это знаете, пожалуйста, дайте мне знать). Одно можно сказать наверняка – глубинных веб-ресурсов много и среди них действительно бывают ОЧЕНЬ ценные.
Проблема не в том, что кто-то что-то скрывает от нас. Проблема в том, что мы ленивы, мы идем легким путем или у нас нет навыков. С точки зрения обычного интернет-пользователя это так: многочисленные ресурсы скрыты от нас из-за недостатка знаний, из-за отсутствия надлежащих IT-инструментов, возможности их установки и настройки.
На этом у меня все, спасибо за внимание!
Скрытый, невидимый, глубинный - это слова, которые вызовут интерес у любого читателя. Вместе со словом «интернет» они определяют ресурсы, которые доступны не всем. Но здесь ВАЖНО понимать какой смысл стоит вкладывать в такие определения.
Не помню, кто впервые использовал сравнение с айсбергом, но представленная там «многоуровневая» структура не совсем верна. Так как же на самом деле выглядят ресурсы сети интернет?
КАКОЙ РАЗМЕР ИНТЕРНЕТА И ЧТО ВЫ МОЖЕТЕ УВИДЕТЬ В GOOGLE?
Все, что вы можете найти благодаря поисковым системам, это так называемая надводнаяная сеть. Поисковые системы используют роботов для поиска в Интернете и сохранения найденных страниц архивах. Они находят и сохраняют страницы, файлы, данные, которые могут распознать в рамках заданных им алгоритмов. Из-за алгоритмов и технических ограничений поисковая система не охватывает всю сеть, только ее часть (каждая поисковая система может отличаться в этом отношении).
Что вы найдете в поисковых системах? Все те страницы, к которым вы можете получить доступ без проблем, и доступ к ним совсем не сложен. Надводная сеть включает в себя, например: Wiki, Facebook, Amazon, Youtube, веб-сайт президента какого-либо государства и многие другие сайты. Вы сталкиваетесь с ними, вводя адрес вашего браузера напрямую или вводя запрос поисковой системы.
Говорят, что поисковые системы индексируют 3,5-4% страниц. Размер интернета согласно WorldWideWebSize на 26 августа 2019 года это 5,31 трлн страниц. Google сообщает в своих материалах, что «индексирующие роботы собирают информацию с сотен миллиардов веб-сайтов» ... то есть у них, вероятно, до сих пор не хватает разряда в этой цифре ... Где же остальные?
DEEPNET
В Интернете есть ресурсы, которые не видны поисковым системам, это означает ничто иное, как тот факт, что роботы поисковых систем не могут справиться с данными, содержащимися на каком-либо веб-сайте, или не могут проникнуть / интерпретировать их. Что скрыто от поисковика?
Что Google не индексирует:
- динамически генерируемые
- веб-страницы - страницы, заблокированные для поискового движка
- страницы без ссылок на другие страницы
- ресурсы, требующие аутентификации
- страницы, написанные на языках, отличных от html
- инамически генерируемые сайты (например, расписание pkp; поисковые системы / каталоги библиотек).
- страницы заблокированы для робота Google (в файле robots.txt вы можете добавить команду, запрещающую роботам Google индексировать весь сайт или добавить атрибут noindex в метатег роботов)
- страницы без ссылок на другие страницы (здесь я имею в виду запись о том, как работает поисковая система), Когда никто не ссылается на страницу, поисковая система не найдет ее).
- ресурсы, требующие аутентификации (например, имя пользователя и пароль). Это может быть связано, но не обязательно с оплатой, например, Netflix или Youtube Premium, LinkedIn, банковские страницы и Paypal, данные в облаке, то есть Dropbox, Facebook когда вы публикуете сообщения с опцией «только я» или «друзья», WhatssApp, Gmail, базы данных с ограниченным доступом и т. д.)
- страницы, написанные на языках, отличных от html (Flash, JavaScript, ASP, PHP, Cold Fusion)
Вы также можете найти ресурсы, к которым у вас нет доступа, например закрытые форумы и сайты доступ к которым осществляется только по приглашению одного из участников.
DARKNET
Есть места, которые действительно не доступны из простого Интернета. Обычные поисковые системы не найдут их. Это сети, доступ к которым возможен только благодаря специальным программам, созданным для этой цели, которые обеспечивают анонимность для пользователей такой сети: они маскируют местоположения и действия пользователей. Наиболее известным из них является .onion, доступ к которому можно получить после установки программы TOR (знаете ли вы, что TOR был изначально разработан исследовательской лабораторией ВМС США?). Но это не единственная действительно скрытая сеть, кроме нее есть также: Invisible Internet Project (i2p) или Freenet.
Даркнет, как это ни печально для большинства ассоциируется с разбоем, торговлей оружием и наркотиками, порнографией и всем злом на Земле. Конечно, анонимные сети используются преступниками, но другие люди могут использовать ее для блага широкой общественности и для защиты своей конфиденциальности или обеспечения своей безопасности. Анонимность важна из-за возможностей, которые она создает для продвижения демократии и поддержки ее основ. Она предоставляет пространство для свободы выражения мнений не схожих с точкой зрения властей того или иного государства, кроме того, анонимность обеспечивает как защиту личности, которая можетявляться представителя меньшинства. Причин может быть много и все они разные, но только некоторые из них взращщиваются и культивируются в массовом сознании.
Darknet - это не только грабеж и торговля оружием! Политические активисты, блогеры, журналисты и реформаторы используют сеть TOR. Human Rights Watch, «Репортеры без границ» или Global Voices также ей пользуются. Любой может использовать анонимные сети, потому что их использование законно, незаконным может быть то, для чего вы их используете и что вы там делаете.
ПОДВЕДЕМ ИТОГИ
Теперь вы знаете, что глубинная сеть и даркнет не являются чем-то таинственным и сокральным. Проблема глубинной сети заключается в том, что по большей части это сетевой ресурс, доступ к которому необходимо настроить в ручную(например: установить TOR).
Я не знаю смельчака, который сегодня занимался бы измерением и оценкой невидимой сети (если вы это знаете, пожалуйста, дайте мне знать). Одно можно сказать наверняка – глубинных веб-ресурсов много и среди них действительно бывают ОЧЕНЬ ценные.
Проблема не в том, что кто-то что-то скрывает от нас. Проблема в том, что мы ленивы, мы идем легким путем или у нас нет навыков. С точки зрения обычного интернет-пользователя это так: многочисленные ресурсы скрыты от нас из-за недостатка знаний, из-за отсутствия надлежащих IT-инструментов, возможности их установки и настройки.
На этом у меня все, спасибо за внимание!
