К 2025 году объем всех данных во всем мире составит 163 зеттабайт (ЗБ). Это в 10 раз больше, чем общий объем данных по состоянию на 2016 год. Прогноз опубликован в докладе аналитической фирмы IDC «Эра данных 2025» (Data Age 2025).

Объем данных, которые человечество накопит уже меньше чем через 10 лет, трудно себе представить. 1 зеттабайт равен 10²¹ байтов. То есть общий объем информации составит 163*10²¹ байтов.

Для сравнения, весь мировой объем интернет-трафика в 2016 году едва превысил 1 зеттабайт. А еще в 2006 году объем информации, произведенный человечеством за всю свою историю, был равен 0,16 ЗБ.

( Добавлю - Зеттабайт данных это сколько? ссылка - https://nag.ru/articles/article/101832/zettabayt-dannyih-eto-skolko-schi...

 Подсчитано, что 90% всех данных в мире было создано за последние несколько лет. Такая захватывающая перспектива ошеломляет и даже страшно представить, что будет дальше.

Рассмотрим сначала хронологию развития устройств хранения данных (см. рис. ниже). Тридцать пять лет назад, еще в 1983 году, самые большие жесткие диски хранили около 10 МБ данных. Сегодня этого едва хватит, чтобы хранить две или три mp3-песни.

Имея дело с компьютерами и носителями данных, мы все еще смотрим на данные в гигабайтном или терабайтном масштабе. Однако в целом человечество ужа давно продвинулось далеко за эту точку единиц измерения количества данных. 

Единицы информации

• 1 байт: один символ;
• 10 байт: одно слово;
• 100 байт: телеграмма или перфокарта.

Килобайт (1024 Байта)

• 1 килобайт: очень короткая история;
• 2 Килобайта: машинописная страница;
• 10 килобайт: энциклопедическая страница или колода перфокарт;

Мегабайт (1024 Килобайта)

• 1 мегабайт: книга на 873 страницы обычного текста или 3,5-дюймовая дискета;
• 2 мегабайта: фотография высокого разрешения;
• 5 мегабайт: полное собрание сочинений Шекспира или 30 секунд телевизионного видео;
• 10 мегабайт: минута высококачественного звука или цифровой рентген грудной клетки;

Гигабайт (1,024 мегабайт, или 1.048.576 Кб)

• 1 гигабайт: пикап грузовик, заполненный полностью печатными страницами или содержимое около 9 метров книг на полке;
• 2 гигабайта: содержимое 20 метров книг на полках;
• 20 гигабайт: высококачественная аудио коллекция произведений Бетховена или цифровая емкость кассеты VHS;
• 50 гигабайт: этаж книг;
• 100 гигабайт: этаж академических журналов.

Терабайт (1024 Гигабайта)

• 1 терабайт:
  • все рентгеновские снимки в крупной больнице,
  • 1 613 компакт-дисков по 650 МБ,
  • 4 581 298 книг,
  • все 350 серий Симпсонов или все 238 серии сериала друзья.
  • Можно без остановки около 2 лет слушать mp3 песни (250 000 песен) или около 2 недель смотреть DVD фильмы. Для распечатки на бумаге терабайта данных потребуется примерно 50 000 деревьев. Для распечатывания 1 терабайта потребуется 250 миллионов страниц (напечатанных с обеих сторон), если их выложить друг за другом, протяженность тропы будет 16 км.
• 2 терабайта: Академическая научная библиотека;
• 10 терабайт: печатная коллекция библиотеки Конгресса США;
• 45 терабайт: все видео на YouTube по состоянию на август 2006 г.;
• 122 терабайта: размер загруженных веб-страниц через Google за 1 день в 2009 году (7.2 млрд. ежедневных просмотров страниц) х 17 килобайт (размер средней веб-страницы).

Петабайт (1024 терабайта, или 1.048.576 гигабайт)

• 1 Петабайт:
  • можно 13 лет непрерывно просматривать HDTV,
  • Объем данных архива Интернета в 2004 году,
  • Стопка компакт-дисков высотой 3 км,
  • 500 миллиардов страниц стандартного печатного текста.
• 15 Петабайт данных: объем данных результатов с адронного коллайдера за год.
• 20 Петабайт: Объем памяти всех жестких дисков, произведенных в 1995 году.
• 200 Петабайт: все когда-либо напечатанные книги.

Эксабайт (1,024 Петабайт)

1 Эксабайт – это 250 миллионов DVD дисков.

1 Эксабайт данных Интернет-трафика генерировался каждый день в 2012 году.
5 Экзабайт: все слова, когда-либо произнесенные людьми.

Зеттабайт (1,024 Эксабайт)

Как оценить зеттабайт, насколько это много? Можно сказать, что это секстиллион байт или 1 миллион миллионов гигабайт.

С точки зрения современных информационных систем, Зеттабайт (ZB) действительно большой. Ранее это слово не использовалось.

Так насколько велик зеттабайт? Чтобы представить себе его размер, для хранения 1 ZB требуется около 83 миллионов жестких дисков емкостью 12 терабайт. С одного жесткого диска на 1 Зеттабайт можно 63 миллиона лет смотреть видео с высоким разрешением 4K.

Чтобы было еще легче представить 1 ZB, переведем его к вещам, которые мы используем каждый день. Самые популярные новые смартфоны сегодня имеют емкость 32 гигабайта (ГБ). Чтобы получить 1 ZB, вам нужно будет взять память всех 34 359 738 368 (34,4 миллиарда) смартфонов. 

В 2011 г. было сгенерировано 1.8 Зетабайт информации, что достаточно для заполнения памяти 57.5 миллиардам 32 гигабайтным айпадам. 

 

Йоттабайт (1,204 Зеттабайт, или 1,208,925,819,614,629,174,706,176 байт)

Это септиллион байт или 2 в 80 степени байт.

На йотта официально признанная система приставок СИ останавливается, вероятно, потому, что у людей не было необходимости работать с более большими количеством информации. Однако есть и другие единицы измерения, которые выходят далеко за рамки йота и которые признаны некоторыми экспертами в своих областях. Например, brontobyte равен 1, за которым следуют 27 нулей, и некоторые считают, что это будет масштаб данных, обеспечиваемый интернетом вещей (интеллектуальные устройства: от тостеров и холодильников до домашних датчиков, которые постоянно передают и получают данные). Gegobyte составляет 10 в 30 степени, такой объем информации в настоящее время бесполезно выражать в количестве DVD-дисков или чем-то подобном. Есть также IEEE стандарт по применению двоичных приставок, но, несмотря на то, что стандарт окончательно принят, его внедрение происходит довольно медленно. Цифровое сообщество уже привыкло к приставкам СИ, и даже новые операционные системы и приложения все ещё продолжают их использовать.

В настоящее время количество информации растет в геометрической прогрессии, уже сейчас информационный мир планеты является океаном данных, в котором только небольшая часть воды является полезной и используемой. Но стоит задуматься над тем, что же будет, если уровень океана будет постоянно быстро повышаться. Уже в современном количестве информации легко можно захлебнуться. В период анализа выбранной части данных какой-либо области, появляется много новой необработанной информации, и так до бесконечности. - ссылка на названия закончилась)

Рост объема мировых данных по годам. Источник: seagate.com

По данным аналитиков IDC, в ближайшие годы основной объем данных будут производить не пользователи, а компании. На промышленность и другие сферы экономики придется до 60% всех данных мира. В 2015 году предприятия генерировали треть всех мировых данных.

Как утверждают авторы исследования, в будущем гораздо важнее будет качество данных, а не их количество.

«Не все данные одинаково важны, а без контекста они и вовсе бесполезны. В этот период перемен лидерство будет принадлежать организациям, которые сумеют определить наиболее критичные подгруппы информации с максимальным влиянием на нужную сферу деятельности и сосредоточатся именно на них», — говорится в отчете.

Пятая часть всех данных к 2025 году будет считаться критически важной, сообщают исследователи. То есть это те сведения, от которых будет зависеть жизнь и безопасность людей, международная обстановка и мир на планете.

При этом в ближайшие годы разрыв между объемом данных, нуждающихся в защите, и реально защищенной информацией будет только расти. К 2025 году до 90% всей информации должно быть так или иначе защищено. Фактически под защитой будет находиться меньше половины всего объема сведений.

Автора доклада отмечают также, что значительный объем данных будет исходить из устройств, которые окружают нас каждый день.

Во-первых, к 2025 году 75% всего населения Земли будет иметь постоянный доступ в интернет.

Во-вторых, кратно возрастет количество умных гаджетов и домашних роботов, которые будут производить так называемые метаданные – служебную информацию, которой машины будут обмениваться между собой для слаженной работы.

По сравнению с сегодняшним днем каждый человек будет в 20 раз чаще взаимодействовать с интернетом или с устройствами с выходом в интернет. Если сейчас среднее количество взаимодействий – чуть больше 600, то к 2025 году мы будет сталкиваться с сетью 4800 раз в день, утверждают авторы доклада.

Добавляю еще одну ссылку - https://nag.ru/articles/article/101906/popyitki-rascheta-kolichestva-inf...

Вопрос: Какая компания обрабатывает больше всего данных в мире?

Ответ: Неудивительно, что ответ на этот вопрос – компания Google. Возможно, более удивительно, какие именно цифры сегодня стоят за этой корпорацией. Например, знаете ли вы, что Google обрабатывает 5.3 миллиарда запросов в день? Или что Google хранит более 10 эксабайт данных? Конечно Facebook, Microsoft и Amazon составляют Google серьезную конкуренцию: только Facebook имеет 2.5 миллиарда единиц контента, 2.7 миллиарда "лайков" и 300 миллионов фотографий – все это составляет более 500 терабайт данных.

Вопрос: какая компания имеет наибольшее количество серверов?

Ответ: После того, как дан ответ на предыдущий вопрос, логично подумать опять про Google. Но на самом деле ответ – Amazon. В компании размещают 1 000 000 000 гигабайт данных на более чем 1 400 000 серверах. Предполагается, что Google и Microsoft имеют около 1 000 000 серверов каждый, но, ни одна из компаний не оглашает точные цифры. (Жирным добавляю - эти серверные на сегодняшний день являются самым крупным потребителем электроэнергии в мире)

Вопрос: Какой процент данных хранится в цифровом формате?

Ответ: представьте каждую книгу в каждой библиотеке, каждой школе, каждом доме во всем мире – это много книг. Тем не менее, все эти книги вместе взятые составляют максимум 6 процентов от общей суммы всех человеческих данных. В 2007 году было подсчитано, что только 6% всех данных поступают из книг и из других печатных материалов – остальные 94% данных представляются уже в цифровом формате.

Вопрос: Что ждет нас в будущем?

Ответ: заглядывая в будущее, эксперты прогнозируют, что к 2020 году будет существовать 44 зеттабайт данных. Три года назад, по некоторым оценкам, вся всемирная паутина содержала около 500 эксабайт – это 5 миллиардов гигабайт, и только половина одного зеттабайта!

В настоящее время объемы цифровых данных удваиваются каждые два года. Международная исследовательская и консалтинговая компания IDC, занимающаяся изучением мирового рынка информационных технологий и телекоммуникаций, сначала прогнозировала, что с 2009 г до 2020 г. объем мировых данных увеличится в 44 раза, потом, что в 50 раз, теперь уже значится цифра 55 раз. Каждый год IDC с учетом анализа новых данных перестраивает кривую роста вверх, как правило, на несколько зеттабайт, по последнему отчету с 2009 г объем данных за год с 0,8 зеттабайт вырастет до 44 зеттабайт в 2020 г.

Картинка отлично показывает, насколько велик 44-кратный рост. Однако она в действительности не передает, насколько много 44 Зеттабайта на самом деле, и в каком объеме данных мы будем плавать (или тонуть) в 2020 году.

Число байт в 44 зеттабайтах является слишком большим даже для записи его в Microsoft Excel (Число настолько велико, что при вычислениях Excel урежет последние семь цифр точности). Предполагая, что закон Мура позволит нам удвоить емкость смартфонов в три раза до 2020 года, потребуется 188 978,561,024 (188+ триллион) смартфонов для хранения 44 ZB. Это число соответствует 25 смартфонам на человека для всего населения планеты. Представьте себе задачу управления данными, распределенными по множеству смартфонов.

Facebook в настоящее время хранит 300 Петабайт (PB) данных (это число растет на 600 ТБ в день, а по некоторым другим данным даже больше). Довольно внушительная цифра. Однако это намного, намного меньше, чем даже один Зеттабайт, который вмещает в себя 3 тысячи 495 хранилищ данных Facebook.

Сегодня Facebook имеет 1.3 миллиарда активных пользователей в месяц (стоит отметить, что при этом Facebook содержит около 81 миллиона фейковых профилей). Если бы к 2020 г. в Facebook зарегистрировались все жители на Земле – 7.5 миллиарда человек и данные продолжали бы увеличиваться ежегодно в 10 раз, то хранилище данных Facebook все равно содержало бы только 1/60 часть от 1 ZB:

Незаурядные попытки расчета количества информации человечества

В 2003 году Марк Либерман рассчитал требования к хранилищу всей когда-либо произносимой человеческой речи. Его расчеты показали примерно 42 зеттабайта, если бы оцифровка звука осуществлялась с параметрами 16 кГц/16-бит (что, на мой взгляд, для речи жирно). Он сделал это, чтобы проверить следующий факт: "все слова, произнесенные когда-либо людьми, несут около 5 эксабайт данных".

Расчеты были банально простыми:

Допустим в 1800 году на планете жил 1 миллиард человек, в 1900 году –1,6 миллиарда человек, а в 2000 году – 6,1 миллиарда человек. Предположим, что 10 миллиардов человек прожили в среднем 50 лет, говоря в среднем по 2 часа в день на протяжении всей своей жизни. Это

10 * 10^9 * 50 * 365 * 2 * 60 * 60 = 1.314 * 10^18 секунд.

Если оцифровать одноканальный звук со скоростью 32 КБ в секунду, то получим

1.314 * 10^18 * 3.2 * 10^4 = 4.208 * 10^22 байт или 42 зеттабайта

После полученных результатов Либерман предположил, что возможно, авторы приведенной выше фразы имели в виду "все слова, написанные когда-либо людьми".

Для тех, кому все эти биты и байты кажутся немного абстрактными в 2015 году студенты Лестерского университета попытались посчитать размер Интернета в физических терминах.

Сначала они подсчитали, что в индексированной поисковой сети насчитывается примерно 47 миллиардов страниц. Между тем, чтобы узнать, сколько печатных страниц будет у каждой веб-страницы из этих 47 миллиардов, нужно было посетить репрезентативную выборку веб-сайтов и попытаться распечатать каждый. Чтобы получить справедливое среднее значение с 5-процентной погрешностью и 95-процентным доверительным интервалом пришлось бы протестировать 385 случайных сайтов с помощью программы Random Website Machine. Цитата студента-исследователя Лестерского университета: "Это забавная игра, вы можете играть в нее у себя дома, если вам больше абсолютно нечем заняться: нажмите кнопку "случайный сайт"; нажмите CTRL+A и CTRL+P; и запишите полученное число страниц в таблицу".

Студенты подсчитали, что потребуется 2 процента тропических лесов Амазонки, чтобы сделать бумагу, на которой можно будет распечатать все текстовые данные сети интернет. Исследователи оценили, что средняя веб-страница содержит данных на 6,5 печатных страниц. При таком предположении для печати всех текстовых данных интернета потребуется 305,5 миллиарда листов (это 212 миллионов копий произведения "Война и мир" Льва Толстого или 75 миллионов копий всей серии книг о Гарри Поттере).

Конечно, оценивать огромный объем данных, размещенный в сети Интернет в текстовом виде нерационально. Согласно исследованиям Cisco, в 2015 году IP-трафик по передаче видео составил 8000 петабайт в месяц, по сравнению с около 3000 петабайт по загрузке web страниц и электронной почты. В целом, по итогам года видео составляло большую часть интернет трафика – 34 000 петабайт, второе место занял общий доступ к файлам – 14 000 петабайт.

Тезисная подборка других интересных фактов:

• Сегодня в цифровой Вселенной насчитывается 2.7 зеттабайт данных.
• Компания Akamai (поставщик услуг для акселерации веб-сайтов, провайдер платформ доставки контента и приложений) анализирует 75 миллионов событий в день, чтобы улучшить целевую рекламу.
• По всему миру сегодня более 5 миллиардов человек звонят, пишут друг другу в мессенджерах и просматривают веб-страницы на мобильных телефонах.
• На расшифровку генома человека первоначально было потрачено 10 лет. Сегодня эту же работу по обработке информации можно было выполнить за одну неделю.
• В 2008 году Google обрабатывал 20 000 терабайт данных в день.
• Самая большая база данных AT&T может похвастаться названиями, включая самый большой объем данных в одной уникальной базе данных (312 терабайт) и второе по величине количество строк в уникальной базе данных (1,9 триллиона), которая включает в себя обширные записи вызовов AT&T.
• Пользователи YouTube загружают 48 часов нового видео каждую минуту, каждый день загружается видео на 10 терабайт, что эквивалентно 405 Blu-Ray дискам.
• Каждую минуту создается 571 новых сайтов.
• В 2006 году совокупное пространство всех жестких дисков компьютера в мире оценивалось примерно в 160 эксабайт.
• В 1986 году технологический потенциал сетей телерадиовещания во всем мире составлял 0.432 зеттабайта оптимально сжатой информации, в 1993 году эта же цифра составила 0.715 зеттабайта, в 2000 году – 1,2 зеттабайта, в 2007 – 1,9 зеттабайта, что является информационным эквивалентом того, как если бы каждый человек на Земле получал в день 174 газеты.
• По состоянию на 2009 год, вся Всемирная паутина содержала около 0.5 зеттабайт данных.
• Компания Seagate Technology сообщила о продаже только в 2011 году жестких дисков общей емкостью 330 эксабайт.
• К 2025 году, согласно исследованию IDC по заказу Seagate, количество информации вырастет до 163 зеттабайт.
• Стандарт формата размещения таблиц разделов на физическом жестком диске допускает максимальный размер диска и раздела 7,02 зеттабайт или 5,946 зебибайт при использовании секторов размером 512 байт.
• Файловая система ZFS (Zettabyte File System), которая поддерживает большие объёмы данных, обеспечивает максимальный объем хранилища около 256 квадриллионов зеттабайт.
• Человеческий мозг способен хранить 10 терабайт информации.
• За месяц по WhatsApp отправляют 1 641 600 000 000 сообщений.
• По электронной почте за месяц отправляют 8 078 400 000 000 писем

Генерировать информацию это дело несложное, а вот обработать ее и проанализировать уже гораздо сложнее. В 2013 году только 22% информации в цифровой Вселенной потенциально можно было проанализировать, т. е. эта часть содержала хоть какие-то метаданные (чаще всего мы мало что знаем о данных, если только они каким-то образом не охарактеризованы или не помечены); менее 5% из этих данных были фактически проанализированы. Согласно некоторым оценкам к 2020 году этот полезный процент может вырасти до 35% за счет роста объема данных, получаемых от встраиваемых информационных систем. Если задуматься над приведенными цифрами, то в скором времени будет не только проблема большого количества мусора на нашей планете, но также появится проблема большого количества неперерабатываемого информационного мусора.

Напоследок, представляем вашему вниманию интересную картинку: "что происходит при помощи Интернета за 1 минуту?"