Если ИИ – это «мозг» новой эпохи коммуникаций, то данные – это «нервная система», которая снабжает этот «мозг» информацией. Каждый день мы генерируем через видеохостинги, соцсети, IoT-устройства, корпоративные системы и разные другие устройства невероятные 329 млн терабайт данных. И с каждым годом их становится на 22 % больше, потому что «генерят» их теперь не только люди, но и машины. Более половины генерируемых данных – видеоконтент.
По прогнозу IDC в 2018 году, общий объем информации на Земле к 2025 году должен достичь 175 зеттабайт. В 2022 году в Statista[34] скорректировали этот прогноз до 181 ZB. Знаете, сколько это? Представьте себе гигантскую башню из жестких дисков по 1 ТБ, уходящую на 4,5 млн км ввысь. Это 6 полетов до Луны и обратно. Или 113 оборотов вокруг земного экватора. В 2024 году объем данных достиг 149 Zb, а к 2028 году вырастет до более чем 394 зеттабайт.
Наибольшую проблему – и одновременно наибольшую ценность – сегодня представляют большие данные (Big Data). Это колоссальные массивы информации, которые не поддаются традиционной обработке из-за своего объема, скорости прироста и разнообразия форматов. Их часто называют 3V (Volume, Velocity, Variety), хотя по факту число этих V давно уже намного больше: есть еще Veracity (данные должны быть достоверными), Variability (потоки данных постоянно меняются), Visualization (наглядность) и др. А Value – это ценность данных, которая заключается в их бесценном ресурсе для принятия решений.
Данные бывают структурированными (данные в таблицах и базах данных) и неструктурированными (тексты, фото и другие, которые стекаются к нам с разных сторон, в разном формате и в абсолютно хаотичном порядке).
Аналитики IDC говорят, что в 2025 году с цифровыми данными будет ежедневно взаимодействовать более 6 млрд человек – целых 75 % населения Земли. И часть из данных будет обрабатываться в режиме реального времени.