Проблема интеграции разнообразных вычислительных и информационных ресурсов сегодня актуальна как никогда — во многих странах разрабатываются унифицированные средства связующего программного обеспечения. Однако при попытках объединения в единое целое соответствующих программных средств и ресурсов возникают серьезные сложности.
В эпоху цифровой экономики невозможно принимать взвешенные решения без анализа в реальном времени всех доступных данных. Но сегодня пока нет технологий, способных обеспечить более высокую скорость и масштабируемость, чем обработка и хранение в памяти.
Инфраструктуры обработки распределенных данных, изначально созданные для решения трудоемких научных задач, сегодня становятся популярны и в других областях — снижение стоимости вычислительных элементов, средств хранения и повышение пропускной способности сетей сделали распределенную обработку общедоступной. Однако основной проблемой становится выбор программной базы, позволяющей построить инфраструктуру и организовать обработку распределенных Больших Данных с достаточной надежностью и минимальными затратами.
Долгое время понятие «грид» означало либо добровольное объединение вычислительных ресурсов, либо среду выполнения научных расчетов, но сегодня стало ясно, что объединение в единую распределенную инфраструктуру ресурсов памяти серверов, входящих в кластер, позволяет ускорить работу в режиме реального времени со структурами памяти больших объемов.
В любых областях, где существует необходимость хранения, обработки и репликации больших объемов данных, могут быть взяты на вооружение технологии grid.
Российские институты по физике высоких энергий активно участвуют в проекте Большого адронного коллайдера — крупнейшего международного эксперимента в области физики элементарных частиц. Уникальный как по масштабам получаемых данных, так и с точки зрения компьютерных технологий проект предусматривает обработку и анализ экспериментальных данных с использованием Grid. Уже осенью 2003 года первый вариант глобальной инфраструктуры должен заработать на реальных задачах полномасштабного моделирования экспериментов.
Технологии Grid делают очередной, может быть самый важный, шаг в своей истории. Планка претензий поднята вплоть до уровня ведущего направления развития Internet. Высоко оценивая потенциал идей Grid, следует, однако иметь объективное представление о текущем положении дел, нерешенных проблемах и перспективах разработок в этой области.
На сегодняшний день человечество накопило миллионы компьютеров, однако очевидно, что их мощности используются далеко не полностью. Например, большинство из нас не оставляет свой ПК работать в течение 24 часов в сутки, а если объединить все простаивающие в наше отсутствие машины? Буквально из ничего, можно получить беспрецедентные вычислительные мощности.