3 сентября 2015

ТПУ создает "хранилище" данных для CERN, используя технологии соцсетей

Томский политех (ТПУ) открыл лабораторию обработки и анализа больших объемов данных, ученые которой займутся созданием системы хранения и обработки информации для Европейской организации по ядерным исследованиям (CERN), рассказал журналистам руководитель группы физического программного обеспечения Брукхейвенской национальной лаборатории (США), сотрудничающий с CERN, Алексей Климентов.

ЦЕРН (CERN) – крупнейшая международная научная организация Европы в области ядерной физики. Расположена в Швейцарии. Именно здесь было совершено большое количество крупных открытий, в частности открыт бозон Хиггса. Эксплуатирует Большой адронный коллайдер.

"Когда в марте меня попросили приехать в ТПУ, <…> нам стало интересно рассмотреть проблему хранения больших данных, как она может быть решена в промышленности. ТПУ, я думаю, вполне может эту проблему решить. Этот пилотный проект начался в конце марта. И так как "пилот" успешный, лабораторию мы открываем, и она должна вскоре начать работать",

– сказал Климентов.

По его словам, такие системы необходимы многим промышленным предприятиям, которым нужно быстро обрабатывать и одновременно хранить большие объемы данных. В РФ решения этой проблемы пока никто не предложил.

Климентов пояснил, что проектом займется лаборатория обработки и анализа больших объемов данных ТПУ, где будут работать около 10 специалистов. Разработку планируется завершить в течение двух лет. Главная задача – найти способ объединить два существующих сейчас принципа работы баз данных.

Он уточнил, что "верхний" слой системы будет использован для информации, необходимой в быстром доступе. Он будет построен по принципу стандартных баз данных: в таблицах будет содержаться информация, позволяющая оперативно найти нужный файл. Для "нижнего" слоя использован принцип соцсетей – хранение данных отдельными файлами, что позволит хранить много информации, не требующей постоянного редактирования.