Разработка BI-инструментов для анализа работоспособности автоматизированных комплексов обработки данных
В условиях современного многообразия систем ДЗЗ, увеличивающейся области применения данных спутникового мониторинга, роста количества потенциальных потребителей этих данных и тематических продуктов на их основе, возникает необходимость расширения возможностей систем сбора, обработки и хранения спутниковой информации. Рост объемов информации, поступающей в различные системы мониторинга, приводит к тому, что все процессы усвоения поступающей информации и ее обработка должны быть максимально автоматизированы. При этом в процессах автоматизированной обработки данных может участвовать значительное число вычислительных комплексов, на которых может выполняться большое число различных процедур обработки. Организация автоматизированного управления и контроля такими процессами является сегодня достаточно актуальной задачей, решением которой занимаются различные коллективы, поддерживающие крупные центры приема (сбора) и обработки спутниковых данных.
Так, например, действующие в ИКИ РАН блоки автоматического контроля работоспособности позволяют автоматически собирать информацию о каждом процессе, участвующем в обработке данных, фиксировать ее в базах данных, тем самым формируют обширную статистику о ходе этапов автоматической обработки. За сутки в базы данных заносится информация о тысячах процессов. Следует отметить, что без специальных механизмов анализа, оператор, осуществляющий поддержку подобных систем, не в состоянии эффективно выявлять и устранять неполадки, чтобы обеспечивать работоспособность системы в реальном времени. Поэтому для выполнения подобного анализа необходимы инструменты, которые позволяют представить информацию в удобном для оценивания критических параметров виде, например, в графической, табличной или пространственной форме. Одними из наиболее быстро развивающихся в этом направлении технологий создания подобных инструментов являются BI-технологии (Business intelligence), основанные на построении хранилищ структурированной информации на основе OLAP-структур (online analytical processing) (Палкин и др., 2013).
В 2016 году в ИКИ РАН на основе BI-технологии был создан специальный инструментарий, ориентированный на анализ работоспособности автоматизированных комплексов обработки данных. Для создания инструмента использованы технологии автоматизированной обработки спутниковых данных, разработанные в ИКИ РАН в последние годы. В настоящее время созданный инструментарий внедрен и используется в различных системах автоматизированной обработки спутниковых данных, разрабатываемых и поддерживаемых ИКИ РАН в том числе в ЦКП "ИКИ Мониторинг".