сверхбольшие архивы спутниковых данных и возможности их распределенного анализа

назад

Организация потоковой обработки данных отечественных КА для оптимизации архивов ЦКП "ИКИ-Мониторинг"

Ерастов А.Д., Матвеев А.М., Бурцев М.А., Кобец Д.А.

// Материалы 23-й Международной конференции «Современные проблемы дистанционного зондирования Земли из космоса». Москва: ИКИ РАН, 2025. С.86.

ISBN 978-5-00015-073-3
В последние годы существенно совершенствуются методы и технологии обработки данных с отечественных космических аппаратов. Так, до потоковой технологии доведён и введён в эксплуатацию расчёт восстановленных ежедневных композитов по данным приборов КМСС, установленных на КА серии "Метеор-М". Современные требования к подобным продуктам включают в себя условие на хранение и представление их в т.н. тайловом или гранульном формате, когда все данные разбиты на фрагменты по регулярной пространственной сетке. Такой подход существенно облегчает операции по поиску, обработке, перемещению и предоставлению данных. Кроме того, именно такой формат оптимален для работы с временными рядами.
Поскольку в числе стандартных и базовых продуктов по данным прибора КМСС не существует подобных тайловых разбиений, в ИКИ РАН была подготовлена и реализована схема регулярного разбиения исходных данных приборов КМСС на заданной сетке. В докладе рассматриваются принципы такого разбиения и его программная реализация.
Ссылка на текст: http://conf.rse.geosmis.ru/files/books/2025/11289.htm
  • ООО «ИКИЗ», Москва
  • Институт космических исследований РАН, Москва
назад