Интеграция программных систем поддержки астрофизических наблюдений

1. Интеграция программных систем поддержкиастрофизических наблюдений О.П. Желенкова, В.Н. Черненков, В.С. Шергин, Т.А. Пляскина, В.В. Витковский Специальная астрофизическая обсерватория РАН, Нижний Архыз

2. Астрономическая информация Виртуальная обсерватория Инструменты Архивы данных Сервисы работы с данными --------------- Анализ, раскопки данных, целевой поиск патрульные миссии Результаты Цифровые библиотеки RCDL-2012, Переславль-Залесский

3. Этапы выполнение астрофизической задачи RCDL-2012, Переславль-Залесский

4. HST Scheduling Process

5. ESO Data Flow System RCDL-2012, Переславль-Залесский

6. DFS поддерживает сервисы: • подготовка заявок на наблюдения; • проверка и рецензирование заявок с планированием наблюдений; • условия наблюдений для принятых заявок и передача ихпараметров в систему для последующего выполнения; • динамическое планирование наблюдений с учетом требований пользователя и погодных условий; • сбор данных и on-line архивирование; • обработка данных с обеспечением проверки качества и создание готовых к научному анализу данных; • долгосрочное хранение данных с обеспечением быстрого доступа; • предоставление данных заявителям программ, а также исследователям, работающим с архивными данными. RCDL-2012, Переславль-Залесский

7. ESO Data Flow System • Система базируется на : • Блок наблюдений – соединение цели наблюдений и инструментальные требования • Конвейер для каждого инструмента, чтобы обеспечить калибровку в реальном времени • Активное планирование наблюдений и мониторинг погоды • Оперативный архив и научный архив • Контроль качества (данных, калибровок, состояния инструментов) D F S RCDL-2012, Переславль-Залесский

8. Virtual Observatory Functions • Уровни архивной системы: • Level 1 : bits in/bits out • Level 2 : • Storage + processing • Data Association • Level 3 : • Archive projects • Meta-data construction • Data mining tools

9. Proposal Preparation and Submission Observation Preparation Observation Scheduling Data Archive Image Pipeline Data Post-Processing Monitor and Control System Correlator CBE Antenna Feed Receiver IF System Fiber Optics Transmission System Local Oscillator NRAO Data Management Group (e2e project) EVLA Project Canadian Partner Primary data flow Principal EVLA Subsystems Control and monitor flow

10. Наблюдательный цикл • постановка астрофизической задачи (выбор объектов, выбор метода наблюдений) • планирование наблюдательного времени (подача заявки, рецензирование, планирование наблюдательного времени) • подготовка наблюдательного эксперимента • наблюдение (управление телескопом, управление приемниками, регистрация и сбор наблюдательных данных, протокол наблюдений) • архивизация наблюдательных данных (помещение в область постоянного хранения, контроль корректности параметров, доступ к данным) • получение научных данных (первичная обработка, фотометрическая и координатная калибровка) • доступ к данным (веб-доступ, ВО-доступ) • интерпретация полученных результатов (анализ, сравнение с другими данными, сравнение с теоретическими моделями) • публикация RCDL-2012, Переславль-Залесский

11. Планирование наблюдательного времени – система on-line заявки на наблюдательное время и составление расписания наблюдений RCDL-2012, Переславль-Залесский

12. Наблюдение – Веб-приложение для интерактивного заполнения журнала наблюдений БТА и архивизации протоколов ночи RCDL-2012, Переславль-Залесский

13. Архивизация наблюдательных данных – архивная система обсерватории файлы -289375 файлы с объектами – 215437 Небесные объекты, разрешаемык через CDS – 3909 Количество целей - 11023 Число записей в БД - 536958 RCDL-2012, Переславль-Залесский

14. Архивная система включает область хранения (SF) и информационно-поисковую систему (SIS) CD/DVD disks description CD/DVD (I) CD/DVD disks logs SIS storage area CD/DVD (II) Primary copies of CD/DVD disks Soft & Docs SIS SF USB disk RCDL-2012, Переславль-Залесский

15. Схема таблиц и web-интерфейс ИПС архивной системы обсерватории RCDL-2012, Переславль-Залесский

16. Астрономические стандарты (привязка положения, потока) Инструментальные стандарты Обработка данных Коррекция инструментальных эффектов Коррекция атмосферных эффектов Выделение научных данных из фона и шума RCDL-2012, Переславль-Залесский

17. Обработка наблюдений • Необработанное изображение • «плоское» поле • Оценка фона неба • Коррекция FF и вычитание фона • Сложение нескольких кадров • Астрометрия и фотометрия RCDL-2012, Переславль-Залесский

18. Получение научных данных – координатная калибровка Автоматическая координатная привязка прямых изображений с использованием веб-сервисов IVOA Освоение и/илиразработкаосновныхмодулейавтоматической координатной коррекции прямыхснимков; Комплексирование в автоматическийпроцесс; Получение science-ready изображений и каталогов в WCS; Публикация в AstroGridналокальномSkyNode • Используемые технологии и программные средства: • HTTP+XML-RPC(C, bash, Python)‏ • Linux, Apache, ‏Tomcat+Java+PostgreSQL • Gestalt (J.Brewer), DSA,ADQL (AstroGrid) • wcstools(D.Mink),SExtractor,SWarp(E.Bertin) RCDL-2012, Переславль-Залесский

19. RCDL-2012, Переславль-Залесский

20. RCDL-2012, Переславль-Залесский

21. RCDL-2012, Переславль-Залесский

22. Спасибо за внимание! Работа поддержана грантами РФФИ 07-10-00412 , 07-11-00108 и 12-07-00503 RCDL-2012, Переславль-Залесский