Разработка системы управления хранилищем динамических данных



Скачать 41.92 Kb.
Дата25.07.2014
Размер41.92 Kb.
ТипДокументы
Н.С. ДУДАКОВ

Научный руководитель – Н.Е. ПИРОГОВ, инженер-математик



Московский инженерно-физический институт (государственный университет)
Разработка системы управления хранилищем динамических данных
В работе решается задача разработки системы управления хранением данных. Предложено разделение хранимых данных по темпам обновления на статическую и динамическую части. В качестве базового механизма хранения динамической информации предложено использовать одну из локальных баз данных. Рассмотрены и протестированы существующие локальные системы хранения данных. Разработан прототип модуля менеджера хранилища данных и клиентский модуль доступа к динамической информации.
Одним из наиболее важных вопросов взаимодействия в информационной среде является управление доступом, хранением и использованием информации. В настоящий момент существует большое количество систем управления информацией, удовлетворяющих различным запросам.

Современная система управления хранением данных характеризуется следующими ключевыми параметрами:



  • скорость доступа к данным на чтение и запись

  • отказоустойчивость

  • удобство доступа к данным

Актуальным и эффективным является разделение данных по темпам запросов, на более медленную «статическую» и быструю «динамическую» части.

Статические данные характеризуются низкой частотой обновления и доступа, к ним можно отнести различные классификационные данные, справочную информацию, и т д. Как правило, информация запрашивается разово при инициализации задач, использующих её. В то же время, статическая информация имеет достаточно большой объем, и целесообразно хранить её на серверах баз данных. Динамические данные, в свою очередь, характеризуются высоким темпом обновления, а также необходимостью отслеживания изменений в режиме реального времени. При этом динамическая часть имеет сравнительно меньший объем данных. Предполагается изначальное разделение данных на статическую и динамическую части и дальнейшая независимая работа частей.

В работе решается задача разработки системы управления хранением динамических данных. В качестве базового механизма предлагается использовать одну из локальных баз данных или одну из «in memory» баз данных, хранящихся только в оперативной памяти. Готовое программное решение будет являться «фундаментом» для хранилища динамических данных. Необходимо дополнительно реализовать механизмы резервирования, разграничения доступа, журналирования и документирования изменений, тиражирования данных по рабочим местам.

Так, были сформированы следующие требования к программному решению:

  • поддержка нескольких платформ, операционных систем

  • возможность доступа к хранилищу несколькими процессами, потоками одновременно

  • удобная и гибкая модель доступа к данным и интерфейс управления хранилищем

Выбор локальной базы данных обусловлен, в первую очередь, большой загруженностью канала передачи информации в системе клиент-сервер. Так, при большом количестве клиентов обработка запросов на чтение информации из базы данных может занять недопустимое время, тогда как при локальной конфигурации сервер обрабатывает только изменения информации.

Рассматривались следующие базы данных: BerkeleyDB [1], FastDB [2], и SQLite [3]. Каждый вариант обладает своими достоинствами и недостатками, и в работе проводилось исследование и тестирование данных решений для оценки перспективности конкретного подхода.

В процессе тестирования оценивались следующие параметры:


  • гибкость и мощность программного инструментария доступа и управления хранилищем

  • отказоустойчивость

  • структурируемость и внутренняя связность хранилища данных

  • зависимость скорости и ресурсоемкости приложений от объемов читаемых и изменяемых данных

Для тестирования программных решений были созданы приложения, осуществляющие чтение и запись данных, а также управление хранилищем данных. Для каждого варианта была разработана структура хранения информации в зависимости от особенностей реализации конкретного механизма. При тестировании проводилось журналирование времени выполнения каждой операции чтения и записи, отслеживалась динамика изменения объема хранилища и служебных файлов в зависимости от времени работы приложений, объемов изменяемой информации, темпов обновления приложений и количества приложений, осуществляющих одновременный доступ к базе данных.

В процессе тестирования получено, что BerkeleyDB уступает конкурентам в скорости, но является более надежной системой при параллельной записи данных несколькими процессами. В тоже время, запросы Sqlite и FastDb более удобны для передачи изменений на сервер базы данных.



Доступ к хранилищу динамических данных предлагается осуществлять на основе разработанного единого клиентского интерфейса. Его основными функциям являются:

  • универсальный механизм доступа к данным и управления хранилищем

  • обеспечение структуры базы данных

  • реализация механизма транзакций

  • поддержка средств мониторинга содержимого хранилища и динамики работы хранилища

Также в работе решалась задача разработки менеджера хранилища динамических данных для работы в локальной сети. Основное предназначение менеджера – обеспечение единого информационного пространства в комплексе средств управления хранением данных. Менеджер данных осуществляет связь и взаимодействие локальных хранилищ с сервером базы данных. Основные задачи менеджера:

  • поддержка архитектуры «клиент-сервер»

  • синхронизация данных

  • поддержка целостности данных

  • взаимодействие с клиентскими модулями и приложениями

В работе ставилась задача разработки системы управления хранением динамических данных. Были произведены исследования существующих локальных базы данных. Разработана методика тестирования, выработаны требования к конечному программному решению. Разработан единый клиентский интерфейс доступа к хранилищу данных и прототип менеджера хранилища.
Список литературы


  1. Документация по базе данных BerkelyDb «www.oracle.com»

  2. Документация по базе данных FastDb «www.fastdb.org»

  3. Документация по базе данных SQLite «www.sqlite.org»

Похожие:

Разработка системы управления хранилищем динамических данных iconПроводимых по заданию Федерального агентства по образованию в 2009 г
Развитие качественной теории управляемых и неуправляемых сложных динамических систем, разработка аналитических и численных методов...
Разработка системы управления хранилищем динамических данных iconБазы данных и системы управления базами данных
База данных — это совокупность специальным образом организованных данных, храненящихся в памяти вычислительной системы и отражающих...
Разработка системы управления хранилищем динамических данных iconБаза Данных (БД) — структурированный организованный набор данных, описывающих характеристики какой-либо физической или виртуальной системы. «Базой данных» часто упрощённо или ошибочно называют Системы Управления Базами Данных (субд)
«Базой данных» часто упрощённо или ошибочно называют Системы Управления Базами Данных (субд). Нужно различать набор данных
Разработка системы управления хранилищем динамических данных iconСуществует три модели организации данных в базе
Базы данных, системы управления базами данных. Информационно-поисковые системы для туристских организаций
Разработка системы управления хранилищем динамических данных iconЯвляется информационной моделью предметной области
Обращение к базам данных осуществляется с помощью системы управления базами данных (субд). Субд обеспечивает поддержку создания баз...
Разработка системы управления хранилищем динамических данных iconРабочая программа по дисциплине " Методы анализа динамических систем " для специальности 230102 «Автоматизированные системы обработки информации и управления»
Изучение методов анализа различных типов динамических систем, описываемых линейными и нелинейными, детерминированными и стохастическими,...
Разработка системы управления хранилищем динамических данных iconМетоды спецификации динамических структур данных
Зинкина Н. С. Методы спецификации динамических структур данных. // Проблемы информатики в образовании, управлении, экономике и технике:...
Разработка системы управления хранилищем динамических данных iconВ широком смысле
Табличные базы данных (БД): основные понятия (поле, запись, первичный ключ записи); типы данных. Системы управления базами данных...
Разработка системы управления хранилищем динамических данных iconФгбоу впо «юргуэс» г. Ставрополь метод оценки технического уровня информационно-вычислительной системы образовательного учреждения
Комплекс технических средств на базе локальной сети пэвм и комплекс программных средств, состоящий из сетевой операционной системы,...
Разработка системы управления хранилищем динамических данных iconСистемы управления базами данных
Программное обеспечение для создания систем управления базами данных
Разместите кнопку на своём сайте:
ru.convdocs.org


База данных защищена авторским правом ©ru.convdocs.org 2016
обратиться к администрации
ru.convdocs.org