Опыт разработки масштабируемого решения по хранению журналов в HadoopCUSTIS
Выступление Дмитрия Морозова, нашего ведущего специалиста по проектированию IT-инфраструктурных решений, на техническом семинаре «Hadoop на практике. Новые инструменты и проекты» (12 ноября 2014 года, Москва).
Опыт разработки масштабируемого решения по хранению журналов в HadoopCUSTIS
Выступление Дмитрия Морозова, нашего ведущего специалиста по проектированию IT-инфраструктурных решений, на техническом семинаре «Hadoop на практике. Новые инструменты и проекты» (12 ноября 2014 года, Москва).
Курсовой проект по дисциплине "Проектирование баз данных" (УрФУ, 2014). Автор Мищенко К.В. Руководитель доцент, к.т.н. Лавров В.В. http://vlavrov.professorjournal.ru
Анализ и оценка систем адресации данных в современных ЭВМSergey Gerasimov
Часть операционной системы, которая «отвечает» за корректное хранение данных и предоставление доступа к ним пользователю и прикладным программам
Порядок, определяющий способ организации, хранения и именования данных на носителях информации ИТ-оборудования
Система адресации данных является одной из самых существенных составных частей файловой системы. Именно система адресации позволяет находить нужный файл среди множества как пустых, так и занятых блоков на диске.
Где и как хранить данные в процессе их анализа: SQL и не только… Alexey Neznanov
Попытка за один раз рассказать о базах данных - от определений до выбора инструментов. Но уже после рассказа об информации, данных, их предобработки и очистки...
Для коллекции, хотя есть определения и хорошие ссылки.
Курсовой проект по дисциплине "Проектирование баз данных" (УрФУ, 2014). Автор Мищенко К.В. Руководитель доцент, к.т.н. Лавров В.В. http://vlavrov.professorjournal.ru
Анализ и оценка систем адресации данных в современных ЭВМSergey Gerasimov
Часть операционной системы, которая «отвечает» за корректное хранение данных и предоставление доступа к ним пользователю и прикладным программам
Порядок, определяющий способ организации, хранения и именования данных на носителях информации ИТ-оборудования
Система адресации данных является одной из самых существенных составных частей файловой системы. Именно система адресации позволяет находить нужный файл среди множества как пустых, так и занятых блоков на диске.
Где и как хранить данные в процессе их анализа: SQL и не только… Alexey Neznanov
Попытка за один раз рассказать о базах данных - от определений до выбора инструментов. Но уже после рассказа об информации, данных, их предобработки и очистки...
Для коллекции, хотя есть определения и хорошие ссылки.
2. БАЗА ДАННЫХ
База данных помогает систематизировать и
хранить информацию из определенной
предметной области, облегчает доступ к данным,
поиск и предоставление необходимых сведений.
Простейшей базой данных можно считать
телефонный справочник или список книг в вашей
домашней библиотеке. Современные базы данных
оперируют информацией, представленной в
самом разном формате, - от обычных чисел и
текста до графических и видеоданных.
3. СИСТЕМА УПРАВЛЕНИЯ БАЗАМИ ДАННЫХ
Cистема управления базами данных (СУБД) -
комплекс языковых, программных и технических
средств, предназначенных для организации
взаимодействия пользователя и БД. Эти системы
не привязываются к решению конкретных
проблем. В них автоматизированы стандартные
процедуры, необходимые для работы с базами
данных, а т.к. время не стоит на месте, то в каждой
новой версии или новом варианте СУБД
реализовано все большее количество подобных
процедур.
4. КЛАССИФИКАЦИЯ ПО МОДЕЛИ ДАННЫХ
Иерархическая- базы данных могут быть представлены
как дерево, состоящее из объектов различных уровней.
Верхний уровень занимает один объект, второй — объекты
второго уровня и т. д.
Сетевая- базы данных подобны иерархическим, за
исключением того, что в них имеются указатели в обоих
направлениях, которые соединяют родственную
информацию.
Реляционная-база данных, основанная на реляционной
модели данных. Слово «реляционный» происходит от англ.
relation . Для работы с реляционными БД применяют
реляционные СУБД.
Объектная и объектно-ориентированная -это модель
работы с объектными данными.
5. РЕЛЯЦИОННАЯ БАЗА ДАННЫХ
Использование реляционных баз данных было
предложено доктором Коддом из компании IBM в 1970
году.
Целью нормализации реляционной базы данных
является устранение недостатков структуры базы
данных, приводящих к вредной избыточности в
данных, которая в свою очередь потенциально приводит
к различным аномалиям и нарушениям целостности
данных.
Теоретики реляционных баз данных в процессе
развития теории выявили и описали типичные примеры
избыточности и способы их устранения.
6. ОСНОВНЫЕ ФУНКЦИИ СУБД
управление данными во внешней памяти (на
дисках);
управление данными в оперативной памяти с
использованием дискового кэша;
журнализация изменений, резервное
копирование и восстановление базы данных
после сбоев;
поддержка языков БД (язык определения
данных, язык манипулирования данными).
7. КОМПОНЕНТЫ СУБД
Обычно современная СУБД содержит следующие
компоненты:
ядро, которое отвечает за управление данными во
внешней и оперативной памяти, и журнализацию,
процессор языка базы данных, обеспечивающий
оптимизацию запросов на извлечение и изменение
данных и создание, как правило, машинно-независимого
исполняемого внутреннего кода,
подсистему поддержки времени исполнения, которая
интерпретирует программы манипуляции данными,
создающие пользовательский интерфейс с СУБД
а также сервисные программы (внешние утилиты),
обеспечивающие ряд дополнительных возможностей по
обслуживанию информационной системы.