Базы данных/Лабораторная работа 5 - История изменений

Ivsavin в 08:41, 10 июня 2016

2016-06-10T08:41:23Z

← Предыдущая версия		Версия от 08:41, 10 июня 2016
Строка 14:		Строка 14:

	Удобная IDE для работы с MongoDB:		Удобная IDE для работы с MongoDB:
	* https://robomongo.org/		* https://robomongo.org/

	== Импорт данных ==		== Импорт данных ==

Ivsavin: /* Установка MongoDB */

2016-06-10T08:41:08Z

Установка MongoDB

← Предыдущая версия		Версия от 08:41, 10 июня 2016
Строка 12:		Строка 12:
	* Mac OS: brew install mongodb [http://www.mongodbspain.com/en/2014/11/06/install-mongodb-on-mac-os-x-yosemite/ Подробнее]		* Mac OS: brew install mongodb [http://www.mongodbspain.com/en/2014/11/06/install-mongodb-on-mac-os-x-yosemite/ Подробнее]
	* Windows: Скачать установщик: https://www.mongodb.com/download-center#community		* Windows: Скачать установщик: https://www.mongodb.com/download-center#community

			Удобная IDE для работы с MongoDB:
			* https://robomongo.org/

	== Импорт данных ==		== Импорт данных ==

Ivsavin в 08:39, 10 июня 2016

2016-06-10T08:39:11Z

← Предыдущая версия		Версия от 08:39, 10 июня 2016
Строка 281:		Строка 281:
	* https://docs.mongodb.com/manual/aggregation/		* https://docs.mongodb.com/manual/aggregation/

	== Репликации MongoDB ==		== Репликации MongoDB (необязательное) ==

	=== Принцип работы репликаций в MongoDB ===		=== Принцип работы репликаций в MongoDB ===
Строка 316:		Строка 316:
	Данное задание можно выполнить не одним запросом через агрегацию, а используя функцию на JavaScript, которая выполняется в консоле MongoDB.		Данное задание можно выполнить не одним запросом через агрегацию, а используя функцию на JavaScript, которая выполняется в консоле MongoDB.

	3. Написать скрипт на bash или любом другом скриптовом языке, который запускает сервер MongoDB в режиме реплики, начинает интенсивно изменять данные, определяет мастер-узел, убивает процесс мастер-узла, после этого заканчивает изменения данных и проверяет целостность данных.		3. ('''необязательное''') Написать скрипт на bash или любом другом скриптовом языке, который запускает сервер MongoDB в режиме реплики, начинает интенсивно изменять данные, определяет мастер-узел, убивает процесс мастер-узла, после этого заканчивает изменения данных и проверяет целостность данных.

	=== Защита лабораторной работы ===		=== Защита лабораторной работы ===
	* Показать и выполнить запросы с агрегацией, объяснить структуру запросов		* Показать и выполнить запросы с агрегацией, объяснить структуру запросов
	* Продемонстрировать работу скрипта инициализации сбоя во время работы и объяснить, что происходит с репликами MongoDB		* Продемонстрировать работу скрипта инициализации сбоя во время работы и объяснить, что происходит с репликами MongoDB

Ivsavin: /* Обновление */

2016-06-08T14:26:05Z

Обновление

← Предыдущая версия		Версия от 14:26, 8 июня 2016
Строка 221:		Строка 221:

	Добавить новый документ:		Добавить новый документ:
	db.Movie.insert({_id: "\"How I am getting 10 for db exam\" (2016)", "MovieID" : "\"How I am getting 10 for db exam\" (2016)", "Countries" : [ "Russia" ], "Genres" : [ "Drama", "Comedy" ], "Keywords": [ "study", "working-hard", "success" ], "ReleaseYear" : 2016})		db.Movie.insert({_id: "\"How I am getting 10 for db exam\" (2016)",
			"MovieID" : "\"How I am getting 10 for db exam\" (2016)",
			"Countries" : [ "Russia" ], "Genres" : [ "Drama", "Comedy" ],
			"Keywords": [ "study", "working-hard", "success" ], "ReleaseYear" : 2016})

	db.Movie.insert({_id: "\"How I am getting 10 for project\" (2016)", "MovieID" : "\"How I am getting 10 for db exam\" (2016)", "Countries" : [ "Russia" ], "Genres" : [ "Drama", "Comedy" ], "Keywords": [ "study", "working-hard", "success" ], "ReleaseYear" : 2016})		db.Movie.insert({_id: "\"How I am getting 10 for project\" (2016)", "MovieID" :
			"\"How I am getting 10 for db exam\" (2016)",
			"Countries" : [ "Russia" ], "Genres" : [ "Drama", "Comedy" ],
			"Keywords": [ "study", "working-hard", "success" ], "ReleaseYear" : 2016})

	Обновить атрибут для всех документов по результатам поиска:		Обновить атрибут для всех документов по результатам поиска:

ADKosm: /* Подокументное преобразование данных */

2016-06-08T10:27:42Z

Подокументное преобразование данных

← Предыдущая версия		Версия от 10:27, 8 июня 2016
Строка 184:		Строка 184:
	Конвертировать рейтинг там, где он задан:		Конвертировать рейтинг там, где он задан:

	db.Movie.find(~~{$exists:~~ {"Rating.Rating": 1, "Rating.RatingVotes": 1}}).forEach(function(data) {		db.Movie.find({"Rating.Rating": {$exists: true}, "Rating.RatingVotes": {$exists: true}}).forEach(function(data) {
	db.Movie.update({		db.Movie.update({
	"_id": data._id		"_id": data._id

Ivsavin: /* Задания на защиту */

2016-06-07T16:18:53Z

Задания на защиту

← Предыдущая версия		Версия от 16:18, 7 июня 2016
Строка 289:		Строка 289:

	== Задания на защиту ==		== Задания на защиту ==
	1. Составить запросы ~~с агрегацией~~:		1. Составить запросы:
	* Для каждого года из первой декады XXI века посчитать количество снятых фильмов.		* Для каждого года из первой декады XXI века посчитать количество снятых фильмов.
	* Выбрать топ-10 наиболее популярных ключевых слов для фильмов заданной страны.		* Выбрать топ-10 наиболее популярных ключевых слов для фильмов заданной страны.

Ivsavin: /* Aggregation Framework */

2016-06-07T16:18:08Z

Aggregation Framework

← Предыдущая версия		Версия от 16:18, 7 июня 2016
Строка 241:		Строка 241:

	=== Aggregation Framework ===		=== Aggregation Framework ===

			Для выполнения агрегирующих запросов в MongoDB используется команда aggregate.

			Сама агрегация выглядит как pipeline для данных, проходя через шаги, данные преобразуются (группируются, фильтруются и тд) в зависимости от команды этого шага. Пример:

			https://docs.mongodb.com/manual/_images/aggregation-pipeline.png

			Также можно разгруппировать списки в документах ($unwind).

			Чтобы отделять переменные внутри шагов от строк используется префикс $.

			Найти документы и разгруппировать ($unwind) их по ключевым словам:

			db.Movie.aggregate({$match: {MovieID: /How I am getting 10 for/}},
			{$unwind: "$Keywords"})


			Переформировать список выбираемых атрибутов ($project) аналогично второму параметру в find:

			db.Movie.aggregate({$match: {MovieID: /How I am getting 10 for/}},
			{$project: {"MovieID": 1, "Keywords": 1, "_id": 0} },
			{$unwind: "$Keywords"})

			Сгруппировать по атрибуту и применить агрегирующую функцию:

			db.Movie.aggregate({$match: {MovieID: /How I am getting 10 for/}},
			{$project: {"MovieID": 1, "Keywords": 1, "_id": 0} },
			{$unwind: "$Keywords"},
			{$group: {_id: "$Keywords", "MoviesList": {$push: "$MovieID"} }})


	==== Дополнительно ====		==== Дополнительно ====

Ivsavin: /* Обновление */

2016-06-07T15:36:52Z

Обновление

← Предыдущая версия		Версия от 15:36, 7 июня 2016
Строка 220:		Строка 220:
	==== Обновление ====		==== Обновление ====

			Добавить новый документ:
			db.Movie.insert({_id: "\"How I am getting 10 for db exam\" (2016)", "MovieID" : "\"How I am getting 10 for db exam\" (2016)", "Countries" : [ "Russia" ], "Genres" : [ "Drama", "Comedy" ], "Keywords": [ "study", "working-hard", "success" ], "ReleaseYear" : 2016})

			db.Movie.insert({_id: "\"How I am getting 10 for project\" (2016)", "MovieID" : "\"How I am getting 10 for db exam\" (2016)", "Countries" : [ "Russia" ], "Genres" : [ "Drama", "Comedy" ], "Keywords": [ "study", "working-hard", "success" ], "ReleaseYear" : 2016})

			Обновить атрибут для всех документов по результатам поиска:

			db.Movie.update({MovieID: /How I am getting 10 for/}, {$set: {"Locations" : [ "Moscow, Russia" ]}}, multi=true)

			* Первый аргумент - условия выборки обновляемых объектов
			* Второй аргумент - что именно делать
			* multi=true (по умолчанию false), обновляет все найденные объекты или только первый

			Добавить элемент в список документа:

			db.Movie.update({MovieID: /How I am getting 10 for/}, {$push: {"Keywords": "true-story"}}, multi=true)

	==== Дополнительно ====		==== Дополнительно ====

Ivsavin: /* Подокументное преобразование данных */

2016-06-07T13:56:55Z

Подокументное преобразование данных

← Предыдущая версия		Версия от 13:56, 7 июня 2016
Строка 168:		Строка 168:
	=== Подокументное преобразование данных ===		=== Подокументное преобразование данных ===

	Недостатком предлагаемой базы является то, что все атрибуты фильмов по-прежнему строковые, хотя некоторые, например RunningTime или Rating.RatingVotes. Это часто встречаемая ситуация, поэтому далее рассматривается пример функции, которая помогает выполнять подобные преобразования.		Недостатком предлагаемой базы является то, что все атрибуты фильмов по-прежнему строковые, хотя некоторые, например RunningTime или Rating.RatingVotes содержат только числа. Это часто встречаемая ситуация, поэтому далее рассматривается пример функции, которая помогает выполнять подобные преобразования.

	Конвертировать продолжительность фильма (задана для всех):		Конвертировать продолжительность фильма (задана для всех):

Ivsavin: /* Конвертация строк в числа */

2016-06-07T13:27:34Z

Конвертация строк в числа

← Предыдущая версия		Версия от 13:27, 7 июня 2016
Строка 166:		Строка 166:


	=== ~~Конвертация строк в числа~~ ===		=== Подокументное преобразование данных ===

	Недостатком предлагаемой базы является то, что все атрибуты фильмов по-прежнему строковые, хотя некоторые, например RunningTime или Rating.RatingVotes. Это часто встречаемая ситуация, поэтому далее рассматривается пример функции, которая помогает выполнять подобные преобразования.		Недостатком предлагаемой базы является то, что все атрибуты фильмов по-прежнему строковые, хотя некоторые, например RunningTime или Rating.RatingVotes. Это часто встречаемая ситуация, поэтому далее рассматривается пример функции, которая помогает выполнять подобные преобразования.
Строка 194:		Строка 194:
	});		});
	})		})

			'''Задание:''' Попробуйте добавить фильмам атрибут "длина названия", его нельзя вычислить с помощью обычной команды find, но можно сохранить эту информацию заранее. И также попробуйте преобразовать годы выхода сериалов для тех записей, где они указаны.

	=== Дополнительно ===		=== Дополнительно ===