НИС Машинное обучение и приложения/Практическое задание - История изменений

Sbartunov в 13:20, 7 января 2016

2016-01-07T13:20:43Z

← Предыдущая версия		Версия от 13:20, 7 января 2016
Строка 13:		Строка 13:

	=== Отчет о выполненном задании ===		=== Отчет о выполненном задании ===
	Отчет должен содержать подробное обоснование всех принятых решений при подготовке решения, в частности, содержимого отчета должно быть достаточно для ~~воспроизводства~~ всех результатов.		Отчет должен содержать подробное обоснование всех принятых решений при подготовке решения, в частности, содержимого отчета должно быть достаточно для воспроизведения всех результатов.

	Обязательные пункты, которые должны в явном виде присутствовать в отчете:		Обязательные пункты, которые должны в явном виде присутствовать в отчете:

Sbartunov в 12:52, 7 января 2016

2016-01-07T12:52:27Z

← Предыдущая версия		Версия от 12:52, 7 января 2016
Строка 3:		Строка 3:
	Задание решается в командах до 4 человек. Списки команд с указанием ФИО, групп, почтовых адресов и логинов на Kaggle должны быть '''отправлены преподавателям''' до 23:59 21 декабря 2015 г. Данные списки считаются финальными и не могут быть изменены.		Задание решается в командах до 4 человек. Списки команд с указанием ФИО, групп, почтовых адресов и логинов на Kaggle должны быть '''отправлены преподавателям''' до 23:59 21 декабря 2015 г. Данные списки считаются финальными и не могут быть изменены.

	'''Срок выполнения задания''': до 23:59 12 января 2016 г. После данного срока решения приниматься не будут.		'''Срок выполнения задания''': до <font style="color: red">23:59 16 января 2016 г</font> ('''срок продлен'''). После данного срока решения приниматься не будут.

	'''Срок обнародования тестовой выборки''': ~~до 23:59 3~~ января 2016 г. После обнародования тестовой выборки каждой команде необходимо отправить решение с классификацией объектов тестовой выборки. Также после данного срока разрешается использовать неразмеченные данные из валидационной выборки для классификации тестовой выборки.		'''Срок обнародования тестовой выборки''': 7 января 2016 г. После обнародования тестовой выборки каждой команде необходимо отправить решение с классификацией объектов тестовой выборки. Также после данного срока разрешается использовать неразмеченные данные из валидационной выборки для классификации тестовой выборки.

	==== Форма оценивания ====		==== Форма оценивания ====

Sbartunov в 11:37, 15 декабря 2015

2015-12-15T11:37:21Z

← Предыдущая версия		Версия от 11:37, 15 декабря 2015
Строка 1:		Строка 1:
	В рамках данного практического задания студентам необходимо решить задачу распознавания цифр от 0 до 9 на изображениях. Задание проводится на базе платформы Kaggle, отправка решений осуществляется на [https://inclass.kaggle.com/c/cs-hse-ml-15 странице задания].		В рамках данного практического задания студентам необходимо решить задачу распознавания цифр от 0 до 9 на изображениях. Задание проводится на базе платформы Kaggle, отправка решений осуществляется на [https://inclass.kaggle.com/c/cs-hse-ml-15 странице задания].

	Задание решается в командах до 4 человек. Списки команд с указанием ФИО, групп, почтовых адресов и логинов на Kaggle должны быть '''отправлены преподавателям''' до 23:59 14 декабря 2015 г. Данные списки считаются финальными и не могут быть изменены.		Задание решается в командах до 4 человек. Списки команд с указанием ФИО, групп, почтовых адресов и логинов на Kaggle должны быть '''отправлены преподавателям''' до 23:59 21 декабря 2015 г. Данные списки считаются финальными и не могут быть изменены.

	'''Срок выполнения задания''': до 23:59 12 января 2016 г. После данного срока решения приниматься не будут.		'''Срок выполнения задания''': до 23:59 12 января 2016 г. После данного срока решения приниматься не будут.

Sbartunov в 04:06, 15 декабря 2015

2015-12-15T04:06:32Z

← Предыдущая версия		Версия от 04:06, 15 декабря 2015
Строка 9:		Строка 9:
	==== Форма оценивания ====		==== Форма оценивания ====
	Формой оценивания является получение зачета. Необходимые условия получения зачета:		Формой оценивания является получение зачета. Необходимые условия получения зачета:
	# Предоставить решение задачи классификации, достигающее большего значения точности на '''тестовой''' выборке чем доступное решение (baseline).		# Предоставить решение задачи классификации, достигающее большего значения точности на '''тестовой''' выборке чем доступное решение (baseline). Точность вычисляется как отношение правильно классифицированных объектов к общему числу объектов.
	# Обосновать решение и подготовить отчет о выполненном задании (обязательную структуру отчета см. ниже).		# Обосновать решение и подготовить отчет о выполненном задании (обязательную структуру отчета см. ниже).

Sbartunov: /* Данные и baseline */

2015-12-15T04:04:05Z

Данные и baseline

← Предыдущая версия		Версия от 04:04, 15 декабря 2015
Строка 31:		Строка 31:

	Обучающая и валидационная выборки доступны на [https://inclass.kaggle.com/c/cs-hse-ml-15/data странице задания].		Обучающая и валидационная выборки доступны на [https://inclass.kaggle.com/c/cs-hse-ml-15/data странице задания].
	~~Там же доступно и baseline~~-решение.		Baseline-решение доступно [https://gist.github.com/sbos/0b693abe8259c5ba442d здесь].

Sbartunov: Новая страница: «В рамках данного практического задания студентам необходимо решить задачу распознаван…»

2015-12-14T18:05:38Z

Новая страница: «В рамках данного практического задания студентам необходимо решить задачу распознаван…»

Новая страница

В рамках данного практического задания студентам необходимо решить задачу распознавания цифр от 0 до 9 на изображениях. Задание проводится на базе платформы Kaggle, отправка решений осуществляется на [https://inclass.kaggle.com/c/cs-hse-ml-15 странице задания].

Задание решается в командах до 4 человек. Списки команд с указанием ФИО, групп, почтовых адресов и логинов на Kaggle должны быть '''отправлены преподавателям''' до 23:59 14 декабря 2015 г. Данные списки считаются финальными и не могут быть изменены.

'''Срок выполнения задания''': до 23:59 12 января 2016 г. После данного срока решения приниматься не будут.

'''Срок обнародования тестовой выборки''': до 23:59 3 января 2016 г. После обнародования тестовой выборки каждой команде необходимо отправить решение с классификацией объектов тестовой выборки. Также после данного срока разрешается использовать неразмеченные данные из валидационной выборки для классификации тестовой выборки.

==== Форма оценивания ====
Формой оценивания является получение зачета. Необходимые условия получения зачета:
# Предоставить решение задачи классификации, достигающее большего значения точности на '''тестовой''' выборке чем доступное решение (baseline).
# Обосновать решение и подготовить отчет о выполненном задании (обязательную структуру отчета см. ниже).

=== Отчет о выполненном задании ===
Отчет должен содержать подробное обоснование всех принятых решений при подготовке решения, в частности, содержимого отчета должно быть достаточно для воспроизводства всех результатов.

Обязательные пункты, которые должны в явном виде присутствовать в отчете:
# '''Предобработка данных'''. Выполнялась ли в каком-либо виде предобработка входных данных (как обучающих, так и входящих в валидационную и тестовую выборки)? Были ли разработаны вами новые признаки?
# '''Конечное решение'''. Полное описание конечной процедуры обучения и классификации, достаточное для воспроизведения результатов, а также обоснование всех принятых решений при выборе алгоритмов обучения, конкретных значений гиперпараметров и т.д.
# '''Борьба с переобучением'''. Какие меры были предприняты вами для того, чтобы избежать переобучения?
# '''Использование неразмеченных данных''' (данный пункт отчета является необязательным, если неразмеченные данные не использовались). Как вы использовали доступ к неразмеченной валидационной выборке после открытия полной тестовой выборки?

=== Состав решения ===
Помимо отправленного решения на сайте Kaggle необходимо также предоставить программную реализацию итогового решения. Реализация должна состоять из единого файла с исходным кодом на языке python (либо единого файла ipython notebook), в результаты выполнения которого в директории с обучающей, валидационной и тестовой выборками создается файл “answer.csv” с ответами для тестовой выборки. В случае, если форматом является ipython notebook, ответы для тестовой выборки должны быть получены путем последовательного выполнения ячеек. Разрешается использовать любые общедоступные библиотеки.

Программная реализация решения и отчет должны быть отправлены на почту преподавателя до истечения срока выполнения задания.

Для обучения разрешается использовать только обучающую выборку, а также валидационную после получения доступа к тестовой выборке. Запрещается использовать какие-либо другие данные.

=== Данные и baseline ===

Обучающая и валидационная выборки доступны на [https://inclass.kaggle.com/c/cs-hse-ml-15/data странице задания].
Там же доступно и baseline-решение.