?Объявляем победителей

?1 место. Команда «Да не умер он в конце драйва»
?2 место. Команда «Narek Maloyan»
?3 место. Команда «Misis again»

Как мы оценивали результат

В ходе закрытого тестирования мы понизили порог IOU до 0.2 для оценки метрики mAP20 по всем изображениям. Однако мы решили оставить эту метрику второстепенной. Основным критерием стала визуальная проверка наличия дефекта (True Positive) – отсутствие стеклянного изолятора тарельчатого типа.

В результате мы подсчитали количество правильных обнаружений истинного дефекта на каждом изображении.

?Результаты метрик представлены в таблице ниже. 

Ссылка на датасет с разметкой и код для подсчета метрик

Спасибо всем за участие!

Не забудьте: сегодня в 14:00 мы ждем презентации от победителей.

?Announcing the winners

?1st place. Team «Да не умер он в конце драйва»
?2nd place. «Narek Maloyan»
?3rd place. Team «Misis again»

How did we evaluate the result

During the closed testing, we lowered the IOU threshold to 0.2 for evaluating the mAP20 metric across all images. However, we decided to consider this metric as secondary.

The primary criterion became the visual assessment of defect presence (True Positive) – disc-type glass insulators absence detection.

As a result, we counted the number of accurate detections of the true defect in each image.

?Metric results are presented in the table below.

Link to the dataset with annotations and code for metric calculation.

Thank you all for participating! Don't forget: we're expecting presentations from the winners today at 2PM!

?Информация для команд, прошедших в закрытое тестирование

?Помимо предоставления кода вашей модели и весов, просим предоставить ссылку на обучающую выборку с разметкой. Это поможет нам лучше понять ваш подход и оценить ваше решение.

?В связи с тем, что формат кадра для закрытого теста был сообщен позже, будет дополнительное время для доработки кода предсказания.

Финальные версии нужно отправить до 15:00 (мск) 25 декабря

?Information for teams that have passed closed testing

?In addition to providing your model code and weights, please provide a link to the training sample with markup. This will help us better understand your approach and evaluate your decision.

?Due to the fact that the frame format for the closed test was announced later, there will be additional time to finalize the prediction code.

The final versions must be sent by 15:00 (Moscow time) on December 25

?Напоминаем: сегодня в полночь по московскому времени мы узнаем лидеров соревнования и пригласим их на закрытое тестирование экспертами соревнования.

Программа 24 декабря

?23:59 — закрытие соревнования.

Организаторы объявят команды, которым нужно предоставить код для запуска их моделей вместе с полученными весами в результате обучения

Программа 25 декабря

?09:00 — дедлайн предоставления моделей участников для закрытого тестирования

?18:00 — объявление победителей. Каждый победитель должен подготовить презентацию, где необходимо рассказать о процессе подготовки данных, использованных методах и алгоритмах, продемонстрировать визуализацию результатов своего решения

Программа 26 декабря

?14:00 — награждение победителей и презентация их работ

Структура предоставления решения

Создайте git-репозиторий на github и разместите в jupyter notebook на kaggle ссылку на него.Также расшарьте для организаторов (hosts).

?Список страниц организаторов

?Git-аккаунт хоста

? We want to remind you that tonight at midnight Moscow time, we will announce the competition leaders and invite them for closed testing by the competition experts.

Programm of 24 December

?23:59 — the competition closes

Organizers will announce the teams that need to submit the code to run their models along with the weights obtained from training

Programm of 25 December

?09:00 — deadline for participants to submit their models for closed testing

?18:00 — announcement of the winners. Each winner must prepare a presentation detailing the data preparation process, methods, algorithms used, and showcase the visualization of their solution's results

Programm of 26 December

?14:00 — awarding the winners and presentation of their works

Submission Structure

Create a GitHub repository and place a link to a Jupyter Notebook on Kaggle within it. Also, share access with the organizers (hosts).

?List of organizer profiles

?Host's GitHub account

Дорогие участники! Поступают вопросы по тому, что метрика нулевая на лидерборде. Дублируем информацию по примеру разметки одного из тестовых снимков)