<h2 bis_size="{&quot;x&quot;:0,&quot;y&quot;:0,&quot;w&quot;:0,&quot;h&quot;:0,&quot;abs_x&quot;:220,&quot;abs_y&quot;:3998}">Задача</h2>

&nbsp;

В задаче Video Question Answering модели необходимо проанализировать короткие видеофрагменты и представленные к ним вопросы по содержанию и запечатленным&nbsp; событиям и/или действиям, чтобы сгенерировать наиболее подходящие ответы на русском языке. 
&nbsp;

<h2 bis_size="{&quot;x&quot;:0,&quot;y&quot;:0,&quot;w&quot;:0,&quot;h&quot;:0,&quot;abs_x&quot;:220,&quot;abs_y&quot;:3998}">Формат решений</h2>

Решения запускаются в изолированном окружении при помощи Docker. Время и ресурсы во время тестирования ограничены. Ответы, полученные моделью Участника, должны быть сохранены в файл answer.csv, где в колонке &lsquo;answer&rsquo; записан ответ на соответствующий вопрос по каждому видео в порядке их записи в файле public_test_input.csv

&nbsp;

В течение одних суток Участник или Команда Участников может загрузить для оценки не более 5 решений.&nbsp;

Так как решение не имеет доступ к Интернету, все дополнительные данные, например, веса обученной модели, должны быть загружены в контейнер. В качестве примера организаторы предоставляют контейнер для запуска бейзлайн-решения.

&nbsp;

Контейнер с решением запускается в следующих условиях:

<ul bis_size="{&quot;x&quot;:0,&quot;y&quot;:0,&quot;w&quot;:0,&quot;h&quot;:0,&quot;abs_x&quot;:220,&quot;abs_y&quot;:3998}">
<li bis_size="{&quot;x&quot;:0,&quot;y&quot;:0,&quot;w&quot;:0,&quot;h&quot;:0,&quot;abs_x&quot;:220,&quot;abs_y&quot;:3998}">8 ядер CPU</li>
<li bis_size="{&quot;x&quot;:0,&quot;y&quot;:0,&quot;w&quot;:0,&quot;h&quot;:0,&quot;abs_x&quot;:220,&quot;abs_y&quot;:3998}">96 GB&nbsp;RAM</li>
<li bis_size="{&quot;x&quot;:0,&quot;y&quot;:0,&quot;w&quot;:0,&quot;h&quot;:0,&quot;abs_x&quot;:220,&quot;abs_y&quot;:3998}">Видеокарта NVidia Tesla V100</li>
<li bis_size="{&quot;x&quot;:0,&quot;y&quot;:0,&quot;w&quot;:0,&quot;h&quot;:0,&quot;abs_x&quot;:220,&quot;abs_y&quot;:3998}">30 минут на работу решения: 15&nbsp;минут на public часть и 15&nbsp;минут на private</li>
<li bis_size="{&quot;x&quot;:0,&quot;y&quot;:0,&quot;w&quot;:0,&quot;h&quot;:0,&quot;abs_x&quot;:220,&quot;abs_y&quot;:3998}">решение не имеет доступа к ресурсам интернета</li>
<li bis_size="{&quot;x&quot;:0,&quot;y&quot;:0,&quot;w&quot;:0,&quot;h&quot;:0,&quot;abs_x&quot;:220,&quot;abs_y&quot;:3998}">максимальный размер упакованного и распакованного архива с решением: 5гб</li>
<li bis_size="{&quot;x&quot;:0,&quot;y&quot;:0,&quot;w&quot;:0,&quot;h&quot;:0,&quot;abs_x&quot;:220,&quot;abs_y&quot;:3998}">максимальный размер используемого Docker-образа: 10гб</li>
</ul>

<h2 bis_size="{&quot;x&quot;:0,&quot;y&quot;:0,&quot;w&quot;:0,&quot;h&quot;:0,&quot;abs_x&quot;:220,&quot;abs_y&quot;:3998}">Метрика</h2>

Для оценки решений участников будет использована метрика BLEU, которая позволяет сравнить эталонный и предсказанный текст. При этом BLEU оценивает не только соответствие отдельных слов, но и n-грамм, содержащихся в тексте.

Метрика BLEU была изначально предложена для оценки качества машинного перевода, однако она может применяться в любых задачах, в которых необходимо оценить близость двух текстов (при этом, допуская вариативность текстов-кандидатов, что важно в задаче описания видео).

&nbsp;

<h2 bis_size="{&quot;x&quot;:0,&quot;y&quot;:0,&quot;w&quot;:0,&quot;h&quot;:0,&quot;abs_x&quot;:220,&quot;abs_y&quot;:3998}">Baseline</h2>

Вам доступно базовое решение от разработчиков задачи с использованием фреймворка PyTorch.

Пример скрипта для обучения модели приведен по ссылке:

<ol bis_size="{&quot;x&quot;:0,&quot;y&quot;:0,&quot;w&quot;:0,&quot;h&quot;:0,&quot;abs_x&quot;:220,&quot;abs_y&quot;:3998}">
<li aria-level="1" bis_size="{&quot;x&quot;:0,&quot;y&quot;:0,&quot;w&quot;:0,&quot;h&quot;:0,&quot;abs_x&quot;:220,&quot;abs_y&quot;:3998}"><a bis_size="{&quot;x&quot;:0,&quot;y&quot;:0,&quot;w&quot;:0,&quot;h&quot;:0,&quot;abs_x&quot;:220,&quot;abs_y&quot;:3998}" href="https://drive.google.com/file/d/1PN5NmFHZ1VoSH-wQOtPO8Q_ctQmNyOhL/view?usp=share_link">https://drive.google.com/file/d/1PN5NmFHZ1VoSH-wQOtPO8Q_ctQmNyOhL/view?usp=share_link</a></li>
</ol>

Предполагаемый пайплайн работы модели включает в себя следующие этапы: вычисление для входного видео эмбеддингов, которые далее пропускаются через MLP адаптер для GPT декодера и декодер предсказывает ответ. Однако участники вольны предложить собственную архитектуру.

&nbsp;

Сгенерируйте наиболее подходящие ответы

Public

Private

User agreement_en

I have read and agree to the <a href="http://storage.yandexcloud.net/datasouls-ods/CourseFest_1/Docs/UserAgreement.pdf">User Agreement and Privacy Policy</a>

Personal data_en

I give <a href="https://storage.yandexcloud.net/datasouls-ods/CourseFest_1/Docs/Consent.pdf">my consent</a> to &ldquo;Sorevnovaniya Analiza Dannykh&rdquo; LLC to process and share my personal data with event partners for communication purposes

Consent_en

<a href="https://storage.yandexcloud.net/datasouls-ods/CourseFest_1/Docs/Email.pdf">I agree</a> to receive newsletters from Data Analytics Competitions Ltd.

Contest Rules_en

I agree with the <a href="http://storage.yandexcloud.net/ds-ods/files/data/docs/competitions/NTOFINAL2023/RulesNtoFinal2023.pdf">rules of the competition</a>

You have reached the registration page for the Final Artificial Intelligence profile of the National Technology Olympiad 2022/23. When registering, please give your Talent-ID, the same email and the correct name you gave when you registered for the NTO.

email

Email

talentid

Talent-ID

first_name

First name

last_name

Last name

middle_name

Middle name

is_underage

Underage

legal_representative_first_name

Legal representative First name

legal_representative_last_name

Legal representative Last name

legal_representative_middle_name

Legal representative Middle name

legal_representative_email

Legal representative Email

Registration application for final competition «Artificial Intelligence» of the National Technology Olympiad 22/23

Финал профиля “Искусственный интеллект”

Predictions

Когда заканчивается загрузка решений?&nbsp;2 марта в 14:00 часов. До 15:00 2 марта вам нужно выбрать финальные сабмиты, которые вы считаете наилучшими, поэтому планируйте свое расписание.&nbsp;Я могу не выбирать финальные сабмиты?Да, тогда в зачет пойдут два лучших сабмита на public лидерборде.&nbsp;Сколько сабмитов в день можно загружать?Вам доступно 5 сабмитов в сутки.&nbsp;&nbsp;Когда обнуляется количество сабмитов?В полночь по мск.&nbsp;Статус у сабмита “Queued”, что делать дальше?Ждать :)Ваш сабмит находится в очереди на обработку. В среднем это может занимать 15-30 минут в зависимости от количества одновременно отправленных решений. В вечернее время и в последние дни перед закрытием лидерборда, время обработки всегда увеличивается ввиду возросшего количества решений, учитывайте это при планировании работы.&nbsp;У меня ошибка, что делать?Перед тем как задать вопрос организаторам, убедитесь, что ваше решение работает корректно локально, например, с видео из обучающей выборки. Если локально все работает, пишите на <a href="mailto:support@datasouls.com">support@datasouls.com</a>&nbsp;Обязательно ли участвовать в команде?Да&nbsp;