FeaturedBanner-4eefdf1d

Группа в ВК

**Принимая участие в соревновании, вы соглашаетесь с [Правилами участия](https://disk.yandex.ru/i/lacDKE6nmE_OXg).**

## Описание задачи

В 2026 году Омск носит статус **Культурной столицы России**. В городе проходят сотни спортивных, культурных и общественных событий, каждое из них по-разному отражается в СМИ. Одни публикации остаются почти незамеченными, другие получают широкий резонанс. При планировании
информационного сопровождения мероприятий важно заранее понимать и оценивать, **насколько заметной** окажется та или иная публикация.

Сервисы медиамониторинга (например, «Медиалогия») оценивают каждую публикацию числом — **заметностью**. Чем выше значение, тем сильнее публикация «звучит» в медиаполе. Но заметность сильно зависит от **издания**. Материал в крупном СМИ почти всегда заметнее заметки
в районной газете, и это не заслуга текста. Поэтому в задаче предлагается предсказывать **нормированную заметность**: насколько публикация заметнее **обычной для своего же издания**. Так название СМИ перестаёт быть «ярлыком», и выигрывает тот, кто лучше извлекает сигнал из **содержания**.

Участникам предлагается построить модель, которая по основной информации о публикации (заголовок, лид статьи и издание) предсказывает её нормированную заметность. Это задача обработки естественного
языка (NLP) и регрессии. Решение должно работать на ресурсах центрального процессора без использования мощностей видеокарт.

## Метрика

Качество оценивается [**модулем коэффициента ранговой корреляции Спирмена**](https://docs.scipy.org/doc/scipy/reference/generated/scipy.stats.spearmanr.html) между предсказанной и истинной нормированной заметностью:

$$
\mathrm{score} = \left|\operatorname{corr}\big(\operatorname{rank}(y_{\text{true}}),\ \operatorname{rank}(y_{\text{pred}})\big)\right|
$$

- значение лежит в диапазоне от 0 до 1, **выше — лучше**;
- метрика смотрит на **порядок** публикаций по заметности, а не на абсолютные значения, поэтому
  устойчива к скосу распределения и выбросам;
- константные предсказания допустимы, но не содержат ранжирующего сигнала и получают значение 0.0.

Метрика считается **автоматически** при отправке решения. При этом тест
делится на **публичную** (виден предварительный результат в лидерборде) и **приватную** (определяет итоговые места) части.

## Данные

Набор данных собран на основе мониторинга публикаций об омских событиях. Каждая строка соответствует одной публикации в СМИ.

Файлы:

| Файл | Назначение |
|------|------------|
| `train.csv` | обучающая выборка с известной заметностью |
| `test.csv` | тестовая выборка без заметности, на ней делаются предсказания |
| `sample_submission.csv` | пример файла с предсказаниями |

Колонки:

- `id` — уникальный идентификатор публикации;
- `title` — заголовок публикации;
- `text` — лид статьи (первые 500 символов);
- `date` — дата публикации;
- `outlet` — издание (СМИ), где вышла публикация;
- `target` — **нормированная заметность** (только в `train.csv`; это и есть целевая переменная).

`target` — это z-оценка заметности **внутри каждого издания**: насколько публикация заметнее типичной для своего СМИ. У любого издания среднее `target` равно нулю, поэтому угадать значение просто по названию издания нельзя, нужен текст.

Особенности данных, о которых стоит знать:

- выборки разделены **по времени**: тест — это публикации, вышедшие позже обучающих;
- тело статьи **намеренно обрезано до лида**: так заметность нельзя угадать просто по длине статьи, решает именно содержание;
- название издания (`outlet`) выдаётся как признак, но **само по себе не помогает**: целевой признак нормирован внутри издания.

## Baseline (базовое решение)

Этот baseline **специально сделан простым** и служит примером организации конвейера обработки данных. Решение протестировано с применением интерпретатора Python 3.12.4.

baseline

## Формат решения

На проверку отправляется CSV-файл с двумя колонками: `id` и `predict`. Каждая строка представлена в виде пары «идентификатор публикации из `test.csv`» и «предсказанная нормированная заметность». Файл должен покрывать **все** `id` из `test.csv`.

Абсолютные значения не важны сами по себе, поскольку метрика смотрит на порядок. Важно **правильно ранжировать** публикации.

sample_submission

## Правила использования данных и ресурсов

- **Решение на CPU,** значит тяжёлые внешние сервисы и платные API использовать не нужно.
- **Разрешается** использовать открытые ресурсы со свободной некоммерческой лицензией: предварительно обученные эмбеддинги/модели, корпуса для обучения векторов, лексиконы тональности и т.п.
- **Запрещено** пытаться «подсмотреть» истинную заметность тестовых публикаций во внешних сервисах медиамониторинга или вручную размечать тест. Оценивается именно предсказание по тексту.

Приватный обмен идеями (private sharing), решениями и кодом между участниками **запрещён**. В случае обнаружения этого факта, все причастные решения аннулируются.

Задача хакатона — научить модель предсказывать, какие новости Омска окажутся наиболее популярными. Её подготовили преподаватели кафедры «Прикладная математика и фундаментальная информатика» ОмГТУ!

Public

Данные

Agreement

Я согласен(-на) с <a href="https://storage.yandexcloud.net/ds-ods/files/data/docs/odsaifooter/Service_agreement.pdf">Соглашением об услугах</a>. Обработка персональных данных Участников Активностей производится на основании Соглашения об услугах.

You have reached the registration page for the &quot;City Pulse&quot; Hackathon organized by the AI Academy.&nbsp;When registering, please use the same email address that you used to register on&nbsp;<a href="https://ai-academy.ru/" rel="noreferrer" target="_blank">ai-academy.ru</a>.

first_name_ru

First Name

#	Teams (24)	Absolute Spearman	Last	Entries
1	Kami	0.3123152215	12min	9
2	dupe	0.3059488754	4min	2
3	shurupius	0.2961670569	5min	6
4	67 ULTRA TEAM TOP 67	0.2884376567	7min	8
5	hastag grrrMondays	0.2842332542	5min	9
6	Сэр Пи	0.2778080108	39min	1
7	o87f3cf9c1aca	0.2735005924	19min	3
8	Лукинер	0.2721966317	8min	2
9	максуш	0.2689426337	15min	3
10	АДЕЖДА СИБИРИ	0.2363190504	7min	6
11	skyline	0.2358757085	5min	6
12	ГрадСпуск в подвал	0.227824062	39min	1
13	умные человеки без очков	0.2218961054	21min	2
14	test1	0.2166900993	12min	1
15	DDTEAM	0.2102088921	9min	1
16	ABB	0.2036983975	28min	1
17	Pomidorka	0.1941858205	9min	1
18	t5b549f2cb0bd	0.1529120665	13d	1
19	Крендельки	0.1387286077	49min	1
20	timasoft	0.1279249403	3min	2
21	a4ae4064b0ce7	0.0467674457	20min	1
22	avangard55 ai	0.0376480782	5min	2
23	OfficeExperts	0.0376480782	9min	1
24	Andrey Sviridov	0.0042803812	5w	2