А с кем, собственно, мерджиться?
Мердж- это игра в покер в темную. Не хочется раскрывать все свои идеи, потому что страшно, что их украдут, но нужно получить максимум информации о решении потенциальных тиммейтов.
Интуиция подсказывает, что надо идти от топ1 лб к концу и мерджиться с теми, кто как можно выше. Это едиственная действительная измеримая открытая метрика, на которую можно смотреть без опаски. Но смотреть надо с опаской: вы мне сами уже можете подсказать, как оверфитнуться на лб и добавить себе халявные 50 мест ценой 20 сабмитов и не изменить при этом свой CV. Давайте еще вспомним Гутхарта и его 'Когда мера становится целью, она перестает быть хорошей мерой'
Так вот, перед мерджем в typic kaggle comp с незнакомыми людьми рекомендую спрашивать:
0. Скор CV. Топ 1 на лб остается им после привата только в 49.5% случаев. Если считать с 2023 года, то вообще 48.6%
1. Описание схемы валидации. Надо сравнивать яблоки с яблоками
2. Если вдруг есть общий язык- можно обсудить глобальную идею решения. Если времени мало, то ваше решение просто не успеют украсть. В то же время совсем непохожее на ваше решение с близким скором может дать огромный прирост качества на CV.
2. Какой скор на валидации по каждому из фолдов? Можно оценить дисперсию и посмотреть, вяжется ли ваше соотношение CV-Public с соотношением потенциальных тиммейтов
3. Если описание валидации, это не секретная техника, ведущая к победе в соревновании сама по себе, то можно пошерить свой маппинг фолдов и попросить посчитать по нему
4. Спросить, есть ли в команде специалисты в области, достижения которых тоже можно как-то верифицировать? Да и просто спросить про достижения норм. Обычно люди не слишком обманывают. Если тиммейты жесткие, то с ними по крайней мере будет интересно общаться.
5. Железки конечно. Железки часто можно компенсировать обещанием депнуть на vast
6. Веяние времени: доступ к дорогим подпискам тоже сегодня решает. В RSNA например надо было размечать кодексом данные и разметка была в несколько ресетов
7. Для серьезных дядек: планы на отпуск. Неиронично глупо будет мерджиться с людьми, которые заранее отказываются от финального рывка
Что я забыл? Ах да, никому блин не рассказывайте детали этого обсуждения. Законы каггла резиновые и товарищ стафф легко пришьет вам прайвет шеринг.
Кстати, все те же правила работают для поиска кофаундеров в вашу неолабу