DataSciencePRO

http://github.com/a-milenkin/testovoe

Вот ещё один финт вынесенный с хака) https://medium.com/optuna/lightgbm-tuner-new-optuna-integration-for-hyperparameter-optimization-8b7095e99258

LightAutoML: https://github.com/sberbank-ai-lab/LightAutoML Обучение - https://ods.ai/tracks/automl-course-part1 https://github.com/sberbank-ai-lab/LightAutoML/blob/master/examples/Tutorial_1.%20AutoML%20pipeline%20preset%20(with%20model%20descr).ipynb LightAutoML для датафеста, а также видео, в котором обсуждается тема бенчмарков AutoML решений. 1. Репозиторий с туториалами из видео (https://github.com/sberbank-ai-lab/lightautoml-datafest-workshop) 2. Туториал BlackBox (Рыжков Александр) (https://www.youtube.com/watch?v=hr8GbPOHaEE), ноутбук (https://github.com/sberbank-ai-lab/lightautoml-datafest-workshop/blob/master/LightAutoML%20demo%20(Blackbox).ipynb)3. Туториал WhiteBox (Вахрушев Антон) (https://www.youtube.com/watch?v=ajQwShL_Hak), ноутбук (https://github.com/sberbank-ai-lab/lightautoml-datafest-workshop/blob/master/LightAutoML%20demo%20(Whitebox).ipynb)4. Туториал NLP (Симаков Дмитрий) (https://www.youtube.com/watch?v=4klVmKGdhvg), ноутбук (https://github.com/sberbank-ai-lab/lightautoml-datafest-workshop/blob/master/LightAutoML%20demo%20(NLP).ipynb)5. Видео про бенчмарки AutoML (Дамдинов Ринчин) (https://www.youtube.com/watch?v=HO_N4BEmZm0) Ноутбуки: https://www.kaggle.com/alexryzhkov/lightautoml-baseline-tps-june-2021 https://www.kaggle.com/alexryzhkov/lightautoml-classifier-regressor-mix https://www.kaggle.com/alexryzhkov/lightautoml-pseudolabel-nlp-baseline узнал что pytorch под windows медленнее чем под linux - что конда медленнее и старее чем докер poetry и прочее)

#хакатон#опыт#DS Итак! в воскресенье завершился хакатон от Райффайзен банка по DS - Интересная задача, живой датасет, 2400 участников, 230+ команд на старте, шикарная обстановка и погружение в тему, топчики организаторы которые жили 3 дня вместе с участниками в чате, отдельный респект и уважуха им за это! теперь по порядку 1) это мой второй хакатон в принципе и первый по ДС так как учусь я на этом направлении, и интересно все увидеть и узнать! 2) шел на хак просто что бы посмотреть данные и хоть как то попробовать его проанализировать что я и сделал ))) потому что тягаться с ДС командами сбера или Х5 нереально на данном треке моего развития 3) получил кучу эмоций и новых знаний, хотя бы слова новые узнал куда можно двигаться и развиваться и на чем сконцентрироваться в обучении (привет LightAutoML, Siamese TabNet 4) узнал пару интересных финтов по future engineering такие как OpenCellID 5) важно - EDA анализ никто не отменял) потратив немного времени на поиск интересностей можно потом сэкономить кучу времени на подборе параметров для машинок 6) команда решает , но в топ10 был и соло участник) 7) EDA конечно Важен , но, по просмотру питчей стало понятно , что , либо никто про EDA не сказал, либо большинство просто запихивало данные в машинку и тюнило остальное от балды) на шару - а вдруг повезет! 8) времени было мало! думаю если бы дали недели 2 , можно было бы нагенерить достаточно фичей для более качественной реализации моделей Хууух! всем спасибо кто дочитал! еще раз - было мега классно , это вам не kaggle) можно даже сказать "Raiffhack - он вам не kaggle"

А вот и poetry

Лучшие практики Python для нового проекта в 2021 году Полезная статья для тех, кто хочет разобраться и научиться работать с экосистемой Python. Автор постарался взять лучшие практики для работы с pyenv, Poetry, pytest, Flake8, Black и MyPy. Вот, что из этого получилось: https://tprg.ru/Z4Wt

Завтра постараюсь написать пост про участие в хакатоне от Райффайзен банка) узнал много новых слов которые ещё предстоит выучить и разобраться. Скину пару полезных ссылок

тоже самое , но на русском #books

PostgreSQL

🛠 5 лучших инструментов управления проектами, о которых вы могли не знать В старые времена для собрания по планированию спринта требовалась только доска, маркер и стикеры. В наши дни появились цифровые инструменты, которые делают планирование более эффективным, а спринт – более успешным. https://proglib.io/sh/lvB3EpG7hz