TGTGInsightтелеграм анализLIVE / telegram public index
← Такты, стеки, два колеса

TGINSIGHT SIMILAR POSTS

Намери подобно съдържание

Изходен канал @clockstackwheels · Post #1084 · 9.04

В общем, была задача на оптимизацию плана работ: есть набор заказов, и в каждом N тасков. Таски могут зависеть друг от друга или нет, имеют длительность и тип. Ещё есть M работников, каждый из которых может выполнять таски только определённых типов, причём, у каждого своя скорость. Если все таски в заказе выполнены, фирма получает сколько-то денег. У заказа есть дедлайн, за просрочку штраф (за каждый день просрочки), который вычитается из цены заказа. И ещё фирма тратит деньги за каждый день своей работы независимо от того, как загружены её сотрудники (то есть просто платит зарплаты по сути). Ещё важен учёт праздников и выходных. Нужно заработать на определённом наборе заказов и работников как можно больше денег. Полный текст задачи и код программы проверки есть в репозитории. Эта задача является изменённым заказом, который мы с напарником решали в реальной жизни: оптимизация работы печатных станков для типографии. Правда, тогда и мы справились так себе, и заказчик в итоге сначала захотел всё вручную сам делать, а потом и вовсе похоронил проект при смене директора. !!! Не читайте дальше, если хотите сначала попробовать решить самостоятельно, потому что я сейчас опишу эффективные подходы и результаты. ________________________________________ Так вот. Мы с другим экспертом Андреем сразу сели и написали разные варианты, чтобы задать шкалу, по которой будем оценивать решения команд. За пару часов я собрал примитивный жадный алгоритм, который сортировал заказы по прибыльности и укладывал в сетку кое-как, это дало нам нижнюю оценку. Мой алгоритм заработал ~75 млн виртуальных рублей, мы решили для оценки поставить нижней границей 40 млн. То есть всё, что ещё ниже, оценивалось в ноль баллов за качество оптимизации. Затем Андрей закрылся дома на три дня и вышел на свет со сложным жадным алгоритмом, который очень хитро сортировал заказы и очень хитро укладывал их в сетку, попутно выбирая разные способы этой укладки в зависимости от конкретного заказа. Это позволило заработать ~275 млн рублей. Мы сделали верхней границей для оценки 280 млн. К сожалению, в итоге только две команды из десяти прошли нижнюю границу, заработав, соответственно, ~91 и ~105 млн. К верхней границе не приблизился никто. И у четырёх команд алгоритм вообще не смог уложить без нарушений задачи в сетку (то есть, например, произвольно менял длительности, накладывал задачи друг на друга, давал одному работнику две задачи в один момент и так далее). Важной ошибкой команд, на мой взгляд, являлся тот факт, что никто не воспользовался возможностью запустить алгоритм на несколько минут и дать ему поработать. По условиям задания, можно было тянуть до 5 минут на одну оптимизацию, но по факту решения команд отрабатывали за единицы и десятки секунд. На самом конкурсе, пока команды работали, я решил попробовать сделать быстрое (по времени написания) но эффективное решение. Сначала попробовал жадную сортировку + доведение до лучшего варианта методом имитации отжига. В качестве нового состояния я просто менял местами заказы целиком. Этот вариант работал пару минут и дал мне около ~200 млн дохода. К слову, команда-лидер использовала такой же подход, просто не докрутила число итераций и температуру. Ну и потом я взял готовую либу по реализации классической генетики с особями и скрещиванием. Особью был массив с приоритетами заказов (которые конечно же нужно было аккуратно уложить чистым алгоритмом). Тип скрещивания: scattered. Всего 15 поколений по 20 особей, и это за минуту-полторы давало ~230-240 млн. Считаю, что для конкурса это самый лучший выбор: пишется одним человеком за день и даёт почти максимум, при этом легко настраивается на нужную длительность работы, легко параллелится. Ну а потом уже дома я посидел и накодил свой вариант сложного жадного с плавающим окном перебора отсортированных заказов и плавающей же укладкой по работникам. Такая штука за две минуты зарабатывает ~281 млн. Но за три дня в условиях стресса я бы такое не сделал, скорее всего. #dev

Hashtags

Резултати

Намерени 97 подобни публикации

Търсене: #machinelearning

当前筛选 #machinelearning清除筛选
Am Neumarkt 😱

@amneumarkt · Post #117 · 12.12.2020 г., 08:26

#machinelearning https://arxiv.org/abs/2007.04504 Learning Differential Equations that are Easy to Solve Jacob Kelly, Jesse Bettencourt, Matthew James Johnson, David Duvenaud Differential equations parameterized by neural networks become expensive to solve numerically as training progresses. We propose a remedy that encourages learned dynamics to be easier to solve. Specifically, we introduce a differentiable surrogate for the time cost of standard numerical solvers, using higher-order derivatives of solution trajectories. These derivatives are efficient to compute with Taylor-mode automatic differentiation. Optimizing this additional objective trades model performance against the time cost of solving the learned dynamics. We demonstrate our approach by training substantially faster, while nearly as accurate, models in supervised classification, density estimation, and time-series modelling tasks.

When Andrey Fillimonov started the research in the field of complex analytics of the mental and physiological state of drivers, potential customers were сonfused. His team was often looked at as people doing who knows what. Now, this technology based on machine learning is becoming the industry standard. Global CIO spoke to Andrey Fillimonov about the development of AI products and his expectations for this technology in the future. #AI#MachineLearning

AI для Всех

@nn_for_science · Post #1464 · 10.05.2023 г., 17:42

Иногда появляется ощущение, что жизнь вокруг ИИ происходит в режиме быстрой перемотки. Меньше месяца назад Мета выпустила SAM для сегментации любых объектов на изображении, но такое ощущение, что это было всегда. Только за последние 2 дня я уже прочитал около десятка документов, описывающих прототипы использования SAM для изучения недр. Например, на первых двух картинках (из этого поста) - берем шлиф(срез породы) -> пропускаем через SAM -> выделяем все зерна пород -> автоматически получаем распределение размера зерен (гранулометрия). На последней картинке я просто кликнул мышкой и выделил все пыльцевые зерна на изображении полученном с помощью электронного микроскопа. Автоматически выделенные зерна можно классифицировать и использовать палеотнологами для определения геологического возраста породы. #machinelearning#Geo

Earth&Climate Tech

@earth_climate_tech · Post #286 · 10.05.2023 г., 16:00

Иногда появляется ощущение, что жизнь вокруг ИИ происходит в режиме быстрой перемотки. Меньше месяца назад Мета выпустила SAM для сегментации любых объектов на изображении, но такое ощущение, что это было всегда. Только за последние 2 дня я уже прочитал около десятка документов, описывающих прототипы использования SAM для изучения недр. Например, на первых двух картинках (из этого поста) - берем шлиф(срез породы) -> пропускаем через SAM -> выделяем все зерна пород -> автоматически получаем распределение размера зерен (гранулометрия). На последней картинке я просто кликнул мышкой и выделил все пыльцевые зерна на изображении полученном с помощью электронного микроскопа. Автоматически выделенные зерна можно классифицировать и использовать палеотнологами для определения геологического возраста породы. #machinelearning#Geo

Repositorio data science

@repo_science · Post #3315 · 17.06.2023 г., 23:01

#machineLearning#intermediate Building a Machine Learning Model This course will demonstrate how to build and train your own custom machine learning model from scratch. We cover all steps, including how to set up the environment, how to import and prepare your ... ✍️Daniel Mease ⏰57m 👥139 ⭐️4.7 🔗LinK ----- Main channel: @repo_science Coupons: @freecoupons_reposcience -----

Data Science Jobs

@datasciencejobs · Post #2410 · 08.11.2024 г., 11:01

#вакансия#remote#fulltime#ML#machinelearning Позиция: Senior ML Engineer Локация: remote Формат: full-time Проект: NDA Вилка: 6,000-12,000$ net Привет! Очень внимательно и тщательно ищем в наш проект SeniorMachine Learning Engineer. Мы динамично развивающийся стартап, решаем различные ML/DL задачи от внешних заказчиков: генерация текста, аудио и видео, распознавание объектов на видео, так же применяем AI-моделей в клинических прогнозах, проводим идентификацию контента, созданного LLM и т.д.. Мы сфокусированы на применении SOTA-решений для этих проектов, а также поддержке и мониторинге работающих решений. На данный момент наименование проекта находится под NDA, детали будут доступны на дальнейших этапах общения. Чем предстоит заниматься: • Разработка и внедрение моделей машинного обучения для решения задач NLP, LLM и генеративных моделей. • Tuning существующих решений: дообучение NN, улучшение используемых алгоритмов, оптимизация производительности; • Проводить анализ данных и оценку эффективности моделей машинного обучения. • Участвовать в обсуждении новых технологий и разработке новых решений совместно с project-менеджером. Стек проекта: Python, Tensorflow, PyTorch, Hugging Face, Github workflow, Docker, asyncio, multiprocessing, Tensorflow, FastAPI, pandas, CI/CD, Opensearch, Elasticsearch, MongoDB, PostgresQL. Так же, опишу портрет, кого мы ищем: • Высшее образование в области компьютерных технологий / прикладной математики и (или) прикладной информатики. • Опыт работы в сфере ML-инжиниринга от 3 лет, общий коммерческий опыт в области DS от 5 лет. • Опыт работы с моделями машинного обучения в области NLP, LLM, генеративных моделей, временных рядов, рекомендательных систем. • Опыт работы с классическими алгоритмами машинного обучения. • Опыт нахождения в проектах с нуля до продакшна. Что особенно нас интересует: • Опыт участия в хакатонах и соревнованиях (Kaggle, например). • Выпускники Yandex Data School. Самая приятная часть данного предложения: • Фиксированный оклад, выплачиваемый дважды в месяц (двумя равными частями). • Заработная плата по верхней границе рынка (от 6,000 до 12,000$) на старте. • При достижении результатов премии и бонусы. • Возможность работать над интересными проектами с применением современных технологий. • Все необходимое для профессионального развития и роста. • Оформление в партнерскую компанию. • Полностью удаленная работа, гибкий full-time. Контакты: Алина @tetrisgirl Готова ответить на ваши вопросы ☺️

Data Science Jobs

@datasciencejobs · Post #2359 · 10.10.2024 г., 07:00

#вакансия#remote#fulltime#ML#machinelearning Позиция: ML Engineer Локация: remote Формат: full-time Проект: NDA Вилка: 6,000-15,000$ net Друзья, дата-гении, добрый вечер! Мое предложение будет весьма нестандартным, я нахожусь в поиске Machine Learning Engineer. На данный момент наименование проекта находится под NDA, детали будут доступны на дальнейших этапах общения. Проект подразумевает собой платформу, построенную по принципу Kaggle, где размещаются научно-практические проекты с использованием ИИ. Ваша задача - создавать и оптимизировать решения для этих проектов, конкурируя за лидерство в рейтинге. Чем предстоит заниматься: • Разрабатывать и внедрение моделей машинного обучения для решения задач NLP, LLM и генеративных моделей. • Осуществлять оптимизацию и deploy рекомендательных систем, систем анализа временных рядов. • Проводить анализ данных и оценку эффективности моделей машинного обучения. • Участвовать в обсуждении новых технологий и разработке новых решений совместно с project-менеджером. Стек проекта: Python, Tensorflow, PyTorch, Hugging Face, Github workflow, Docker, asyncio, multiprocessing, Tensorflow, FastAPI, pandas, CI/CD, Opensearch, Elasticsearch, MongoDB, PostgresQL. Так же, опишу портрет, кого мы ищем: • Высшее образование в области компьютерных технологий / прикладной математики и (или) прикладной информатики. • Опыт работы в сфере ML-инжиниринга от 3 лет, общий коммерческий опыт от 5 лет. • Опыт работы с моделями машинного обучения в области NLP, LLM, генеративных моделей, временных рядов, рекомендательных систем. • Опыт работы с классическими алгоритмами машинного обучения. • Опыт нахождения в проектах с нуля до продакшна. Что особенно нас интересует: • Опыт участия в хакатонах и соревнованиях (Kaggle, например). • Диплом об окончании Yandex Data School. Самая приятная часть данного предложения: • Фиксированный оклад, выплачиваемый дважды в месяц (двумя равными частями). • Заработная плата по верхней границе рынка (от 6,000 до15,000$) на старте. • Возможность работать над интересными проектами с применением современных технологий. • Все необходимое для профессионального развития и роста. • Оформление в партнерскую компанию (ИП). • Полностью удаленная работа, гибкий full-time. Контакты: Алина @tetrisgirl Готова ответить на ваши вопросы ☺️

123•••89
ПредишнаСтр. 1 от 9Следваща