Машинное обучение - - практика по LGBM Classifier + конспект от YandexGPT
Машинное обучение - - практика по LGBM Classifier конспект от YandexGPT
00:03 Библиотека GBM
• Видео обсуждает библиотеку GBM, разработанную в 2017 году и поддерживаемую компанией Microsoft.
• Библиотека использует алгоритм бустинга, который объединяет несколько моделей и выдает результат на основе их решения.
• GBM использует две ключевые идеи: градиентную выборку и объединение взаимоисключающих признаков.
07:03 Использование GBM для классификации
• В видео демонстрируется использование GBM для задачи классификации на примере датасета с признаками машин.
• GBM работает с категориальными признаками, но требует их предварительной обработки.
• В видео также обсуждаются параметры, которые можно настроить в GBM, включая количество деревьев, степень отчетности и количество классов.
14:02 Обучение и использование GBM
• GBM быстро обучается и может быть использован для прогнозирования классов.
• В видео показано, как использовать GBM для классификации, используя функцию predict.
• GBM возвращает вероятности классов, и класс определяется по максимальной вероятности.
19:56 Настройка параметров классификатора LightGBM
• Обсуждение параметров классификатора LightGBM, таких как функция Train, класс classifier lgbm, параметры для настройки дерева, глубины дерева, количества листьев, шагов обучения, веса классов, выборка данных, обучающая выборка, целевая переменная, набор для проверки, ранняя остановка, количество итераций, итерации.
• Демонстрация изменения точности модели в зависимости от параметров и типов бустинга.
34:23 Дополнительные возможности LightGBM
• Обсуждение возможностей LightGBM, таких как использование колбеков, изменение количества итераций, изменение глубины дерева, использование перемешивания данных, использование части признаков для обучения каждого дерева, использование регуляризации и ограничение глубины дерева.
• Обсуждение особенностей библиотеки LightGBM, таких как возможность построения деревьев неограниченной глубины и использование несимметричных деревьев для разных признаков.
38:21 Обзор LightGBM
• LightGBM - это библиотека для построения несимметричных деревьев, которая может регулировать уровень порогов и сохранять модель в формате мо или текстовой строки.
• LightGBM также имеет возможность оценивать важность признаков и использовать стандартный метод лог-имп для этого.
43:41 Пример использования LightGBM
• В качестве примера предлагается использовать онлайн-заказы для классификации задач.
• Сначала необходимо загрузить датасет, оценить тип столбцов, посмотреть распределение и почистить данные.
• Затем можно закодировать целевую переменную и разделить данные на обучающую и тестовую выборки.
• После этого можно обучить модель с помощью LightGBM и оценить точность с помощью метрик.
56:02 Обсуждение признаков и целевой переменной
• В видео обсуждается, что если все признаки в колонке одинаковые, то их можно удалить, так как они не несут никакой информации.
• Если же признаки отличаются, то они могут быть информативными и их следует оставить.
59:27 Целевая переменная и фидбек
• В видео объясняется, что целевая переменная - это статус заказа, а не фидбек (отзыв о заказе).
• Фидбек - это окончательный результат заказа, положительный или отрицательный.
• Задача предсказания фидбека может быть более сложной, так как она требует анализа отзывов клиентов.
01:10:36 Сокращение датасета
• В видео говорится о том, что если в датасете пропущено 71% записей, то можно предположить, что 71% клиентов не дали отзыв.
• Это позволяет сократить датасет и сосредоточиться на оставшихся 2/3 клиентов, которые дали отзыв.
1 view
1151
463
1 month ago 00:34:28 1
ЗЕМЛЮ СПАСАЮТ ОТ АСТЕРОИДА / 16 КМ АЛМАЗОВ НА МЕРКУРИИ / ВОДЯНИСТЫЙ МИНЕРАЛ НА ЛУНЕ. Владимир Сурдин
1 month ago 00:11:50 1
Азбука безопасности - Пешеходные правила - Сборник (все серии) | Смешарики 2D. Обучающие мультфильмы
1 month ago 00:00:00 1
Еще одна сборка для учебы (Ryzen 7 7800x3d, RTX4080 Super, King 95 Pro)
1 month ago 00:06:50 1
ГИТАРИСТ и БАЯНИСТ - Я ТАК СОСКУЧИЛСЯ дайте МНЕ БЕЛЫЕ КРЫЛЬЯ
1 month ago 00:14:50 1
Устаревшая Система Образования
1 month ago 00:41:32 1
- ателье, которое выбирают АcademeG, Bulkin, Stilov. По студиям №10
1 month ago 00:08:16 1
УЗНАЙ, КАК И СКОЛЬКО ТЫ МОЖЕШЬ ЗАРАБАТЫВАТЬ В ПРОЕКТЕ “INSTART“
1 month ago 01:15:57 1
Как Сделать Лучший Пет-Проект | Архитектура Бекенда за 1 час
1 month ago 01:52:51 1
Как ФРАНЦИЯ ВЛЮБИЛА мир в АВТОМОБИЛИ. Часть 1.
1 month ago 00:59:54 1
Сергей Савельев. Иллюзии моделирования мозга
1 month ago 00:36:41 1
Анахата. Чакра IV. Часть 1. Недолюбленные люди. Что не дает нам любить себя и других.
1 month ago 00:00:08 1
Ainomo 3 0
1 month ago 00:10:25 1
Подготовка строительного объекта к ЗОС | ПКТБ «Совэлмаш»
1 month ago 01:21:56 1
Как МЕРТВЕЦЫ и ИНЖЕНЕРЫ спасали жизни.
1 month ago 00:09:00 1
Bit-X Club Новый Маркетинг Форвард РИСОВАННЫЙ
1 month ago 00:04:03 11
Как загрузить ОГРОМНЫЙ Датасет в Pandas #python
1 month ago 00:21:29 1
Маркетинг мечты. Как за месяц получить миллион ?
1 month ago 00:15:05 1
ЭТОТ Паттерн Спрашивают на 99% Собесов
1 month ago 00:39:19 1
Франшиза vs Собственный опыт | Зачем опытный бизнесмен купил франшизу «Настоящей пекарни» #франшиза
1 month ago 00:39:10 2
📍ЧТО НА САМОМ ДЕЛЕ ПРОИСХОДИТ С БРИТНИ?|FREE BRITNEY| КТО ВИНОВАТ В ТРАГЕДИИ БРИТНИ СПИРС?|#crime19
1 month ago 00:08:19 1
Промышленный переворот в Англии (рус.) Новая история
1 month ago 00:42:42 1
Аджна. Чакра VI. Часть 2. Как и что видит Третий глаз. Интуиция. Экстрасенсорика.
1 month ago 00:40:24 1
Аджна. Чакра VI. Часть 1. Третий глаз. Ваша интуиция и экстрасенсорные способности. Как разбудить.