Машинное обучение - - практика по LGBM Classifier + конспект от YandexGPT
Машинное обучение - - практика по LGBM Classifier конспект от YandexGPT
00:03 Библиотека GBM
• Видео обсуждает библиотеку GBM, разработанную в 2017 году и поддерживаемую компанией Microsoft.
• Библиотека использует алгоритм бустинга, который объединяет несколько моделей и выдает результат на основе их решения.
• GBM использует две ключевые идеи: градиентную выборку и объединение взаимоисключающих признаков.
07:03 Использование GBM для классификации
• В видео демонстрируется использование GBM для задачи классификации на примере датасета с признаками машин.
• GBM работает с категориальными признаками, но требует их предварительной обработки.
• В видео также обсуждаются параметры, которые можно настроить в GBM, включая количество деревьев, степень отчетности и количество классов.
14:02 Обучение и использование GBM
• GBM быстро обучается и может быть использован для прогнозирования классов.
• В видео показано, как использовать GBM для классификации, используя функцию predict.
• GBM возвращает вероятности классов, и класс определяется по максимальной вероятности.
19:56 Настройка параметров классификатора LightGBM
• Обсуждение параметров классификатора LightGBM, таких как функция Train, класс classifier lgbm, параметры для настройки дерева, глубины дерева, количества листьев, шагов обучения, веса классов, выборка данных, обучающая выборка, целевая переменная, набор для проверки, ранняя остановка, количество итераций, итерации.
• Демонстрация изменения точности модели в зависимости от параметров и типов бустинга.
34:23 Дополнительные возможности LightGBM
• Обсуждение возможностей LightGBM, таких как использование колбеков, изменение количества итераций, изменение глубины дерева, использование перемешивания данных, использование части признаков для обучения каждого дерева, использование регуляризации и ограничение глубины дерева.
• Обсуждение особенностей библиотеки LightGBM, таких как возможность построения деревьев неограниченной глубины и использование несимметричных деревьев для разных признаков.
38:21 Обзор LightGBM
• LightGBM - это библиотека для построения несимметричных деревьев, которая может регулировать уровень порогов и сохранять модель в формате мо или текстовой строки.
• LightGBM также имеет возможность оценивать важность признаков и использовать стандартный метод лог-имп для этого.
43:41 Пример использования LightGBM
• В качестве примера предлагается использовать онлайн-заказы для классификации задач.
• Сначала необходимо загрузить датасет, оценить тип столбцов, посмотреть распределение и почистить данные.
• Затем можно закодировать целевую переменную и разделить данные на обучающую и тестовую выборки.
• После этого можно обучить модель с помощью LightGBM и оценить точность с помощью метрик.
56:02 Обсуждение признаков и целевой переменной
• В видео обсуждается, что если все признаки в колонке одинаковые, то их можно удалить, так как они не несут никакой информации.
• Если же признаки отличаются, то они могут быть информативными и их следует оставить.
59:27 Целевая переменная и фидбек
• В видео объясняется, что целевая переменная - это статус заказа, а не фидбек (отзыв о заказе).
• Фидбек - это окончательный результат заказа, положительный или отрицательный.
• Задача предсказания фидбека может быть более сложной, так как она требует анализа отзывов клиентов.
01:10:36 Сокращение датасета
• В видео говорится о том, что если в датасете пропущено 71% записей, то можно предположить, что 71% клиентов не дали отзыв.
• Это позволяет сократить датасет и сосредоточиться на оставшихся 2/3 клиентов, которые дали отзыв.
1 view
1151
463
2 months ago 00:34:28 1
ЗЕМЛЮ СПАСАЮТ ОТ АСТЕРОИДА / 16 КМ АЛМАЗОВ НА МЕРКУРИИ / ВОДЯНИСТЫЙ МИНЕРАЛ НА ЛУНЕ. Владимир Сурдин
2 months ago 00:11:50 1
Азбука безопасности - Пешеходные правила - Сборник (все серии) | Смешарики 2D. Обучающие мультфильмы
2 months ago 00:00:00 1
Еще одна сборка для учебы (Ryzen 7 7800x3d, RTX4080 Super, King 95 Pro)
2 months ago 00:06:50 1
ГИТАРИСТ и БАЯНИСТ - Я ТАК СОСКУЧИЛСЯ дайте МНЕ БЕЛЫЕ КРЫЛЬЯ
2 months ago 00:14:50 1
Устаревшая Система Образования
2 months ago 00:41:32 1
- ателье, которое выбирают АcademeG, Bulkin, Stilov. По студиям №10
2 months ago 00:08:16 1
УЗНАЙ, КАК И СКОЛЬКО ТЫ МОЖЕШЬ ЗАРАБАТЫВАТЬ В ПРОЕКТЕ “INSTART“
2 months ago 01:15:57 1
Как Сделать Лучший Пет-Проект | Архитектура Бекенда за 1 час
2 months ago 01:52:51 1
Как ФРАНЦИЯ ВЛЮБИЛА мир в АВТОМОБИЛИ. Часть 1.
2 months ago 00:59:54 1
Сергей Савельев. Иллюзии моделирования мозга
2 months ago 00:36:41 1
Анахата. Чакра IV. Часть 1. Недолюбленные люди. Что не дает нам любить себя и других.
2 months ago 00:00:08 1
Ainomo 3 0
2 months ago 00:10:25 1
Подготовка строительного объекта к ЗОС | ПКТБ «Совэлмаш»
2 months ago 01:21:56 1
Как МЕРТВЕЦЫ и ИНЖЕНЕРЫ спасали жизни.
2 months ago 00:09:00 1
Bit-X Club Новый Маркетинг Форвард РИСОВАННЫЙ
2 months ago 00:04:03 11
Как загрузить ОГРОМНЫЙ Датасет в Pandas #python
2 months ago 00:21:29 1
Маркетинг мечты. Как за месяц получить миллион ?
2 months ago 00:15:05 1
ЭТОТ Паттерн Спрашивают на 99% Собесов
2 months ago 00:39:19 1
Франшиза vs Собственный опыт | Зачем опытный бизнесмен купил франшизу «Настоящей пекарни» #франшиза
2 months ago 00:39:10 2
📍ЧТО НА САМОМ ДЕЛЕ ПРОИСХОДИТ С БРИТНИ?|FREE BRITNEY| КТО ВИНОВАТ В ТРАГЕДИИ БРИТНИ СПИРС?|#crime19
2 months ago 00:08:19 1
Промышленный переворот в Англии (рус.) Новая история
2 months ago 00:42:42 1
Аджна. Чакра VI. Часть 2. Как и что видит Третий глаз. Интуиция. Экстрасенсорика.
2 months ago 00:40:24 1
Аджна. Чакра VI. Часть 1. Третий глаз. Ваша интуиция и экстрасенсорные способности. Как разбудить.