Определение тональности текста c помощью мешка слов | Обработка естественного языка

Подписаться 130 тыс.

Просмотров 4,6 тыс.

50% 1

Определение тональности отзывов на банки с помощью классических алгоритмов машинного обучения. Используем логистическую регрессию и мешок слов.
00:00 - Начало
01:45 - Загрузка и предобработка данных
03:13 - Подготовка данных для обучения
06:55 - Создание мешка слов
07:30 - Обучение модели логистической регрессии
09:00 - Оценка качества обучения модели
10:10 - Применение модели
Colab-ноутбук из видео - colab.research.google.com/dri...
Проект реализуется победителем Конкурса на предоставление грантов преподавателям магистратуры благотворительной программы "Стипендиальная программа Владимира Потанина" Благотворительного фонда Владимира Потанина".
вКонтакте - avsozykin
telegram - t.me/a_sozykin
Мой сайт - www.asozykin.ru
Мой канал с краткими и понятными объяснениями сложных тем в ИТ и компьютерных науках - / andreysozykincs

Наука

Опубликовано:

19 май 2024

Ссылка:

Скачать:

Готовим ссылку...

Добавить в:

Мой плейлист

Посмотреть позже

Комментарии : 15

@user-li7hi9em2o Год назад

Андрей, здравствуйте! Спасибо большое Вам за труд и такие полезные подробные уроки! Не в первый раз смотрю ваши видео и каждый раз они на высоте. Здоровья, процветания и всех благ вам!

@AngelA-jx6vf Год назад

Супер 🎉 Андрей, спасибо большое!!!

@AndreySozykin Год назад

Пожалуйста!

@user-qf7sy6lb5c 16 дней назад

Андрей, здравствуйте! Спасибо, что делитесь своим опытом и знаниями. Будет ли урок, как сохранить подобную модель и использовать её повторно?

@Kn_Dmitry 4 месяца назад

Спасибо большое! Это именно то, что мне сейчас нужно!!!

@AndreySozykin 4 месяца назад

Пожалуйста! Рад, что видео полезно!

@user-it5mc8sd5e Год назад

Спасибо вам за ваш плейлист по сетям

@AndreySozykin Год назад

Пожалуйста!

@smetan42 3 месяца назад

1:53 - опечатка в ноутбуке (и в других, где есть функция preprocess()). В функции preprocess() параметры идут в таком порядке: text, stop_words, punctuation_marks, morph. При добавлении столбца "Preprocessed_texts" к переменной banks, в функцию preprocess() передаются аргументы в другом порядке: row['Text'], punctuation_marks, stop_words, morph.

@user-co7wd3cv4x Год назад

Не планируете ли про трасформеры что-то подобное? RNN-то особо не носят в наше время в продакшене, правильно? :)

@user-co7wd3cv4x 8 месяцев назад

А не хотите ещё с помощью трансформера тональность определить? Декодеры-энкодеры -- сейчас в тренде ! 😀

@MEPhIst-economist Месяц назад

Корректно ли строить словарь на всем объеме данных, а затем тестировать модель, построенную по нему, на части данных, которая участвовала в его построении?