BME TMIT и NVidia успешно провели 3-й семинар NVidia DLI (Институт глубокого обучения) в Венгрии 1 октября 2019 года. Темой семинара была обработка естественного языка (NLP) с глубоким обучением. На этом семинаре для начинающих и среднего уровня участники знакомятся со встраиванием слов, классификацией текста и нейронным машинным переводом.

Институт глубокого обучения NVIDIA (DLI) обучает разработчиков, специалистов по обработке данных и исследователей тому, как использовать глубокое обучение и ускоренные вычисления для решения реальных проблем в широком спектре областей. Получив доступ к рабочим станциям с ускорением на GPU в облаке, участники узнают, как обучать, оптимизировать и развертывать нейронные сети с помощью новейших инструментов, фреймворков и SDK для глубокого обучения.

Мы начали семинар в 9:00 с ознакомления с НЛП для более чем 60 участников.

Обработка естественного языка (НЛП) - это подраздел лингвистики, информатики, информационной инженерии и искусственного интеллекта, связанный с взаимодействием между компьютерами и человеческими (естественными) языками, в частности, как программировать компьютеры для обработки и анализа больших объемов данных на естественном языке. . (Источник: https://en.wikipedia.org/wiki/Natural_language_processing)

После введения у нас был небольшой перерыв, а затем мы перешли к трем основным темам. Мы потратили по 2 часа на каждую тему: мы начинали каждый двухчасовой блок с представления теории, после чего следовала практическая лабораторная работа, выполненная в облаке NVidia GPU. Три темы были следующими:

  1. Встраивание слов в Word2Vec; обучение вложениям слов с помощью Keras.
  2. Символьная классификация текста на базе данных Federalist Paper dataset с долговременной краткосрочной памятью.
  3. Нейронный машинный перевод с моделями последовательность-последовательность, механизмом внимания и применением NVidia Open Seq2seq.

Семинар можно проводить без каких-либо предварительных знаний о глубоком обучении; однако в некоторых частях были продвинутые детали, что было интересно и полезно для экспертов. По завершении всех тестов в практических лабораторных работах участники получили сертификат NVidia DLI. Мы закончили семинар в 17:00, однако отмененные оценки могут быть выполнены участниками дома, таким образом сертификат может быть получен и после семинара.

Семинар проводил д-р Балинт Гирес-Тот (BME TMIT, сертифицированный инструктор NVidia DLI и посол университета); Севиндж Йолчуева и Гергей Хайгато, аспиранты по глубокому обучению, помогали в качестве ассистентов преподавателя.

Нашей принимающей стороной был EIT Digital, а местом проведения - Будапештский цифровой центр совместного размещения EIT. EIT Digital подтолкнула участников к творчеству с помощью превосходного кофе и закусок, а безалкогольные напитки и пицца на обед были спонсированы NVidia.

Следующий семинар NVidia DLI в Венгрии состоится в декабре 2019 года. Следите за обновлениями на следующем канале Twitter: https://twitter.com/bapalto