Видео проигрыватель загружается.Воспроизвести видеоВоспроизвестиБез звукаТекущее время 0:00/Продолжительность 2:02Загрузка: 0.00%0:00Тип потока ОНЛАЙНSeek to live, currently behind liveОНЛАЙНОставшееся время -2:02 1xСкорость воспроизведения2x1.75x1.5x1.25x1x, выбрано0.75x0.5xГлавыГлавыОписанияОтключить описания, выбраноСубтитрынастройки субтитров, откроется диалог настройки субтитровСубтитры выкл., выбраноЗвуковая дорожкаPicture-in-PictureПолноэкранный режимThis is a modal window.Начало диалоговго окна. Кнопка Escape закроет или отменит окноТекстColorБелыйЧерныйКрасныйЗеленыйСинийЖелтыйПурпурныйГолубойTransparencyПрозрачностьПолупрозрачныйФонColorЧерныйБелыйКрасныйЗеленыйСинийЖелтыйПурпурныйГолубойTransparencyПрозрачностьПолупрозрачныйПрозрачныйОкноColorЧерныйБелыйКрасныйЗеленыйСинийЖелтыйПурпурныйГолубойTransparencyПрозрачныйПолупрозрачныйПрозрачностьРазмер шрифта50%75%100%125%150%175%200%300%400%Стиль края текстаНичегоПоднятыйПониженныйОдинаковыйТеньШрифтПропорциональный без засечекМоноширинный без засечекПропорциональный с засечкамиМоноширинный с засечкамиСлучайныйПисьменныйМалые прописныеСбросить сбросить все найстройки по умолчаниюГотовоЗакрыть модальное окноКонец диалогового окна.
Когда мы не хотим плавно понижать размерность, а хотим просто получить один вектор для всей последовательности, можно применять глобальный пулинг. Как и локальный, он может делаться через усреднение или через выбор максимума. Отличие глобального пулинга от локального заключается в том, что размер окна всегда равняется длине входной последовательности. Если подают последовательность другой длины, то размер окна подстраиваться под неё. В остальном же — всё то же самое. Количество каналов не меняется, обучаемых параметров нет. Пространственная информация, при этом, теряется полностью. Как правило, глобальный пулинг используют ближе к последним слоям, то есть к выходу из сети. Таким образом получают представление, размер которого вообще не зависит от длины входной последовательности. Далее, к полученному вектору применяют один или несколько полносвязных слоёв, чтобы решать конечную задачу — например, задачу классификации текста. Вроде бы — всё хорошо, пулинг — это очень простая операция, которая позволяет сжать весь текст до одного вектора без обучаемых параметров, нет проблем с затуханием или взрывом градиентов, гибкая — может принимать на вход последовательности разной длины, но есть пара проблем. Во-первых, каждый канал агрегируется независимо, то есть мы не можем агрегировать один канал в зависимости от значения другого канала. Это ограничивает нас. Во-вторых, единственное выразительное средство в пулинге — это амплитуда значения — она отвечает и за значимость, и за полезную информацию, которую нужно использовать в дальнейшем. Другими словами, пулинг (особенно глобальный) — операция достаточно слабая и грубоватая для многих задач.