Видео проигрыватель загружается.Воспроизвести видеоВоспроизвестиБез звукаТекущее время 0:00/Продолжительность 1:48Загрузка: 0.00%0:00Тип потока ОНЛАЙНSeek to live, currently behind liveОНЛАЙНОставшееся время -1:48 1xСкорость воспроизведения2x1.75x1.5x1.25x1x, выбрано0.75x0.5xГлавыГлавыОписанияОтключить описания, выбраноСубтитрынастройки субтитров, откроется диалог настройки субтитровСубтитры выкл., выбраноЗвуковая дорожкаPicture-in-PictureПолноэкранный режимThis is a modal window.Начало диалоговго окна. Кнопка Escape закроет или отменит окноТекстColorБелыйЧерныйКрасныйЗеленыйСинийЖелтыйПурпурныйГолубойTransparencyПрозрачностьПолупрозрачныйФонColorЧерныйБелыйКрасныйЗеленыйСинийЖелтыйПурпурныйГолубойTransparencyПрозрачностьПолупрозрачныйПрозрачныйОкноColorЧерныйБелыйКрасныйЗеленыйСинийЖелтыйПурпурныйГолубойTransparencyПрозрачныйПолупрозрачныйПрозрачностьРазмер шрифта50%75%100%125%150%175%200%300%400%Стиль края текстаНичегоПоднятыйПониженныйОдинаковыйТеньШрифтПропорциональный без засечекМоноширинный без засечекПропорциональный с засечкамиМоноширинный с засечкамиСлучайныйПисьменныйМалые прописныеСбросить сбросить все найстройки по умолчаниюГотовоЗакрыть модальное окноКонец диалогового окна.
Теперь попробуем оценить качество нашей нейросети на всех рецептах, которые у нас остались в тестовом датасете. Для этого мы построим матрицу ошибок, а также посмотрим на пару других интересных метрик. Во-первых, посмотрим на качество предсказания тэгов. Например, тэг, соответствующий названию продукта (точнее началу, потому что название продукта может состоять из нескольких слов), предсказывается в 89% корректно. Тэг, соответствующий продолжению названия продукта, предсказывается почти в 79% корректно. Для того, чтобы понять, как именно наша нейросеть ошибается и какие тэги она путает с какими, мы построим матрицу ошибок. Итак, в первой матрице мы видим столбец, соответствующий истинным значениям тэгов, и строку, отвечающую за предсказанный тэг. Например, тэг "quantity" был предсказан верно 8285 раз и ошибочно был предсказан: как "комментарий" (22 раза), как "название продукта" (18 раз) и как "продолжение комментария" (95 раз). Тэг, обозначающий "единицу измерения продукта" был предсказан верно почти во всех случаях, однако нейросеть перепутала его с "комментарием" 59 раз, с продолжением "названия продукта" 10 раз, с началом "названия продукта" 21 раз. Посмотрим на эту же матрицу ошибок, где значение выводится в процентном соотношении. Мы видим то, что некоторые тэги предсказаны с довольно высокой точностью: 98%, 99%, 90%, 91%... Однако же у нас есть и тэг, который нейросеть предсказывает довольно плохо — можно сказать, угадывает его в 50% случаев.