Труды института системного программирования РАН
RUS  ENG    ЖУРНАЛЫ   ПЕРСОНАЛИИ   ОРГАНИЗАЦИИ   КОНФЕРЕНЦИИ   СЕМИНАРЫ   ВИДЕОТЕКА   ПАКЕТ AMSBIB  
Общая информация
Последний выпуск
Архив

Поиск публикаций
Поиск ссылок

RSS
Последний выпуск
Текущие выпуски
Архивные выпуски
Что такое RSS


Труды ИСП РАН:
Год:
Том:
Выпуск:
Страница:
Найти




Персональный вход:
Логин:
Пароль:
Запомнить пароль
Войти
Забыли пароль?
Регистрация

Труды института системного программирования РАН, 2023, том 35, выпуск 5, страницы 193–214
DOI: https://doi.org/10.15514/ISPRAS-2023-35(5)-13 (Mi tisp823) 		 
Извлечение именованных сущностей из рецензий к исходному коду

В. В. Качановab, А. С. Хитроваca, С. И. Марковa

a Институт системного программирования им. В.П. Иванникова РАН
b Московский физико-технический институт
c Московский государственный университет имени М. В. Ломоносова
PDF полного текста (1242 kB)
DOI: https://doi.org/10.15514/ISPRAS-2023-35(5)-13
Аннотация: В данной статье рассматривается задача извлечения именованных сущностей из рецензий исходного кода. В работе приводится сравнительный анализ существующих подходов и предлагаются собственные методы для улучшения качества решения задачи. Предложенные и реализованные улучшения включают в себя: методы борьбы с дисбалансом данных, улучшения токенизации входных данных, использование больших массивов неразмеченных данных и применение дополнительных бинарных классификаторов. Для оценки качества собран и размечен вручную новый набор из 3000 пользовательских рецензий. Показано, что предложенные улучшения позволяют значительно увеличить показатели метрик качества, вычисляемых как на уровне токенов (+22%), так и на уровне сущностей целиком (+13%).
Ключевые слова: машинное обучение, извлечение именованных сущностей, набор данных
Тип публикации: Статья
Образец цитирования: В. В. Качанов, А. С. Хитрова, С. И. Марков, “Извлечение именованных сущностей из рецензий к исходному коду”, Труды ИСП РАН, 35:5 (2023), 193–214
Цитирование в формате AMSBIB
\RBibitem{KacKhiMar23}
\by В.~В.~Качанов, А.~С.~Хитрова, С.~И.~Марков
\paper Извлечение именованных сущностей из рецензий к исходному коду
\jour Труды ИСП РАН
\yr 2023
\vol 35
\issue 5
\pages 193--214
\mathnet{http://mi.mathnet.ru/tisp823}
\crossref{https://doi.org/10.15514/ISPRAS-2023-35(5)-13}
Образцы ссылок на эту страницу:
  • https://www.mathnet.ru/rus/tisp823
  • https://www.mathnet.ru/rus/tisp/v35/i5/p193
    • Citing articles in Google Scholar: Russian citations, English citations
    Related articles in Google Scholar: Russian articles, English articles
    		Труды института системного программирования РАН
    Статистика просмотров:
    Страница аннотации:11
    PDF полного текста:17
     
      Обратная связь:
    		  Пользовательское соглашение  Регистрация посетителей портала  Логотипы © Математический институт им. В. А. Стеклова РАН, 2024