<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE article PUBLIC "-//NLM//DTD JATS (Z39.96) Journal Publishing DTD v1.3 20210610//EN" "JATS-journalpublishing1-3.dtd">
<article article-type="research-article" dtd-version="1.3" xmlns:mml="http://www.w3.org/1998/Math/MathML" xmlns:xlink="http://www.w3.org/1999/xlink" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xml:lang="ru"><front><journal-meta><journal-id journal-id-type="publisher-id">zldm</journal-id><journal-title-group><journal-title xml:lang="ru">Заводская лаборатория. Диагностика материалов</journal-title><trans-title-group xml:lang="en"><trans-title>Industrial laboratory. Diagnostics of materials</trans-title></trans-title-group></journal-title-group><issn pub-type="ppub">1028-6861</issn><issn pub-type="epub">2588-0187</issn><publisher><publisher-name>ООО «Издательство «ТЕСТ-ЗЛ»</publisher-name></publisher></journal-meta><article-meta><article-id custom-type="elpub" pub-id-type="custom">zldm-482</article-id><article-categories><subj-group subj-group-type="heading"><subject>Research Article</subject></subj-group><subj-group subj-group-type="section-heading" xml:lang="ru"><subject>МАТЕМАТИЧЕСКИЕ МЕТОДЫ ИССЛЕДОВАНИЯ</subject></subj-group><subj-group subj-group-type="section-heading" xml:lang="en"><subject>MATHEMATICAL METHODS OF INVESTIGATION</subject></subj-group></article-categories><title-group><article-title>АВТОМАТИЗИРОВАННОЕ ОЦЕНИВАНИЕ ФОРМУЛИРОВОК НАУЧНОЙ НОВИЗНЫ ПУБЛИКАЦИЙ</article-title><trans-title-group xml:lang="en"><trans-title>Automated Estimation of the Wording of Scientific Novelty of Publications</trans-title></trans-title-group></title-group><contrib-group><contrib contrib-type="author" corresp="yes"><name-alternatives><name name-style="eastern" xml:lang="ru"><surname>Толчеев</surname><given-names>В. О.</given-names></name><name name-style="western" xml:lang="en"><surname>Tolcheev</surname><given-names>V. O.</given-names></name></name-alternatives><email xlink:type="simple">tolcheevvo@mail.ru</email><xref ref-type="aff" rid="aff-1"/></contrib></contrib-group><aff xml:lang="ru" id="aff-1"><institution>Национальный исследовательский университет «МЭИ»</institution><country>Russian Federation</country></aff><pub-date pub-type="collection"><year>2017</year></pub-date><pub-date pub-type="epub"><day>01</day><month>05</month><year>2017</year></pub-date><volume>83</volume><issue>5</issue><fpage>72</fpage><lpage>78</lpage><permissions><copyright-statement>Copyright &amp;#x00A9; Толчеев В.О., 2017</copyright-statement><copyright-year>2017</copyright-year><copyright-holder xml:lang="ru">Толчеев В.О.</copyright-holder><copyright-holder xml:lang="en">Tolcheev V.O.</copyright-holder><license xml:lang="ru" license-type="creative-commons-attribution" xlink:href="https://creativecommons.org/licenses/by/4.0/" xlink:type="simple"><license-p>Данная работа распространяется под лицензией Creative Commons Attribution 4.0.</license-p></license><license xml:lang="en" license-type="creative-commons-attribution" xlink:href="https://creativecommons.org/licenses/by/4.0/" xlink:type="simple"><license-p>This work is licensed under a Creative Commons Attribution 4.0 License.</license-p></license></permissions><self-uri xlink:href="https://www.zldm.ru/jour/article/view/482">https://www.zldm.ru/jour/article/view/482</self-uri><abstract><p>Показаны возможности использования методов интеллектуального анализа текстовых данных (Text Mining) для задач, которые ранее решались с помощью экспертных процедур. Рассмотрены вопросы определения качества научных публикаций, выявления научной новизны и идентификации зарождающихся технологических трендов средствами Text Mining (обнаружение «слабых» сигналов). Отмечена специфика этих проблем и способов их решения. Проведен обзор используемых методов выявления научной новизны. Исследованы способы автоматизированного обнаружения слов-маркеров, характеризующих научную новизну, и на их основе составлены специализированные шаблоны. Сформированы и описаны выборки, содержащие экспертно размеченные документы (авторефераты и научные статьи). Описаны результаты экспериментов по практическому использованию полученных шаблонов (на примере публикаций в области информатики).</p></abstract><trans-abstract xml:lang="en"><p>A possibility of using Text Mining methods for the tasks previously solved by expert procedures is demonstrated. We consider the issues attributed to determination of the scientific novelty of publications and identification of originating technological trends using Text Mining. We also consider the specificity of the problems and their possible solutions, formulate the problem and review the methods used in literature. Methods of automated detection of words-markers which characterize the scientific novelty and their use in creation of specialized templates are studied. The samples containing documents which underwent expert estimations are formed and described to develop the technique of template construction. The results of practical use of the templates thus obtained on the base of analysis of the publications in the field of Computer Science are discussed.</p></trans-abstract><kwd-group xml:lang="ru"><kwd>text mining</kwd><kwd>identification of markers of scientific novelty</kwd><kwd>construction of templates</kwd><kwd>classification (categorization) of scientific articles</kwd><kwd>интеллектуальный анализ данных</kwd><kwd>выявление маркеров научной новизны</kwd><kwd>построение шаблонов</kwd><kwd>библиографические описания</kwd><kwd>классификация научных статей</kwd></kwd-group></article-meta></front><back><ref-list><title>References</title><ref id="cit1"><label>1</label><citation-alternatives><mixed-citation xml:lang="ru">Маннинг К. Д., Рагхаван П., Шютце X. Введение в информационный поиск. -М.: Вильямс, 2014. - 528 с.</mixed-citation><mixed-citation xml:lang="en">Маннинг К. Д., Рагхаван П., Шютце X. Введение в информационный поиск. -М.: Вильямс, 2014. - 528 с.</mixed-citation></citation-alternatives></ref><ref id="cit2"><label>2</label><citation-alternatives><mixed-citation xml:lang="ru">Большакова Е. И., КлышинскиЗ Э. С., Ландэ Д. В. и др. Автоматическая обработка текстов на естественном языке и компьютерная лингвистика. -М.: МИЭМ, 2011. - 272 с.</mixed-citation><mixed-citation xml:lang="en">Большакова Е. И., КлышинскиЗ Э. С., Ландэ Д. В. и др. Автоматическая обработка текстов на естественном языке и компьютерная лингвистика. -М.: МИЭМ, 2011. - 272 с.</mixed-citation></citation-alternatives></ref><ref id="cit3"><label>3</label><citation-alternatives><mixed-citation xml:lang="ru">Кузнецова Ю. М., Осипов Г. С., Чудова Н. В., Швец А. В. Автоматическое установление соответствия статей требованиям к научным публикациям / Труды ИСА РАН. 2012. Т. 62. № 3. С. 132 - 138.</mixed-citation><mixed-citation xml:lang="en">Кузнецова Ю. М., Осипов Г. С., Чудова Н. В., Швец А. В. Автоматическое установление соответствия статей требованиям к научным публикациям / Труды ИСА РАН. 2012. Т. 62. № 3. С. 132 - 138.</mixed-citation></citation-alternatives></ref><ref id="cit4"><label>4</label><citation-alternatives><mixed-citation xml:lang="ru">Орлов А. И. Критерии выбора показателей эффективности научной деятельности / Контроллинг. 2013. № 3(49). С. 72 - 78.</mixed-citation><mixed-citation xml:lang="en">Орлов А. И. Критерии выбора показателей эффективности научной деятельности / Контроллинг. 2013. № 3(49). С. 72 - 78.</mixed-citation></citation-alternatives></ref><ref id="cit5"><label>5</label><citation-alternatives><mixed-citation xml:lang="ru">Герасимов С. В., Курынин Р. В., Машечкин И. В., Петровский М. И., Царёв Д. В., Шестимеров А. А. Инструментальные средства оценки качества научно-технических документов / Труды ИСА РАН. 2013. Т. 24. С. 359 - 379.</mixed-citation><mixed-citation xml:lang="en">Герасимов С. В., Курынин Р. В., Машечкин И. В., Петровский М. И., Царёв Д. В., Шестимеров А. А. Инструментальные средства оценки качества научно-технических документов / Труды ИСА РАН. 2013. Т. 24. С. 359 - 379.</mixed-citation></citation-alternatives></ref><ref id="cit6"><label>6</label><citation-alternatives><mixed-citation xml:lang="ru">Yoon J. Detecting weak signals for long-term business opportunities using text mining of Web news / Expert Systems with Applications. 2012. Vol. 39. P. 12543 - 12550.</mixed-citation><mixed-citation xml:lang="en">Yoon J. Detecting weak signals for long-term business opportunities using text mining of Web news / Expert Systems with Applications. 2012. Vol. 39. P. 12543 - 12550.</mixed-citation></citation-alternatives></ref><ref id="cit7"><label>7</label><citation-alternatives><mixed-citation xml:lang="ru">Микова H., Соколова А. Мониторинг глобальных технологических трендов: теоретические основы и лучшие практики / Форсайт. 2014. Т. 8. №4. С. 64-83.</mixed-citation><mixed-citation xml:lang="en">Микова H., Соколова А. Мониторинг глобальных технологических трендов: теоретические основы и лучшие практики / Форсайт. 2014. Т. 8. №4. С. 64-83.</mixed-citation></citation-alternatives></ref><ref id="cit8"><label>8</label><citation-alternatives><mixed-citation xml:lang="ru">Орлов А. И. Экспертные оценки / Заводская лаборатория. Диагностика материалов. 1996. Т. 62. № 1. С. 54 - 60.</mixed-citation><mixed-citation xml:lang="en">Орлов А. И. Экспертные оценки / Заводская лаборатория. Диагностика материалов. 1996. Т. 62. № 1. С. 54 - 60.</mixed-citation></citation-alternatives></ref><ref id="cit9"><label>9</label><citation-alternatives><mixed-citation xml:lang="ru">Леонова Ю. В., Федотов А. М. Извлечение знаний и фактов из текстов диссертаций и авторефератов для изучения связей научных сообществ / XV Всероссийская научная конференция RCDL. - Ярославль: ЯрГУ, 2013. С. 135 - 144.</mixed-citation><mixed-citation xml:lang="en">Леонова Ю. В., Федотов А. М. Извлечение знаний и фактов из текстов диссертаций и авторефератов для изучения связей научных сообществ / XV Всероссийская научная конференция RCDL. - Ярославль: ЯрГУ, 2013. С. 135 - 144.</mixed-citation></citation-alternatives></ref><ref id="cit10"><label>10</label><citation-alternatives><mixed-citation xml:lang="ru">Большакова Е. И., Васильева Н. Э., Морозов С. С. Лексикосинтаксические шаблоны для автоматического анализа научно-технических текстов / X Национальная конференция по искусственному интеллекту. Т. 2. - М.: Физматлит, 2006. С. 506 - 524.</mixed-citation><mixed-citation xml:lang="en">Большакова Е. И., Васильева Н. Э., Морозов С. С. Лексикосинтаксические шаблоны для автоматического анализа научно-технических текстов / X Национальная конференция по искусственному интеллекту. Т. 2. - М.: Физматлит, 2006. С. 506 - 524.</mixed-citation></citation-alternatives></ref><ref id="cit11"><label>11</label><citation-alternatives><mixed-citation xml:lang="ru">Дербенёв Н. В., Толчеев В. О. Что можно улучшить в наукометрическом анализе - учет наличия дубликатов и заимствований в научных публикациях / Управление большими системами. 2013. №44. С. 366-380.</mixed-citation><mixed-citation xml:lang="en">Дербенёв Н. В., Толчеев В. О. Что можно улучшить в наукометрическом анализе - учет наличия дубликатов и заимствований в научных публикациях / Управление большими системами. 2013. №44. С. 366-380.</mixed-citation></citation-alternatives></ref><ref id="cit12"><label>12</label><citation-alternatives><mixed-citation xml:lang="ru">Новиков Д. А., Орлов А. И. Математические методы классификации / Заводская лаборатория. Диагностика материалов. 2012. Т. 78. №4. С. 3-5.</mixed-citation><mixed-citation xml:lang="en">Новиков Д. А., Орлов А. И. Математические методы классификации / Заводская лаборатория. Диагностика материалов. 2012. Т. 78. №4. С. 3-5.</mixed-citation></citation-alternatives></ref><ref id="cit13"><label>13</label><citation-alternatives><mixed-citation xml:lang="ru">Сэлтон Г. Автоматическая обработка, хранение и поиск информации. - М.: Советское радио, 1973. - 560 с.</mixed-citation><mixed-citation xml:lang="en">Сэлтон Г. Автоматическая обработка, хранение и поиск информации. - М.: Советское радио, 1973. - 560 с.</mixed-citation></citation-alternatives></ref><ref id="cit14"><label>14</label><citation-alternatives><mixed-citation xml:lang="ru">Толчеев В. О. Модели и методы классификации текстовой информации / Информационные технологии. 2004. № 5. С. 6 - 14.</mixed-citation><mixed-citation xml:lang="en">Толчеев В. О. Модели и методы классификации текстовой информации / Информационные технологии. 2004. № 5. С. 6 - 14.</mixed-citation></citation-alternatives></ref><ref id="cit15"><label>15</label><citation-alternatives><mixed-citation xml:lang="ru">Powers D. Evaluation: From Precision, Recall and F-Factor to ROC, Informedness, Markedness and Correlation / J. Machine Learning Technol. 2011. Vol. 2(1). P. 37-63.</mixed-citation><mixed-citation xml:lang="en">Powers D. Evaluation: From Precision, Recall and F-Factor to ROC, Informedness, Markedness and Correlation / J. Machine Learning Technol. 2011. Vol. 2(1). P. 37-63.</mixed-citation></citation-alternatives></ref><ref id="cit16"><label>16</label><citation-alternatives><mixed-citation xml:lang="ru">Liakata M., Thompson P., de Waard A., Nawaz R., Maat H. P., Ananiadou S. A Three-Way Perspective on Scientific Discourse Annotation for Knowledge Extraction / Proc. Workshop DSSD. 2012. P. 37 - 46.</mixed-citation><mixed-citation xml:lang="en">Liakata M., Thompson P., de Waard A., Nawaz R., Maat H. P., Ananiadou S. A Three-Way Perspective on Scientific Discourse Annotation for Knowledge Extraction / Proc. Workshop DSSD. 2012. P. 37 - 46.</mixed-citation></citation-alternatives></ref><ref id="cit17"><label>17</label><citation-alternatives><mixed-citation xml:lang="ru">Барахнин В. Б., Ткачев Д. А. Классификация математических документов с использованием составных ключевых терминов / Материалы Всероссийской конференции «ЗОНТ». - Новосибирск, 2009. С. 16-23.</mixed-citation><mixed-citation xml:lang="en">Барахнин В. Б., Ткачев Д. А. Классификация математических документов с использованием составных ключевых терминов / Материалы Всероссийской конференции «ЗОНТ». - Новосибирск, 2009. С. 16-23.</mixed-citation></citation-alternatives></ref><ref id="cit18"><label>18</label><citation-alternatives><mixed-citation xml:lang="ru">Швец А. В. Экспериментальный метод автоматического определения уровня качества научных публикаций / Труды пятой международной конференции «Системный анализ и информационные технологии». Красноярск, 2013. Т. 1. С. 304 - 312.</mixed-citation><mixed-citation xml:lang="en">Швец А. В. Экспериментальный метод автоматического определения уровня качества научных публикаций / Труды пятой международной конференции «Системный анализ и информационные технологии». Красноярск, 2013. Т. 1. С. 304 - 312.</mixed-citation></citation-alternatives></ref><ref id="cit19"><label>19</label><citation-alternatives><mixed-citation xml:lang="ru">Валеева Н. Г. Жанрово-стилистическая характеристика научных текстов. Введение в переводоведение. - М.: РУДН, 2006. - 85 с.</mixed-citation><mixed-citation xml:lang="en">Валеева Н. Г. Жанрово-стилистическая характеристика научных текстов. Введение в переводоведение. - М.: РУДН, 2006. - 85 с.</mixed-citation></citation-alternatives></ref><ref id="cit20"><label>20</label><citation-alternatives><mixed-citation xml:lang="ru">Ярская В. Н. Методология диссертационного исследования: Методическое пособие. -Саратов: ПМУЦ, 2002. - 189 с.</mixed-citation><mixed-citation xml:lang="en">Ярская В. Н. Методология диссертационного исследования: Методическое пособие. -Саратов: ПМУЦ, 2002. - 189 с.</mixed-citation></citation-alternatives></ref></ref-list><fn-group><fn fn-type="conflict"><p>The authors declare that there are no conflicts of interest present.</p></fn></fn-group></back></article>
