<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE article PUBLIC "-//NLM//DTD JATS (Z39.96) Journal Publishing DTD v1.3 20210610//EN" "JATS-journalpublishing1-3.dtd">
<article article-type="research-article" dtd-version="1.3" xmlns:mml="http://www.w3.org/1998/Math/MathML" xmlns:xlink="http://www.w3.org/1999/xlink" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xml:lang="ru"><front><journal-meta><journal-id journal-id-type="publisher-id">ecna</journal-id><journal-title-group><journal-title xml:lang="ru">Экономика науки</journal-title><trans-title-group xml:lang="en"><trans-title>Economics of Science</trans-title></trans-title-group></journal-title-group><issn pub-type="ppub">2410-132X</issn><issn pub-type="epub">2949-4680</issn><publisher><publisher-name>Delo Publishing house</publisher-name></publisher></journal-meta><article-meta><article-id pub-id-type="doi">10.22394/2410-132X-2023-9-3-76-88</article-id><article-id custom-type="elpub" pub-id-type="custom">ecna-415</article-id><article-categories><subj-group subj-group-type="heading"><subject>Research Article</subject></subj-group><subj-group subj-group-type="section-heading" xml:lang="ru"><subject>НАУЧНО-ТЕХНИЧЕСКАЯ И ИНЫЕ ВИДЫ ПОЛИТИКИ, ИНСТИТУЦИОНАЛЬНЫЕ ИЗМЕНЕНИЯ В НАУКЕ, МОДЕЛИРОВАНИЕ ВЛИЯНИЙ</subject></subj-group><subj-group subj-group-type="section-heading" xml:lang="en"><subject>SCIENTIFIC &amp; TECHNICAL AND OTHER TYPES OF POLICIES, INSTITUTIONAL CHANGES IN SCIENCE, MODELING IMPACTS</subject></subj-group></article-categories><title-group><article-title>Современные тренды в оценке научно-исследовательской деятельности: опыт Нидерландов</article-title><trans-title-group xml:lang="en"><trans-title>Modern Trends in Research Assessment: A Case of the Netherlands</trans-title></trans-title-group></title-group><contrib-group><contrib contrib-type="author" corresp="yes"><contrib-id contrib-id-type="orcid">https://orcid.org/0000-0001-7890-7532</contrib-id><name-alternatives><name name-style="eastern" xml:lang="ru"><surname>Кочетков</surname><given-names>Д. М.</given-names></name><name name-style="western" xml:lang="en"><surname>Kochetkov</surname><given-names>D. M.</given-names></name></name-alternatives><bio xml:lang="ru"><p>Кочетков Дмитрий Михайлович –  кандидат экономических наук, старший научный сотрудник научноисследовательской лаборатории по проблемам университетского развития Уральского федерального университета им. первого Президента России Б. Н. Ельцина; докторант Центра исследований науки и технологий Лейденского университета</p><p>Scopus Author ID: 57194605735</p><p>620002, Свердловская область, г. Екатеринбург, ул. Мира, д. 19</p></bio><bio xml:lang="en"><p>Dmitry M. Kochetkov – Cand.Sci. in Economics, Senior Researcher of the Research Laboratory for University Development of Ural Federal University; PhD Candidate at the Centre for Science and Technology Studies</p><p>Scopus Author ID: 57194605735</p><p>620002, Ekaterinburg, 19 Mira St.</p></bio><email xlink:type="simple">Kochetkovdm@hotmail.com</email><xref ref-type="aff" rid="aff-1"/></contrib></contrib-group><aff-alternatives id="aff-1"><aff xml:lang="ru"><institution>Уральский федеральный университет им. первого Президента России Б.Н. Ельцина; Лейденский университет</institution></aff><aff xml:lang="en"><institution>Ural Federal University; Leiden University</institution></aff></aff-alternatives><pub-date pub-type="collection"><year>2023</year></pub-date><pub-date pub-type="epub"><day>30</day><month>09</month><year>2023</year></pub-date><volume>9</volume><issue>3</issue><fpage>76</fpage><lpage>88</lpage><permissions><copyright-statement>Copyright &amp;#x00A9; Кочетков Д.М., 2023</copyright-statement><copyright-year>2023</copyright-year><copyright-holder xml:lang="ru">Кочетков Д.М.</copyright-holder><copyright-holder xml:lang="en">Kochetkov D.M.</copyright-holder><license xml:lang="ru" license-type="creative-commons-attribution" xlink:href="https://creativecommons.org/licenses/by/4.0/" xlink:type="simple"><license-p>Данная работа распространяется под лицензией Creative Commons Attribution 4.0.</license-p></license><license xml:lang="en" license-type="creative-commons-attribution" xlink:href="https://creativecommons.org/licenses/by/4.0/" xlink:type="simple"><license-p>This work is licensed under a Creative Commons Attribution 4.0 License.</license-p></license></permissions><self-uri xlink:href="https://ecna.elpub.ru/jour/article/view/415">https://ecna.elpub.ru/jour/article/view/415</self-uri><abstract><p>После ухода из России коммерческих баз данных научной информации Scopus и Web of Science проблема выстраивания новой системы оценки научно-исследовательской деятельности как никогда актуальна. При этом создаваемая система не обязательно должна копировать предыдущую с иными источниками данных. Целью статьи является анализ глобальных трендов в области оценки научноисследовательской деятельности. Рассматриваются ключевые наднациональные документы и практика внедрения ответственного подхода к оценке научно-исследовательской деятельности в Нидерландах. Все рассмотренные источники сходятся в одном: научно-исследовательская деятельность не должна оцениваться на основе исключительно количественных показателей, особенно на основе суррогатных мер качества, таких как импакт-фактор. В Нидерландах ответственный подход к оценке научно-исследовательской деятельности принят всеми ключевыми стейкхолдерами в научно-технической сфере. Немаловажную роль играет концепция валоризации, которая предполагает использование результатов научных исследований в экономике и во благо общества в целом. Опыт Нидерландов может быть использован в России для построения передовой системы оценки научно-исследовательской деятельности, которая будет способствовать достижению целей развития нашей страны и реализации приоритетов в научно-технической и социально-экономической сферах.</p></abstract><trans-abstract xml:lang="en"><p>After the departure of commercial scientific information databases such as Scopus and Web of Science from Russia, the problem of building a new system for research assessment is more relevant than ever. At the same time, the new system does not have to copy the previous one with other data sources. The purpose of the article is to analyze global trends in the field of research evaluation. The authors have examined key supranational documents and practices in introducing a responsible approach to research assessment in the Netherlands. All the reviewed sources agree on one point: research activities should not be assessed based solely on quantitative indicators, especially on the basis of surrogate measures of quality such as impact factor. In the Netherlands, all the key stakeholders in the research sphere adhere to responsible research evaluation. An important role is played by the concept of valorization, which involves the use of scientific research results in the economy and for the benefit of society as a whole. The experience of the Netherlands can be used in Russia to build an advanced system for assessing research activities, which will contribute to achieving the development goals of our country and the implementation of priorities in the scientific, technical, and socio-economic spheres.</p></trans-abstract><kwd-group xml:lang="ru"><kwd>оценка научно-исследовательской деятельности</kwd><kwd>научная экспертиза</kwd><kwd>наукометрия</kwd></kwd-group><kwd-group xml:lang="en"><kwd>research evaluation</kwd><kwd>research assessment</kwd><kwd>expert evaluation peer review</kwd><kwd>scientometrics</kwd></kwd-group><funding-group><funding-statement xml:lang="ru">Автор выражает благодарность профессору Лудо Вальтману за помощь при написании настоящей статьи. Наши беседы позволили глубже понять систему науки и высшего образования в Нидерландах. Автор также благодарен анонимным рецензентам, которые помогли сделать эту работу лучше.</funding-statement></funding-group></article-meta></front><back><ref-list><title>References</title><ref id="cit1"><label>1</label><citation-alternatives><mixed-citation xml:lang="ru">Васильева А. Мировые научные издательства обещают аннулировать российские подписки // Коммерсант [Электронный ресурс]. 04.04.2022. URL: https://www.kommersant.ru/doc/5293063 (дата обращения 13.08.2023).</mixed-citation><mixed-citation xml:lang="en">Bill No. 285562–8 “On amendments to Paragraphs 14 and 15–1 of the Federal Law “On Science and State Scientific and Technical Policy” and Paragraphs 7 and 12 of the Federal Law “On the Russian Academy of Sciences, reorganization of state academies of sciences and amendments to certain legislative acts of the Russian Federation” (in terms of regulating relations in the sphere of scientific (scientific and technical) expert evaluation). URL: https://sozd.duma.gov.ru/bill/285562–8 (date accessed 08/13/2023).</mixed-citation></citation-alternatives></ref><ref id="cit2"><label>2</label><citation-alternatives><mixed-citation xml:lang="ru">Законопроект № 285562–8 «О внесении изменений в статьи 14 и 15–1 Федерального закона «О науке и государственной научно-технической политике» и статьи 7 и 12 Федерального закона «О Российской академии наук, реорганизации государственных академий наук и внесении изменений в отдельные законодательные акты Российской Федерации» (в части регулирования отношений, связанных с проведением научной (научно-технической) экспертизы). URL: https://sozd.duma.gov.ru/bill/285562–8 (дата обращения 13.08.2023).</mixed-citation><mixed-citation xml:lang="en">Braun, T. (1999) Bibliometric indicators for the evaluation of universities – Intelligence from the quantitation of the scientific literature. Scientometrics 45, 425–432. https://doi.org/10.1007/BF02457602</mixed-citation></citation-alternatives></ref><ref id="cit3"><label>3</label><citation-alternatives><mixed-citation xml:lang="ru">Кочетков Д. М. Белый список российских журналов: вопросы, ждущие ответа. Научный редактор и издатель. 2022. № 7(2). С. 185–190. doi: 10.24069/SEP-22–48</mixed-citation><mixed-citation xml:lang="en">Clarivate to Cease all Commercial Activity in Russia. 22.03.2022. Retrieved on August 13, 2023 from https://clarivate.com/news/clarivate-to-cease-all-commercial-activity-in-russia/.</mixed-citation></citation-alternatives></ref><ref id="cit4"><label>4</label><citation-alternatives><mixed-citation xml:lang="ru">Налимов В. В., Мульченко З. М. Наукометрия. Москва: Издательство “Наука”, 1969. 192 с.</mixed-citation><mixed-citation xml:lang="en">CoARA. (2022). Agreement on reforming research assessment. 2022. Retrieved on July 7, 2023 from https://coara.eu/agreement/the-agreement-full-text/</mixed-citation></citation-alternatives></ref><ref id="cit5"><label>5</label><citation-alternatives><mixed-citation xml:lang="ru">Постановление Правительства Российской Федерации от 19.03.2022 № 414 «О некоторых вопросах применения правовых актов Правительства Российской Федерации, устанавливающих требования, целевые значения показателей по публикационной активности».</mixed-citation><mixed-citation xml:lang="en">Curry, S., Gadd, E &amp; Wilsdon, J. (2022) Harnessing the Metric Tide: indicators, infrastructures &amp; priorities for UK responsible research assessment. https://doi.org/10.6084/m9.figshare.21701624</mixed-citation></citation-alternatives></ref><ref id="cit6"><label>6</label><citation-alternatives><mixed-citation xml:lang="ru">Постановление Правительства Российской Федерации от 30.12.2018 № 1781 «Об осуществлении федеральным государственным бюджетным учреждением «Российская академия наук» научного и научно-методического руководства научной и научно-технической деятельностью научных организаций и образовательных организаций высшего образования, а также экспертизы научных и научно-технических результатов, полученных этими организациями, и о внесении изменений в некоторые акты Правительства Российской Федерации».</mixed-citation><mixed-citation xml:lang="en">Decree of the Government of the Russian Federation of December 30, 2018 No. 1781 “On the implementation by the federal state budgetary institution “Russian Academy of Sciences” of scientific and methodological management of scientific and technical activities of research organizations and educational organizations of higher education, as well as the peer review of scientific and technical results obtained by these organizations, and on amendments to certain acts of the Government of the Russian Federation.” (in Russ)</mixed-citation></citation-alternatives></ref><ref id="cit7"><label>7</label><citation-alternatives><mixed-citation xml:lang="ru">Проект Постановления Правительства Российской Федерации «О внесении изменения в абзац первый пункта 1 постановления Правительства Российской Федерации от 19 марта 2022 г. № 414» (подготовлен Минобрнауки России 30.08.2023). URL: https://base.garant.ru/56968968/ (дата обращения 13.08.2023).</mixed-citation><mixed-citation xml:lang="en">Decree of the Government of the Russian Federation of March 19, 2022 No. 414 “On some issues of application of legal acts of the Government of the Russian Federation establishing requirements and target values of indicators for publication activity.” (in Russ)</mixed-citation></citation-alternatives></ref><ref id="cit8"><label>8</label><citation-alternatives><mixed-citation xml:lang="ru">Сан-Францисская декларация об оценке научных исследований // DORA [Электронный ресурс]. 2012. URL: https://sfdora.org/read/read-the-declaration-pусский/ (дата обращения 13.08.2023).</mixed-citation><mixed-citation xml:lang="en">Draft Decree of the Government of the Russian Federation “On amendments to passage one of paragraph 1 of the Decree of the Government of the Russian Federation of March 19, 2022 No. 414” (prepared by the Ministry of Science and Higher Education on August 30, 2023). Retrieved on August 13, 2023 from https://base.garant.ru/56968968/. (in Russ)</mixed-citation></citation-alternatives></ref><ref id="cit9"><label>9</label><citation-alternatives><mixed-citation xml:lang="ru">Федеральный закон от 23.08.1996 г. № 127-ФЗ «О науке и государственной научно-технической политике».</mixed-citation><mixed-citation xml:lang="en">Erkennen &amp; Waarderen. Jaarverslag 2022. (2022) Retrieved on July 7, 2023 from https://recognitionrewards.nl/wp-content/uploads/2023/03/Erkennen-Waarderen_jaarverslag-2022.pdf.</mixed-citation></citation-alternatives></ref><ref id="cit10"><label>10</label><citation-alternatives><mixed-citation xml:lang="ru">Федеральный закон от 27.09.2013 г. № 253-ФЗ «О Российской академии наук, реорганизации государственных академий наук и внесении изменений в отдельные законодательные акты Российской Федерации».</mixed-citation><mixed-citation xml:lang="en">Experts discussed the creation of the National System for Assessing the Effectiveness of Scientific Research and Development. 03.11.2022. Retrieved on August 13, 2023 from https://minobrnauki.gov.ru/presscenter/news/novosti-ministerstva/48219/.(in Russ)</mixed-citation></citation-alternatives></ref><ref id="cit11"><label>11</label><citation-alternatives><mixed-citation xml:lang="ru">Эксперты обсудили создание Национальной системы оценки результативности научных исследований и разработок // Сайт Министерства науки и высшего образования [Электронный ресурс]. 11.03.2022. URL: https://minobrnauki.gov.ru/press-center/news/novosti-ministerstva/48219/ (дата обращения 13.08.2023).</mixed-citation><mixed-citation xml:lang="en">FAIR Guiding Principles for scientific data management and stewardship. (2016). Retrieved on July 7, 2023 from https://www.go-fair.org/fair-principles/.</mixed-citation></citation-alternatives></ref><ref id="cit12"><label>12</label><citation-alternatives><mixed-citation xml:lang="ru">Braun T. Bibliometric indicators for the evaluation of universities – Intelligence from the quantitation of the scientific literature // Scientometrics. 1999. № 45. P. 425–432. doi: 10.1007/BF02457602</mixed-citation><mixed-citation xml:lang="en">Federal Law of August 23, 1996 No. 127-FZ “On Science and State Scientific and Technical Policy.” (in Russ)</mixed-citation></citation-alternatives></ref><ref id="cit13"><label>13</label><citation-alternatives><mixed-citation xml:lang="ru">Clarivate to Cease all Commercial Activity in Russia // Clarivate [Electronic resource]. 22.03.2022. URL: https://clarivate.com/news/clarivate-to-cease-all-commercial-activity-in-russia/ (дата обращения 13.08.2023).</mixed-citation><mixed-citation xml:lang="en">Federal Law of September 27, 2013 No. 253-FZ “On the Russian Academy of Sciences, reorganization of state academies of sciences and amendments to certain legislative acts of the Russian Federation.”</mixed-citation></citation-alternatives></ref><ref id="cit14"><label>14</label><citation-alternatives><mixed-citation xml:lang="ru">CoARA. Agreement on reforming research assessment. 2022. URL: https://coara.eu/agreement/the-agreement-full-text/ (дата обращения 08.07.2023).</mixed-citation><mixed-citation xml:lang="en">Hicks, D., Wouters, P., Waltman, L., et al. (2015) Bibliometrics: The Leiden Manifesto for research metrics. Nature. 520, 429–431. https://doi.org/10.1038/520429a</mixed-citation></citation-alternatives></ref><ref id="cit15"><label>15</label><citation-alternatives><mixed-citation xml:lang="ru">Curry S., Gadd E., Wilsdon J. Harnessing the metric tide: indicators, infrastructures and priorities for responsible research assessment in the UK. 2022. doi: 10.6084/m9.figshare.21701624</mixed-citation><mixed-citation xml:lang="en">Kochetkov, D. M. Russian Journal Whitelist: Questions to be answered. (2022) Science Editor and Publisher. 7(2), 185–190. https://doi.org/10.24069/SEP-22–48</mixed-citation></citation-alternatives></ref><ref id="cit16"><label>16</label><citation-alternatives><mixed-citation xml:lang="ru">Erkennen &amp; Waarderen. Jaarverslag 2022. 2022. URL: https://recognitionrewards.nl/wp-content/uploads/2023/03/Erkennen-Waarderen_jaarverslag-2022.pdf (date of access 07.07.2023)</mixed-citation><mixed-citation xml:lang="en">Ministerie van OCW. (2014) Wetenschapsvisie 2025. Den Haag: Ministerie OCW.</mixed-citation></citation-alternatives></ref><ref id="cit17"><label>17</label><citation-alternatives><mixed-citation xml:lang="ru">FAIR Guiding Principles for scientific data management and stewardship. 2016. URL: https://www.go-fair.org/fair-principles/ (date of access 07.07.2023).</mixed-citation><mixed-citation xml:lang="en">Nalimov, V.V., Mulchenko, Z.M. (1969) Scientometrics. Moscow: Publishing house “Nauka”. (in Russ)</mixed-citation></citation-alternatives></ref><ref id="cit18"><label>18</label><citation-alternatives><mixed-citation xml:lang="ru">Hicks D., Wouters P., Waltman L., de Rijcke S., Rafols I. Bibliometrics: The Leiden Manifesto for research metrics // Nature. 2015. № 520. P. 429–431. doi: 10.1038/520429a</mixed-citation><mixed-citation xml:lang="en">Nederland Ondernemend Innovatieland. Van voornemens naar voorsprong: Kennis moet circuleren. (2009) Den Haag: Interdepartementale Programmadirectie Kennis en Innovatie.</mixed-citation></citation-alternatives></ref><ref id="cit19"><label>19</label><citation-alternatives><mixed-citation xml:lang="ru">Ministerie van OCW. Wetenschapsvisie 2025. Den Haag: Ministerie OCW, 2014.</mixed-citation><mixed-citation xml:lang="en">Netherlands Code of Conduct for Research Integrity. (2018) Retrieved on July 7, 2023 from https://www.universiteitenvannederland.nl/files/documents/Netherlands%20Code%20of%20Conduct%20for%20 Research%20Integrity%202018.pdf.</mixed-citation></citation-alternatives></ref><ref id="cit20"><label>20</label><citation-alternatives><mixed-citation xml:lang="ru">Nederland Ondernemend Innovatieland. Van voornemens naar voorsprong: Kennis moet circuleren. Den Haag: Interdepartementale Programmadirectie Kennis en Innovatie, 2009.</mixed-citation><mixed-citation xml:lang="en">Position paper “Room for everyone’s talent”. (2019) Retrieved on July 7, 2023 from https://www.nwo.nl/en/position-paper-room-everyones-talent (дата обращения 07.07.2023).</mixed-citation></citation-alternatives></ref><ref id="cit21"><label>21</label><citation-alternatives><mixed-citation xml:lang="ru">Netherlands Code of Conduct for Research Integrity. 2018. URL: https://www.universiteitenvannederland.nl/files/documents/Netherlands%20Code%20of%20Conduct%20for%20Research%20Integrity%202018. pdf (дата обращения 07.07.2023).</mixed-citation><mixed-citation xml:lang="en">Rushforth, A., &amp; Hammarfelt, B. (2022) The rise of ‘responsible metrics’ as a professional reform movement: A collective action frames account. https://doi.org/10.31235/osf.io/cdmqz</mixed-citation></citation-alternatives></ref><ref id="cit22"><label>22</label><citation-alternatives><mixed-citation xml:lang="ru">Position paper “Room for everyone’s talent”. 2019. URL: https://www.nwo.nl/en/position-paper-roomeveryones-talent (дата обращения 07.07.2023).</mixed-citation><mixed-citation xml:lang="en">San Francisco Declaration on Research Assessment. (2012) Retrieved on August 13, 2023 from https://sfdora.org/read/.</mixed-citation></citation-alternatives></ref><ref id="cit23"><label>23</label><citation-alternatives><mixed-citation xml:lang="ru">Rushforth A., Hammarfelt B. The rise of ‘responsible metrics’ as a professional reform movement: A collective action frames account [preprint]. URL: https://doi.org/10.31235/osf.io/cdmqz (дата обращения 22.07.2023).</mixed-citation><mixed-citation xml:lang="en">Strategy Evaluation Protocol 2021–2027. (2020) Retrieved on July 7, 2023 from https://www.universiteitenvannederland.nl/files/documenten/Domeinen/Onderzoek/SEP_2021–2027.pdf.</mixed-citation></citation-alternatives></ref><ref id="cit24"><label>24</label><citation-alternatives><mixed-citation xml:lang="ru">Strategy Evaluation Protocol 2021–2027. 2020. URL: https://www.universiteitenvannederland.nl/files/documenten/Domeinen/Onderzoek/SEP_2021-2027.pdf (дата обращения 07.07.2023).</mixed-citation><mixed-citation xml:lang="en">Vasilyeva, A. (2022) World scientific publishing houses promise to cancel Russian subscriptions. Kommersant. (in Russ)</mixed-citation></citation-alternatives></ref><ref id="cit25"><label>25</label><citation-alternatives><mixed-citation xml:lang="ru">Wet op de Nederlandse organisatie voor wetenschappelijk onderzoek. 2012. URL: https://wetten.overheid.nl/BWBR0004191/2012-07-01 (дата обращения 07.07.2023).</mixed-citation><mixed-citation xml:lang="en">Wet op de Nederlandse organisatie voor wetenschappelijk onderzoek. (2012) Retrieved on July 7, 2023 from https://wetten.overheid.nl/BWBR0004191/2012-07-01.</mixed-citation></citation-alternatives></ref><ref id="cit26"><label>26</label><citation-alternatives><mixed-citation xml:lang="ru">Wet op het hoger onderwijs en wetenschappelijk onderzoek. 2015. URL: http://wetten.overheid.nl/BWBR0005682/2015-01-01#Hoofdstuk13 (дата обращения 07.07.2023).</mixed-citation><mixed-citation xml:lang="en">Wet op het hoger onderwijs en wetenschappelijk onderzoek. (2015) Retrieved on July 7, 2023 from http://wetten.overheid.nl/BWBR0005682/2015-01-01#Hoofdstuk13.</mixed-citation></citation-alternatives></ref><ref id="cit27"><label>27</label><citation-alternatives><mixed-citation xml:lang="ru">Wilsdon J. et al. The Metric Tide: Report of the Independent Review of the Role of Metrics in Research Assessment and Management. 2015. doi: 10.13140/RG.2.1.4929.1363.</mixed-citation><mixed-citation xml:lang="en">Wilsdon, J. et al. (2015) The Metric Tide: Report of the Independent Review of the Role of Metrics in Research Assessment and Management. DOI: 10.13140/RG.2.1.4929.1363.</mixed-citation></citation-alternatives></ref></ref-list><fn-group><fn fn-type="conflict"><p>The authors declare that there are no conflicts of interest present.</p></fn></fn-group></back></article>
