ecnaЭкономика наукиEconomics of Science2410-132X2949-4680Delo Publishing house10.22394/2410-132X-2021-7-1-19-38ecna-315Research ArticleЭкспертизаExpertiseИспользование методологии комплексной оценки научно-технологических проектов для оценки рисков их невыполненияUsing the Methodology for the Comprehensive Assessment of Scientific and Technological Projects to Estimate Risks of their Failurehttps://orcid.org/0000-0003-4703-4702КомаровА. B.KomarovA. V.

Комаров Алексей Валерьевич – кандидат технических наук, старший научный сотрудник отдела аналитических исследований

Web of Science ResearcherID: ABI-1166-2020

123557, г. Москва, Пресненский Вал, д. 19, строение 1

Komarov Aleksey Valerievich – Senior Researcher, Analytical Research Department

Web of Science Researcher ID: ABI-1166-2020

123557, Moscow, Presnensky Val, 19, building 1

abkom@mail.ruhttps://orcid.org/0000-0001-9334-7350КомаровК. А.KomarovK. A.

Комаров Кирилл Алексеевич –  ведущий специалист отдела аналитических исследований

Web of Science Researcher ID: AAH-2512-2021

123557, г. Москва, Пресненский Вал, д. 19, строение 1

Komarov Kirill Alekseevich - Leading Specialist of the Analytical Research Department

Web of Science Researcher ID: AAH-2512-2021

123557, Moscow, Presnensky Val, 19, building 1

kirill.080789@gmail.comhttps://orcid.org/0000-0002-5580-8643ШуртаковК. В.ShurtakovK. V.

Шуртаков Константин Владимирович – заместитель генерального директора по управлению

Web of Science ResearcherID: AAG-8420-2021

123557, г. Москва, Пресненский Вал, д. 19, строение 1

Shurtakov Konstantin Vladimirovich - Deputy General Director for Project Management

Web of Science Researcher ID: AAG-8420-2021

123557, Moscow, Presnensky Val, 19, building 1

shurtakov@fcntp.ruФГБНУ «Дирекция научно-технических программ»РоссияDirectorate of State Scientific and Technical ProgrammesRussian Federation202126072021711938Copyright © Комаров А.B., Комаров К.А., Шуртаков К.В., 20212021Комаров А.B., Комаров К.А., Шуртаков К.В.Komarov A.V., Komarov K.A., Shurtakov K.V.This work is licensed under a Creative Commons Attribution 4.0 License.https://ecna.elpub.ru/jour/article/view/315

: В статье предложены подходы к оценке риска невыполнения научно-технологических проектов, основанные на анализе накопленной различными институтами инновационного развития информации, и проводимом в соответствии с требованиями методологии комплексной оценки технологической готовности проектов. Один из представленных подходов позволяет строить для последующего анализа матрицу рисков, характеризующих возможность перехода проекта на более высокий уровень технологического развития, а второй основан на выявлении эмпирических зависимостей между уровнем технологической готовности выполняемого проекта и риском нарушения сроков его выполнения. Приведены примеры практического применения разработанных подходов для проектов, выполняемых по программным мероприятиям федеральных целевых программ в сфере исследований и разработок по приоритетным направлениям научно-технологического комплекса России. Описанные модели предназначены для применения в органах управления институтов инновационного развития с целью повышения эффективности реализуемых программ поддержки.

The article proposes approaches to assessing the risk of non-implementation of scientific and technological projects, based on the analysis of data from institutions for innovative development of information, and carried out following the requirements of a comprehensive assessment of projects’ technological readiness. One of the approaches presented allows you to build a matrix for subsequent analysis that describes the possibility of a project oving to a higher level of development, and the second is based on identifying empirical dependencies between the level of readiness of the project being executed and the risk of violating its deadlines. Examples of applying  the developed approaches for practical tasks on program activities of target programs in the field of research and development in priority areas of the scientific and technological complex of Russia are given. The described models are intended for use in the governing bodies of innovative development institutions to increase the implemented support programs’ efficiency.

научно-технологический проектмодельуровень готовности технологииTPRLTRLУГТрискснижение рискаоценкаscientific and technological projectmodeltechnology readiness levelTPRLTRLUGTrisk reductionriskassessmentРабота выполнена при финансовой поддержке Министерства науки и высшего образования России за счёт средств субсидии на выполнение государственного задания (проект № 075-01395-20-01).The study was carried out with the Ministry of Science of Russia’s financial support through a subsidy for the implementation of a state assignment (project No. 075-01395-20-01).ReferencesAir Force Instruction 90-802. Risk Management (2019) www.e-Publishing.af.mil.Air Force Instruction 90-802. Risk Management (2019) www.e-Publishing.af.mil.NASA Risk Management Handbook (2011) / NASA. http://ntrs.nasa.gov.NASA Risk Management Handbook (2011) / NASA. http://ntrs.nasa.gov.Project Management in Research and Development. White Paper (2010) / EFCOG.Project Management in Research and Development. White Paper (2010) / EFCOG.ГОСТ Р 56275-2014 (2016) Менеджмент рисков. Руководство по надлежащей практике менеджмента рисков проектов / Техэксперт. http://docs.cntd.ru/document/1200118641.GOST R 56275-2014 (2016) Risk management. Good Practice Risk Guide for Projects / TechExpert. http://docs.cntd.ru/document/1200118641. (In Russ.)ГОСТ Р ИСО/МЭК 31010—2011. Менеджмент риска. Методы оценки риска (2011) / Техэксперт. http://docs.cntd.ru/document/1200090083.GOST R ISO / IEC 31010-2011. Risk management. Risk Assessment Methods (2011) / TechExpert. http://docs.cntd.ru/document/1200090083. (In Russ.)Mankins J.C. (1995) Technology readiness levels / Advanced Concepts Office of Space Access and Technology NASA. http://www.artemisinnovation.com/images/TRL_White_Paper_2004-Edited.pdf.Mankins J.C. (1995) Technology readiness levels / Advanced Concepts Office of Space Access and Technology NASA. http://www.artemisinnovation.com/images/TRL_White_Paper_2004-Edited.pdf.Moon T., Smith J., Cook S. (2005) Technology Readiness and Technical Risk Assessment for the Australian Defence Organisation.Moon T., Smith J., Cook S. (2005) Technology Readiness and Technical Risk Assessment for the Australian Defence Organisation.Mankins J.C. (2009) Technology readiness and risk assessments: A new approach // Acta Astronautica. 65(9-10):1208-1215.Mankins J.C. (2009) Technology readiness and risk assessments: A new approach // Acta Astronautica. 65(9-10):1208-1215.NGNP Risk Management through Assessing Technology Readiness Status (2010) // Idaho National Laboratory. Next Generation Nuclear Plant Project. Idaho Falls, Idaho 83415.NGNP Risk Management through Assessing Technology Readiness Status (2010) // Idaho National Laboratory. Next Generation Nuclear Plant Project. Idaho Falls, Idaho 83415.Петров А.Н., Комаров А.В. (2020) Оценка уровня технологической готовности конкурсных заявок с использованием методологии TPRL // Экономика науки. 6(1-2):88-99.Petrov A.N., Komarov A.V. (2020) Assessment of the level of technological readiness of bids using the TPRL methodology // The Economics of Science. 6(1-2):88-99. (In Russ.)Комаров А.В., Петров А.Н., Сартори А.В. (2018) Модель комплексной оценки технологической готовности инновационных научно-технологических проектов // Экономика науки. 4(1):47-57.Komarov A.V., Petrov A.N., Sartori A.V. (2018) Model of a comprehensive assessment of the technological readiness of innovative scientific and technological projects // The Economics of Science. 4(1):47-57. (In Russ.)Cooper R.G., Edgett S.J. (2006) Stage-Gate and the Critical Success Factors for New Product Development / BPTrends. https://www.bptrends.com/bpt/wp-content/publicationfiles/07-06-ART-Stage-GateForProductDev-Cooper-Edgett1.pdf.Cooper R.G., Edgett S.J. (2006) Stage-Gate and the Critical Success Factors for New Product Development / BPTrends. https://www.bptrends.com/bpt/wp-content/publicationfiles/07-06-ART-Stage-GateForProductDev-Cooper-Edgett1.pdf.Сухарев А.А., Власенко А.О. (2019) Метод формализации выбора вариантов реализации комплексного научно-технологического проекта (на примере планирования разработки технологий создания перспективных региональных самолетов) // Друкеровский вестник. 4:126-139.Sukharev A.A., Vlasenko A.O. (2019) A method of formalizing the choice of options for implementing an integrated scientific and technological project (on the example of planning the development of technologies for creating promising regional aircraft) // Drukerovskiy Vestnik. 4:126-139. (In Russ.)Chuck A. (2018) Parametric Cost and Schedule Modeling for Early Technology Development / The Johns Hopkins University Applied Physics Laboratory.Chuck A. (2018) Parametric Cost and Schedule Modeling for Early Technology Development / The Johns Hopkins University Applied Physics Laboratory.Ferguson R., Goldenson D., McCurley J., Stoddard R., Zubrow D., Anderson D. (2011) Quantifying Uncertainty in Early Lifecycle Cost Estimation (QUELCE) / Software Engineering Measurement and Analysis (SEMA) Cost Estimation Research Group.Ferguson R, Goldenson D, McCurley J., Stoddard R., Zubrow D., Anderson D. (2011) Quantifying Uncertainty in Early Lifecycle Cost Estimation (QUELCE) / Software Engineering Measurement and Analysis (SEMA) Cost Estimation Research Group.USAF Cost Risk and Uncertainty Analysis Handbook (2007).USAF Cost Risk and Uncertainty Analysis Handbook (2007).NASA Cost Estimating Handbook (CEH) v. 4 (2007) // NASA OCFO. https://www.nasa.gov/offices/ocfo/nasa-cost-estimating-handbook-ceh.NASA Cost Estimating Handbook (CEH) v.4 (2007) // NASA OCFO. https://www.nasa.gov/offices/ocfo/nasa-cost-estimating-handbook-ceh.El-Khoury B., Kenley C.R. (2014) An AssumptionsBased Framework for TRL-Based Cost and Schedule Models // Journal of Cost Analysis and Parametrics. 7(3):160-179.El-Khoury B., Kenley C.R. (2014) An AssumptionsBased Framework for TRL-Based Cost and Schedule Models // Journal of Cost Analysis and Parametrics. 7(3):160-179.Dubos G.F., Saleh J.H., Braun R. (2007) Technology Readiness Level, Schedule Risk and Slippage in Spacecraft Design: Data Analysis and Modeling // AIAA SPACE 2007 Conference & Exposition. Long Beach, California. 18-20 September 2007.Dubos G.F., Saleh J.H., Braun R. (2007) Technology Readiness Level, Schedule Risk and Slippage in Spacecraft Design: Data Analysis and Modeling // AIAA SPACE 2007 Conference & Exposition. Long Beach, California. 18-20 September 2007.Garg T., Eppinger S., Joglekar N., Olechowski A. (2017) Using TRLs and System Architecture to Estimate Technology Integration Risk / 21st International Conference on Engineering Design, ICED17. 21-25 August, 2017.Garg T., Eppinger S., Joglekar N., Olechowski A. (2017) Using TRLs and System Architecture to Estimate Technology Integration Risk / 21st International Conference on Engineering Design, ICED17. 21-25 August, 2017.Engel D.W., Dalto A.C., Anderson K.K., Sivaramakrishnan C., Lansing C. (2012) Development of Technology Readiness Level (TRL) Metrics and Risk Measures / OSTI. URL: https://www.osti.gov/servlets/purl/1067968. DOI:10.2172/1067968. 2012.Engel D.W., Dalto A.C., Anderson K.K., Sivaramakrishnan C., Lansing C. (2012) Development of Technology Readiness Level (TRL) Metrics and Risk Measures / OSTI. URL: https://www.osti.gov/serv-lets/purl/1067968. DOI:10.2172/1067968. 2012.ГОСТ Р 50779.21-96 (1997) Статистические методы. Правила определения и методы расчета статистических характеристик по выборочным данным. Часть 1. Нормальное распределение / Техэксперт. http://docs.cntd.ru/document/1200001380.GOST R 50779.21-96 (1997) Statistical methods. Definition rules and methods for calculatingstatistical characteristics based on sample data. Part 1. Normal distribution / Techexpert. http://docs.cntd.ru/document/1200001380. (In Russ.)Yang K. (2008) Risk Identification: Integration & Ilities (RI3) Guidebook.Yang K. (2008) Risk Identification: Integration & Ilities (RI3) Guidebook.Жебель В.В., Комаров А.В., Комаров К.А., Шуртаков К.В. (2018) Программное средство для комплексной оценки технологической готовности инновационных научно-технологических проектов // Экономика науки. 4(1):58-68.Zhebel V.V., Komarov A.V., Komarov K.A., Shurtakov K.V. (2018) A software tool for a comprehensive assessment of the technological readiness of innovative scientific and technological projects // The Economics of Science. 4(1):58-68. (In Russ.)

The authors declare that there are no conflicts of interest present.