CC BY
91
Особенности организации экспертизы о
инновационных проектов: опыт фонда о
Сколково о
К. А. Ходова, П. В. Гречихин, В. Н. Куцаков, Ю. В. Никольский, К. А. Булатов, К. В. Каем
Некоммерческая организация Фонд развития Центра разработки и коммерциализации новых технологий (Фонд Сколково), Москва, Россия
Мировая практика оценки проектов по разработке новых технологий в области биологии и медицины основывается на четкой и прозрачной системе организации этой оценки и применяемых критериев. В статье рассмотрены особенности организации экспертизы инновационных проектов на примере экспертного сообщества Фонда Сколково, приведены результаты его работы, проанализированы преимущества и недостатки системы экспертных оценок, а также перспективы ее развития.
КЛЮЧЕВЫЕ СЛОВА: экспертиза, инновации, Фонд Сколково, оценка проектов.
Management of Innovative Projects Assessment: Skolkovo Foundation Perspective
^ А. Khodova, P. V. Grechikhin, V. N. Kutsakov, Y. V. Nikolsky, K. A. Bulatov, K. V. Kaem
Non-commercial Organization Foundation for Development of the Center for Elaboration and Commercialization of New Technologies (Skolkovo Foundation), Moscow, Russia
The best practice of new biomed technologies development assessment is based on rigorous and transparent management system and applied criteria. The 15 paper is focused on innovative projects assessment management in the context of the Skolkovo Foundation expert panel. Results of its implementation are demonstrated, considering advantages and disadvantages as well as its future development.
KEYWORDS: expertise, innovation, Skolkovo Foundation, project assessment.
ВВЕДЕНИЕ
В настоящее время мировая практика поддержки проектов, нацеленных на разработку новых технологий в области биологии и медицины, основывается на выстроенной, часто многоступенчатой системе отбора и оценки предлагаемых решений. При этом важными критериями эффективности работы организаций, предоставляющих безвозмездную гранто-вую поддержку, являются скорость принятия решения и прозрачность критериев и процедур оценки проектов.
Одним из примеров может служить Фонд Великобритании Wellcome Trust, предоставляющий различные схемы грантового финансирования в зависимости от потребностей исследовательских организаций. Фактически все виды финансирования осуществляются на конкурентной основе: заявки оцениваются в сравнении друг с другом. Оценка производится внешними экспертами, в ряде случаев зая-
вители имеют возможность ответить на анонимизи-рованные комментарии экспертов перед заседанием комитета, принимающего решение о выделении полного или частичного финансирования. В целом, решение принимается в течение 4-6 месяцев с момента подачи заявки [1].
В США работа Национальных институтов здоровья (ЖН) основана на других принципах экспертизы, которая проводится очно, на заседаниях так называемых «панелей» и состоит из одного либо нескольких этапов. Заявки на проекты рассматриваются в условиях высокой их конкуренции; решения о финансировании исследовательских проектов принимаются в конце работы панели (обычно 1 или 2 рабочих дня) на основании среднего балла по оценкам всех экспертов. Решение о финансировании принимается в срок от 9 месяцев [2]. Кроме того, существуют специальные программы грантового финансирования малого бизнеса в сфере инновационных исследований и транс-
о ц,
о
4 о н ш
5
16
CL
О
LQ _0 ш
X
ш
о ^
о
X
X
ш
о х
фера технологий (STTR). NIH и NSF (National Science Foundation) используют систему двойной оценки для отбора и финансирования наиболее достойных проектов. Первый этап проходит в Центре научной оценки в рамках очного собрания экспертов, после чего проект получает балльную оценку, которая отражает научную значимость, но не определяет финансирование. Для ряда проектов дополнительно оценивается потенциал коммерциализации. На втором этапе экспертный совет соответствующего института, состоящий из внешнего научного сообщества и представителей общественности, формирует рекомендации о целесообразности финансировании проекта, а финальное решение принимает руководство института. Критерии оценки проектов включают:
• значимость проекта;
• релевантность команды исследователей;
• инновационность;
• предлагаемый подход;
• научно-исследовательское окружение [3].
В целом, научная значимость является основным критерием оценки проекта. Анализ результативности работы данной системы в течение 2005-2014 гг., проведенный путем оценки коэффициента успешного прохождения экспертизы проектами (вычисляется в процентах от общего числа поданных заявок), продемонстрировал средний показатель 21% при ежегодном количестве подаваемых заявок от 4,5 до 6 тысяч и объемах общего финансирования от 300 до 400 млн долларов США в год [4]. Стоит отметить, что вероятность успешного прохождения экспертизы зависит от института (всего в NIH 37 институтов) и соответствия стратегическим направлениям, объявляемым на сайте NIH ежегодно. Направления предлагаются директорами SBIR-программ в каждом институте.
Срок рассмотрения заявок в рамках указанных программ составляет около 6-7 месяцев.
Средний срок принятия решения по заявкам на гранты других фондов варьирует от 3 (Европейский научный фонд) до 6 месяцев (Агентство по науке, технологиям и исследованиям Сингапура) [5, 6].
Фонд Сколково (далее - Фонд) был создан в 2010 г. с целью формирования экосистемы и поддержки коммерциализации конкурентоспособных наукоемких разработок в пяти приоритетных направлениях: энергоэффективность и энергосбережение, ядерные технологии, космические технологии и телекоммуникации, биомедицинские технологии, стратегические компьютерные технологии и программное обеспечение. С 2015 г. появилось шестое направление - биотехнологии в сельском хозяйстве и промышленности. Для выстраивания системы отбора конкурентоспособных проектов возникла необходимость в создании полноценного экспертного сообщества, состоящего из ведущих специалистов
указанных областей. В настоящей статье рассматриваются основные принципы формирования и организации работы пула экспертов Фонда, а также преимущества и недостатки существующей системы и перспективы ее развития.
МАТЕРИАЛЫ И МЕТОДЫ
Описательная часть основана на регламентирующих документах Фонда, включая Положение об экспертных коллегиях и Регламент Фонда по работе с экспертами, а также Положение о присвоении и утрате статуса участника и Положение о грантах [7]. Анализ показателей работы экспертного сообщества проведен с использованием внутренних аналитических данных грантовой и экспертной службы Фонда.
РЕЗУЛЬТАТЫ
Эксперт - физическое лицо, оказывающее услуги Фонду Сколково по проведению экспертизы инновационных проектов на возмездной основе. Пул экспертов (экспертное сообщество) Фонда - сообщество профессионалов, высококомпетентных в областях информационных, ядерных, энергоэффективных, космических, сельскохозяйственных или биомедицинских технологий. Эксперт относится к ключевым фигурам Фонда: его мнение о соответствии заявок соискателей требованиям Фонда играет решающую роль в принятии решения о присвоении заявителю статуса участника проекта (с получением налоговых и других льгот) и служит одним из важнейших факторов принятия Грантовым комитетом Фонда (ГК) решения о целесообразности и объеме финансирования проектов, претендующих на получение грантов.
Основной целью работы экспертного сообщества является участие в отборе проектов, претендующих на поддержку Фонда, путем осуществления независимой экспертизы по 3 направлениям: заявки на статус участника проекта Сколково, заявки на грант, отчета грантополучателя. Принципы работы:
• анонимность (информация о личности экспертов, проводивших экспертизу заявок на грант, доступна только сотрудникам грантовой и экспертной службы, взаимодействующим с экспертом, а информация о его участии в экспертизе заявок на статус недоступна никому);
• независимость (эксперт высказывает свои собственные суждения, возможность какого-либо воздействия на эксперта отсутствует);
• беспристрастность (эксперты объективны и непредвзяты в своей оценке, участие в экспертизе не допускается при наличии заинтересованности/ конфликта интересов, исключено прямое общение с заявителем);
• оценка качества и ротация (заключения экспертов по заявкам на грант и отчетам грантополучателей получают оценки от независимых членов ГК Фонда, и на основании этих оценок рассчитывается средний балл работы эксперта; кроме того, работа экспертов - без раскрытия их личности - оценивается сотрудниками кластеров Фонда);
• оказание услуг на возмездной основе.
По специализации эксперты делятся на 3 категории:
1. Научные эксперты - эксперты, специализирующиеся на оценке научной составляющей проектов и имеющие опыт работы в научных и (или) исследовательских учреждениях. Необходим опыт работы на научных должностях в научных / исследовательских / образовательных российских или зарубежных организациях (или научным редактором ведущих мировых научных журналов) не менее 5 лет.
2. Технические эксперты - эксперты, специализирующиеся на оценке технологической составляющей проектов и имеющие опыт по ведению исследований и разработок и (или) внедрению и использованию технологических решений в крупных компаниях. Необходим опыт работы не менее 5 лет в течение последних 10 лет на руководящих должностях в НИОКР или технологической сфере в российских или зарубежных производственных и сервисных компаниях.
3. Бизнес-эксперты - эксперты, специализирующиеся на оценке коммерческой составляющей проектов и имеющие управленческий опыт в крупных, в том числе инвестиционных, организациях или предпринимательский опыт в сфере высоких технологий. Необходим опыт работы в высокотехнологичной компании на руководящей должности не менее 3 лет в течение последних 10 лет или опыт работы не менее 3 лет в течение последних 10 лет в частных венчурных фондах.
Фонд осуществляет набор и ротацию экспертов на постоянной основе. Основной принцип: в экспертный пул привлекаются лучшие специалисты по соответствующим направлениям, имеющие значительный подтвержденный опыт. Процедура отбора и оценки экспертов включает несколько этапов.
I. Подача заявки на включение в состав экспертов Фонда осуществляется путем направления в Фонд электронной версии заявки с приложением резюме, в соответствии с предложенным шаблоном. Сотрудники Фонда, их родственники, а также члены грантового комитета не могут являться экспертами Фонда.
II. Двухэтапная последовательная процедура обработки заявки в Фонде.
1) Оценка (скоринг) осуществляется по следующим критериям, используемым в зависимости от специализации эксперта:
• наличие ученой степени;
• индекс цитируемости;
• публикации;
• опыт работы в университете/научной организации;
• опыт работы на управленческих должностях в высокотехнологичных компаниях;
• опыт создания нового высокотехнологичного продукта (стартапа);
• опыт инвестирования в проекты на ранней стадии, успешно реализованные и проданные другим инвесторам;
• опыт работы в управляющей компании, имеющей под управлением фонды, инвестирующие в проекты того же направления, что указано в заявлении кандидата в эксперты;
• опыт работы в технологической или отраслевой маркетинговой консалтинговой компании, относящейся к лидерам отрасли, на должности, предполагающей проведение самостоятельной экспертизы проектов;
• опыт работы на исследовательских или инженерных должностях в крупных компаниях - лидерах отрасли;
• наличие фактов общественного признания (награды, звания).
2) Анализ резюме соответствующим кластером (отделом) с определением релевантных профилю эксперта инновационных приоритетов.
III. Подписание гражданско-правового договора.
IV. Включение в состав экспертного сообщества на основании приказа, содержащего список экспертов отдельно по каждому направлению деятельности. Информация о том, что данное лицо входит в список экспертов Фонда, является публичной, соответствующие списки размещаются на сайте Фонда.
Основаниями для исключения из экспертного пула являются нарушения экспертом условий договора с Фондом (в том числе нарушение требований сохранения анонимности), а также многократный немотивированный отказ от проведения экспертизы.
Существует два основных вида экспертиз: I. Экспертиза заявки на статус участника проекта Все заявители Фонда Сколково, прежде чем претендовать на его поддержку, обязаны подтвердить соответствие проекта требованиям Фонда. Для этого через личный кабинет подается заявка в Фонд с описанием проекта для последующей экспертизы на получение статуса участника Сколково. Такая заявка распределяется среди 7 случайным образом отобранных экспертов по инновационному приоритету, который соответствует тематике проекта. При этом в составе каждой экспертной коллегии должны присутствовать научные, технические и бизнес-эксперты. Заседания проводятся в заочной форме. Экспертное заключение предполагает ответ эксперта на четыре ключевых вопроса в формате «да/нет» и комментарий по каждому из этих вопросов:
• Обладает ли продукт существенным потенциалом коммерциализации?
• Обладает ли создаваемый продукт конкурентными преимуществами на мировом рынке?
о ^
о ч о н ш
2
18
о. О ш _0 ш
X
ш
о ^
О X
X
ш
о
X
• Не противоречат ли технологии, использованные в проекте, основополагающим научным принципам?
• Насколько компетенции команды могут способствовать успешной реализации проекта?
Если в заседании экспертной коллегии приняло участие менее пяти членов, то оно признается несостоявшимся. Решение о соответствии проекта требованиям Фонда принимается, если за него проголосовало не менее 60% членов экспертной коллегии, принявших участие в заседании. II. Грантовые экспертизы
Заявители, успешно прошедшие статусный отбор и ставшие участниками проекта Сколково, получают возможность претендовать на получение гранта. С этой целью они готовят грантовый меморандум по установленной форме, который после проведения внутренней проверки на предмет соответствия требованиям Фонда направляется на рассмотрение экспертам, отобранным по профилю своей деятельности. В экспертизе принимает участие от 3 до 5 экспертов.
Ключевым отличием грантовой экспертизы от экспертизы на статус является более глубокая степень проработки исследуемых материалов. Эксперт дает свою обоснованную оценку проекта по следующим аспектам:
• перспективы коммерциализации;
• команда;
• риски;
• смета;
• инвестиционный потенциал;
• план реализации проекта.
Финальное решение о предоставлении грантового финансирования принимает Грантовый комитет Фонда.
Каждый этап использования средств гранта завершается отчетом от грантополучателя. Отчет тоже направляют на экспертизу для оценки соответствия достигнутых результатов заявленным при получении гранта целям, а также для проверки расходования средств гранта. Данный вид экспертиз аналогичен экспертизе документов, поданных на грант. В рассмотрении отчета участвуют тоже от 3 до 5 экспертов. По результатам внутренних проверок и внешней экспертизы отчета принимается решение о дальнейшем финансировании проекта либо о принятии к сведению отчета за последний этап. Ответственность эксперта Эксперты обязаны придерживаться самых высоких этических стандартов во всех вопросах, связанных с проведением ими экспертизы заявок на грант, а также отчетов грантополучателей:
• Добросовестность:
Дав согласие на оценку проекта, эксперт берет на себя обязательство осуществить экспертизу. В случае возникновения форс-мажорных обстоятельств, мешающих своевременному завершению экспертизы, эксперт должен сообщить об этом сотруднику грантовой и экспертной службы Фонда.
• Беспристрастность:
Оценка эксперта должна быть объективной и непредвзятой. В случае своей заинтересованности в результатах реализации проекта эксперт должен об этом незамедлительно сообщить и отказаться от проведения оценки. Эксперту воспрещается прямое общение с заявителем, а также с сотрудниками кластеров Фонда. Все вопросы и уточнения эксперт вправе задавать только сотрудникам грантовой и экспертной службы.
• Качество:
Оценка работы экспертов производится постоянно при проведении экспертиз проектов. Эксперты проверяются на отсутствие аффилированности с участниками проекта и их конкурентами. Работа экспертов оценивается членами грантового комитета, а также сотрудниками соответствующих кластеров Фонда без раскрытия личности экспертов. Оценка экспертов осуществляется посредством проставления им оценок «неудовлетворительно», «удовлетворительно», «хорошо» или «отлично».
Преимущества эксперта
• Вовлеченность:
Членство в экспертном сообществе Фонда Сколко-во дает возможность быть в курсе развития трендов в сфере интересов эксперта.
• Коммуникации.
• Перспективы:
Каждый эксперт имеет возможность стать ментором проекта и безвозмездно делиться своими знаниями, навыками и опытом с командой проекта, чтобы помочь последней развить навыки и приобрести знания, необходимые для успешного развития ее инновационного проекта.
Эксперты получают дополнительную возможность собственного профессионального роста благодаря взаимодействию с коллегами по всему миру, также являющимися экспертами Фонда.
Оплата работы эксперта производится в соответствии с договором. На момент написания данной статьи она составляет 10 000 руб. за 1 экспертизу заявки на статус и 60 000 руб. за 1 экспертизу грантового меморандума или отчета по итогам использования средств гранта.
По состоянию на конец августа 2015 г. в состав экспертного пула Фонда было включено 646 экспертов, работающих по 6 направлениям (из них 186 в области биологических и медицинских технологий) и по 226 инновационным приоритетам. Всего за 2014 г. и 7 мес. 2015 г. обработано 443 заявления от кандидатов в эксперты, привлечено 346 новых экспертов, исключен из пула 731 эксперт, что отражает действующий механизм ротации и оптимизации экспертного пула. Ротация осуществлялась в рамках завершения договоров с экспертами, привлеченными в 2011-2013 гг., и включения в экспертное сообщество новых профессионалов.
Анализ показателей работы экспертного сообщества показал, что ежегодно проводится около 6000 голосований по заявкам на статус, более 100 экспертиз грантовых меморандумов и отчетов (около 500 голосований). При этом количество голосований экспертов по заявкам на статус за 7 мес. 2015 г. достигло уровня 2014 г., в связи с чем по итогам 2015 г. ожидается превышение прошлогоднего уровня практически в 2 раза, вследствие возросшего интереса и активности соискателей статуса участника проекта Сколково. Доля успешно пройденных экспертиз на статус составляет около 14%.
Срок проведения экспертизы грантового меморандума экспертом составляет 3 недели, срок проведения экспертизы отчета экспертом - 4 недели. Средняя оценка экспертами грантовых меморандумов и отчетов об использовании гранта составляет 3,8 балла по пятибалльной шкале. Средний срок принятия решения о предоставлении гранта Фондом составляет 48 рабочих дней (около 2-3 мес.). В течение 5 лет работы Фонда были приняты положительные решения о предоставлении биомедицинским проектам 39 грантов на сумму свыше 5 млн руб. каждый, 11 из которых на момент написания статьи завершены.
ОБСУЖДЕНИЕ
Проведенный анализ принципов и результатов работы экспертного сообщества Фонда Сколково показал достаточно высокий уровень эффективности принятых процедур. Однако ряд аспектов остается обсуждаемым.
В частности, до конца не решен весьма важный для обеспечения необходимого качества экспертизы вопрос, касающийся объективной оценки работы экспертов. Например, в случае грантовых экспертиз, помимо Грантового комитета и кластеров Фонда, возможно подключение самих экспертов к процессу взаимной оценки при сохранении анонимности, а также составление рейтинга экспертов на основании полученных оценок. Спорным является и сам принцип анонимности в работе сообщества. С одной стороны, он обеспечивает эксперту наибольший комфорт и свободу суждений, а, с другой - публичность результатов экспертизы безусловно повышает уровень ответственности эксперта. Сведения о непредвзятости эксперта и отсутствии у него конфликта интересов основываются главным образом на информации, предоставляемой самим экспертом до начала экспертизы, но могут быть проверены сотрудниками грантовой и экспертной службы Фонда. Однако последний процесс не регламентирован, и потому не исключен риск сокрытия экспертом факта заинтересованности или конфликта интересов с проектом.
Будучи динамичной системой, экспертное сообщество требует постоянного развития, т. е. прежде
всего - расширения сферы своей деятельности. Начиная с 2014 г., все эксперты получили возможность принимать участие в менторской программе Фонда и присоединиться к развитию отдельных проектов в качестве ментора. Другими областями деятельности сообщества могут стать:
• формирование новых направлений работы Фонда и поддержки участников;
• определение инновационных приоритетов (форсайтов) Фонда;
• участие в изменении ряда регламентирующих документов Фонда, включая грантовую политику;
• участие в заседаниях Грантового комитета в качестве независимых экспертов;
• возможность оказания экспертной поддержки сторонним организациям (в частности венчурным фондам и институтам развития экономики РФ), предоставляющим финансирование инновационным проектам.
Существующая система экспертизы Фонда доказала высокую эффективность, в том числе и тем уровнем доверия к ее результатам, который демонстрируют партнеры и инвестиционные фонды при рассмотрении проектов участников Сколково. Она является важнейшим инструментом отбора и независимой оценки разработок. Дальнейшее пополнение пула экспертов и развитие их сообщества внутри инновационной экосистемы Сколково позволит сохранить соответствие высоким международным стандартам и достичь наибольшей эффективности в осуществлении целей экспертизы и ускорении коммерциализации проектов.
ЛИТЕРАТУРА
1. Официальный сайт Wellcome Trust. URL: http://www.wellcome. ac.uk/Funding/Biomedical-science/Application-information/ WTD004051.htm.
2. Официальный сайт Национальных институтов здоровья США. URL: http://grants.nih.gov/grants/guide/index.html.
3. Официальный сайт Национальных институтов здоровья США -программы SBIR/STTR. URL: https://sbir.nih.gov/review/selection-process.
4. Отчеты Национальных институтов здоровья США. URL: http:// report.nih.gov/success_rates/index.aspx.
5. Официальный сайт Европейского научного фонда. URL: http:// www.esf.org/serving-science/evaluation-services.html.
6. Официальный сайт Агентства по науке, технологиям и исследованиям Сингапура. URL: http://www.a-star.edu.sg/Research/ Funding-Opportunities/Grants-Sponsorship.aspx.
7. Официальный сайт Фонда Сколково. URL: http://sk.ru/foundation/ documents/.
REFERENCES
1. Official website Wellcome Trust. URL: http://www.wellcome.ac.uk/ Funding/Biomedical-science/Application-information/WTD004051. htm.
2. Official website of the National Institutes of Health, USA. URL: http://grants.nih.gov/grants/guide/index.html.
3. Official website of the National Institutes of Health, USA - programs SBIR/STTR. URL: https://sbir.nih.gov/review/selection-process.
20
4. Reports of the National Institutes of Health, USA. URL: http://report. nih.gov/success_rates/index.aspx.
5. The official website of the European Science Foundation. URL: http:// www.esf.org/serving-science/evaluation-services.html.
6. The official website of the Agency for Science, Technology and Research of Singapore. URL: http://www.a-star.edu.sg/Research/Fund-ing-Opportunities/Grants-Sponsorship.aspx.
7. The official website of the Fundation Skolkovo. URL: http://sk.ru/ foundation/documents/.
Сведения об авторах
Ходова Кристина Александровна
руководитель направления «Онкология/Иммунология» Кластера биологических и медицинских технологий Фонда Сколково, канд. мед. наук
Гречихин Павел Викторович
руководитель направления биологических и медицинских технологий, Грантовая и экспертная служба Фонда Сколково
Куцаков Василий Николаевич
руководитель направления экспертизы, Грантовая и экспертная служба Фонда Сколково
Никольский Юрий Викторович
директор по науке Кластера биологических и медицинских технологий Фонда Сколково, канд. биол. наук
Булатов Кирилл Александрович
Вице-Президент, руководитель Грантовой и экспертной службы Фонда Сколково
Каем Кирилл Владимирович
Вице-Президент, Исполнительный директор Кластера биологических и медицинских технологий Фонда Сколково
Адрес для переписки:
143026, Москва, территория инновационного центра Сколково,
ул. Нобеля, д. 5
Телефон: +7 (495) 956-0033
E-mail: [email protected], [email protected]
Writing committee:
Khodova Kristina Aleksandrovna
[Head of Oncology/Immunology Projects, BMT Cluster (Skolkovo Foundation), Candidate of Medical Sciences
Grechikhin Pavel Viktorovich
Grants and Experts Services Project Manager, Biomedical Technologies Curator (Skolkovo Foundation)
Kutsakov Vasiliy Nikolayevich
Head of Expertise, Grants and Experts Services (Skolkovo Foundation) Nikolsky Yuri Viktorovich
Science Director of biomedical cluster (Skolkovo Foundation), Candidate of Biological Sciences
Bulatov Kirill Aleksandrovich
Chief Grant Officer of Skolkovo Foundation
Kaem Kirill Vladimirovich
Vice-President, Executive Director of Biomedical Technologies Cluster (Skolkovo Foundation)
Address for correspondence:
Skolkovo innovation center grounds, Nobelya str., 5, Moscow, 143026
Tel: +7 (495) 956-0033
E-mail: [email protected], [email protected]
CL
О
LQ -0 m
X
Ш
о ^
О X
X
ш
о
X
