Научная статья на тему 'От информационных технологий в учебном процессе к новой модели образования'

От информационных технологий в учебном процессе к новой модели образования Текст научной статьи по специальности «Науки об образовании»

CC BY
179
22
i Надоели баннеры? Вы всегда можете отключить рекламу.
Ключевые слова
МОДЕЛЬ ОБРАЗОВАНИЯ / УЧЕБНЫЙ ПРОЦЕСС / ИНФОРМАЦИОННЫЕ ТЕХНОЛОГИИ / УПРАВЛЕНИЕ КАДРАМИ

Аннотация научной статьи по наукам об образовании, автор научной работы — Скрипкин Кирилл Георгиевич

В настоящее время в российских вузах наблюдаются многочисленные попытки внедрения современных образовательных технологий, в т.ч. и на основе ИТ. В то же время, масштабы этих попыток чаще всего ограничены, как и влияние этих попыток на результативность образовательного процесса. Основными препятствиями к внедрению передовых информационных технологий в образовательный процесс выступают устаревшие организационные практики и неготовность человеческого капитала. Налицо отдельные успехи в преодолении этих препятствий, но эти успехи пока недостаточны для существенного повышения результативности. Для качественного изменения самого учебного процесса и его результатов необходима, прежде всего, целостная модель образовательного процесса, увязывающая воедино внедрение информационных технологий, организационные преобразования и новые подходы к управлению кадрами.

i Надоели баннеры? Вы всегда можете отключить рекламу.

Похожие темы научных работ по наукам об образовании , автор научной работы — Скрипкин Кирилл Георгиевич

iНе можете найти то, что вам нужно? Попробуйте сервис подбора литературы.
i Надоели баннеры? Вы всегда можете отключить рекламу.

Текст научной работы на тему «От информационных технологий в учебном процессе к новой модели образования»

Скрипкин К.Г.

МГУ им. М.В.Ломоносова, экономический факультет, доцент кафедры экономической информатики k . skripkin@ gmail . com

От информационных технологий в учебном процессе к новой модели образования

КЛЮЧЕВЫЕ СЛОВА:

Модель образования, учебный процесс, информационные технологии,управление кадрами.

АННОТАЦИЯ:

В настоящее время в российских вузах наблюдаются многочисленные попытки внедрения современных образовательных технологий, в т.ч. и на основе ИТ. В то же время, масштабы этих попыток чаще всего ограничены, как и влияние этих попыток на результативность образовательного процесса.

Основными препятствиями к внедрению передовых информационных технологий в образовательный процесс выступают устаревшие организационные практики и неготовность человеческого капитала. Налицо отдельные успехи в преодолении этих препятствий, но эти успехи пока недостаточны для существенного повышения результативности.

Для качественного изменения самого учебного процесса и его результатов необходима, прежде всего, целостная модель образовательного процесса, увязывающая воедино внедрение информационных технологий, организационные преобразования и новые подходы к управлению кадрами.

Введение

Важность проблемы информатизации образования в России давно признана как на государственном уровне (см. например, [1]), так и на уровне образовательного сообщества (см., например, [2]). Задачу насыщения вузов вычислительной техникой государство считает в основном решенной [3], однако решение институциональных проблем образования далеко от завершения [3].

Такое отставание институциональной среды от собственно технологической закономерно. Информационные технологии относятся к классу технологий общего назначения [4]. Такие технологии сами по себе не повышают результативность, но открывают возможности для создания большого количества новых результативных прикладных технологий. Применение этих технологий с надлежащей отдачей требует, в частности,

изменения организации производства или, в случае вуза, организации учебного процесса, научных исследований и т.д. Эти изменения вслед за [5] мы будем именовать «со-изобретением» (англ. Co-invention). Со-изобретение состоит во взаимной адаптации технологии и организации, использующей последнюю. Такая адаптация требует инноваций как со стороны поставщиков, так и со стороны потребителей технологических решений. Именно эта двойственность процесса, включающая обязательное вовлечение потребителя новой технологии, обозначена термином «со-изобретение».

В нынешней ситуации в российском высшем образовании видны признаки того, что, несмотря на массированные инвестиции в создание технической инфраструктуры, процесс со-изобретения далек от завершения. В этой ситуации новые технологии неизбежно сталкиваются со старыми процессами в учебной и научной деятельности вуза, что сильно ограничивает отдачу.

Подчеркнем, что в настоящей работе речь идет об анализе результативности информационных технологий в российском высшем образовании, т.е. об их вкладе в прирост результатов образовательной деятельности. На уровне вуза под результативностью здесь и далее будет пониматься степень реализации этих возможностей в конкретном вузе. Эффективность же, в соответствии с общепринятым смыслом этого понятия, будет рассматриваться как соотношение результатов и затрат. Данная работа посвящена проблеме повышения результативности, которая сегодня имеет принципиальное значение.

Настоящая работа исследует эту проблему и основные методы её решения. Последнее видится на нескольких направлениях. Первое из них -диагностика ситуации, возможность выявить и формализовать наиболее важные противоречия между новыми технологиями и практикой российского образования. Для этого в работе будет предложен специальный инструмент, основанный на так называемой матрице изменений. Второе - поиск в российской и зарубежной практике передовых процессов, снимающих существующие противоречия и обеспечивающих существенное повышение результативности вуза. Такие практики будут предложены на основе анализа кейсов, изученных автором. Наконец, третьим направлением представляется построение целостной модели нового образовательного процесса, обеспечивающей новый уровень результативности образования на основе использования передовых технологий.

Современные подходы к анализу результативности информационных технологий

Начнем с нескольких определений.

Под ИТ-сервисом мы будем понимать решение определенной задачи бизнеса средствами ИТ. Такое определение ИТ-сервиса не тождественно понятию ИТ-услуги, т.к. услуга предполагает коммерческое взаимодействие

двух и более фирм, тогда как ИТ-сервис может оказываться внутри предприятия, например, ИТ-службой.

Организационная практика есть определенный способ решения задачи, стоящей перед организацией. Например, в качестве организационной практики можно рассматривать сдельную оплату труда рабочих (альтернатива, например, повременная оплата), учет затрат по методу ABC (Activities Based Costing- учет затрат по видам деятельности), альтернативой которому может выступать, например, метод прямых затрат. Другой пример - планирование производства по модели Just-in-time (точно в срок), альтернативой которому может быть традиционное планирование с высоким уровнем запасов.

При совместном использовании одни организационные практики естественным образом влияют на результативность других. Если совместное использование двух и более организационных практик обеспечивает большую отдачу и/или меньшие затраты, нежели использование каждой из них по отдельности, такие практики будут именоваться комплементарными друг другу. При меньшей отдаче и/или более высоких затратах, такие практики будут именоваться субститутами.

Современная теория влияния ИТ на производительность была во многом заложена П.Милгромом и Дж.Робертсом в [6]. В этой работе впервые были продемонстрированы взаимосвязи между производительным применением ИТ в широком масштабе и определенными организационными практиками в области управления продуктовой линейкой, организации производства, управления запасами и т.д. Более того, была создана теория производительности фирмы при наличии комплементарных взаимосвязей между используемыми ИТ-сервисами, организационными практиками и компетентностями человеческого капитала, включающая соответствующий математический аппарат. Среди выводов этой теории для нашей проблемы наиболее важны следующие:

• современная модель производства в обрабатывающей промышленности опирается на значительные комплементарные эффекты между организационными практиками в самых разных областях;

• комплементарные эффекты возникают не между «компьютерным капиталом», «организационным капиталом» и «человеческим капиталом» вообще, а между конкретными ИТ-сервисами, организационными практиками и компетентностями сотрудников;

• наличие комплементарных эффектов требует комплексного внедрения определенного набора практик, а не улучшений в отдельных областях;

• очевидные трудности этого процесса ведут к значительному разбросу результатов отдельных фирм.

Хотя предложенная авторами модель организации относится исключительно или преимущественно к обрабатывающей промышленности, эти общие выводы применимы к самым разным

областям, в том числе и к высшему образованию.

Исходя из этих положений, анализ комплементарных взаимосвязей становится ключевой проблемой изменений в организации любой сферы деятельности, в том числе и в вузе. Первым инструментом такого анализа стала матрица изменений, предложенная в [7]. Суть матрицы изменений - в совместном описании исходных и целевых организационных практик с учетом комплементарных взаимосвязей тех и других (Рис.1).

Рис.1. Общая схема матрицы изменений

Матрица изменений состоит из двух таблиц, наложенных друг на друга. Каждая состоит из прямоугольной части - списка организационных практик и треугольной, содержащей данные о взаимосвязях между практиками. Знак «+» в ячейках треугольника означает комплементарность двух практик, знак «-» - что эти практики выступают по отношению друг к другу как субституты. Горизонтальная таблица описывает существующие практики (на Рис.1 - is"), вертикальная - практики, внедряемые в ходе проекта (на Рис.1 - Чо Ье"). Данные о комплементарности организационных практик заполняются на основе экспертных оценок сотрудников организации. Нижняя строка описывает важность внедряемых практик по шкале Ликерта (от -2 - очень мешает до +2 - очень важна). Оценки в этой нижней строке также получаются на основе опроса экспертов. Наконец, прямоугольник на пересечении двух таблиц описывает сочетаемость существующих и внедряемых практик и, соответственно, трудности перехода от «как есть» к «как будет». Содержание этих понятий будут рассмотрены в ходе построения матрицы изменений для вуза в следующем параграфе.

В дальнейшем, на основании целого ряда эмпирических исследований, в [8] был выявлен набор организационных практик, комплементарных ИТ, который сегодня рассматривается как наиболее общий и широко применимый:

1. Переход от аналоговых процессов к цифровым, безбумажным процессам.

2. Открытый доступ сотрудников к информации.

3. Расширение полномочий работников и их права принимать самостоятельные решения - «Информация не имеет экономической ценности, если она не изменяет решения».

4. Прямое измерение производительности сотрудников и построение систем стимулирования на основе измеренной таким образом производительности.

5. Инвестиции в корпоративную культуру, прежде всего, в создание новых норм, сплачивающих организацию в её новом, «цифровом» варианте.

6. Изменение требований к нанимаемым сотрудникам - «увеличение производительности с использованием технологии есть функция от качества людей, её использующих».

7. Вложения в человеческий капитал - «цифровая организация предоставляет своим сотрудникам значительно более масштабное обучение».

В заключительном параграфе статьи мы рассмотрим применимость данного набора практик в вузе и возможные направления реализации отдельных практик.

Образовательный процесс российского вуза как система организационных практик

Данный анализ основан на материале трех ведущих московских вузов. Автор не утверждает, что подобные практики в неизменном виде присутствуют во всех вузах России. Тем не менее, сходство данных практик во всех трех рассмотренных вузах позволяет считать их достаточно распространенными, а выводы из проведенного анализа - достаточно общими. Предметом анализа будут организационные практики и компетенции сотрудников в образовательном процессе вуза Управление вузом будет рассмотрено в той мере, в какой оно непосредственно влияет на образовательный процесс.

Среди типичных организационных практик образовательного процесса, влияющих на результативность ИТ, следует выделить следующие: 11. Ограниченное применение информационных технологий в изучении предметной области. Использование современных ИТ в изучении профильных предметов вуза остается исключительной прерогативой преподавателей, единых стандартов и требований, хотя бы на уровне отдельных дисциплин, выявлено не было. Большинство преподавателей слабо ориентируются в возможностях ИТ в их предметной области и

используют ИТ в крайне ограниченном объеме. В частности, в двух из трех вузов по меньшей мере значительная часть преподавателей не использовала компьютеры в такой дисциплине, как статистика.

12. Оплата труда преподавателей, исходя из «горловой нагрузки», т.е. читаемых лекций и семинаров. В результате создание сложного учебного контента, в частности, дистанционного, не только требует значительных усилий, не влияющих на оплату труда преподавателя, но в большинстве случаев представляет собой прямой вычет из «горловой нагрузки» и, следовательно, из оплаты преподавателя.

13. Вся документация по учебному процессу ведется исключительно в письменной форме (ведомости и зачетки). Для сравнения, в американских университетах распространено проставление оценок студентам непосредственно в информационной системе университета. Именно оценка в информационной системе остается основной, любые бумажные документы распечатываются из системы.

Ориентация на тршцшакные_т*хнологш1 образования_

Могивапия по объему горло вой ниртлки Ншьая квалификапия преподавателей в области ИТ

Проставление опенок в бумажной форт_

Преподавание предметной области с одорониа 1ГГ_

Испотаасвд» ра'-виюгв an«, трудного контент*_

Стандарты использования ИТ в предметной области LINÍS иуврешенжи стбордгориым оборудованием Компьютерное моделирование зкспериментов Опенки на основе объективвш критериев

Рис. 2. Текущие организационные практики типичного вуза в образовательном процессе

В то же время, исходя из принципов [В] и ряда современных работ по электронному обучению, например, [9], [10], [11], [12] можно выделить следующие принципы современного обучения, совмещающего электронные и традиционные технологии (далее - модель Blended Education, т.е. смешанного образования):

1. Преподавание предметной области с опорой на ИТ, в том числе дистанционными методами;

2. Использование в учебном процессе развитого электронного контента, включающего разнообразные активные формы обучения;

3. В естественных науках - активное использование LIMS (Laboratory Information Management System - система управления информацией лаборатории) и компьютерного моделирования экспериментов;

4. Выставление оценок по объективным критериям, включающим результаты студента в лабораторных работах, практических заданиях и самостоятельных исследованиях.

Исходя из этого, можно построить частичную матрицу изменений в виде описания практик «как есть» (Рис.2).

На схеме можно видеть два четких кластера, практически несовместимых между собой. С одной стороны, это существующие организационные практики:

1. Ориентация на традиционные технологии образования, комплементарная мотивации по объему горловой нагрузки, низкой квалификации преподавателей в области ИТ и проставлению оценок в бумажной форме;

2. Низкая квалификация преподавателей в области ИТ, комплементарная мотивации по объему горловой нагрузки и проставлению оценок в бумажной форме.

Сходным образом оказываются комплементарны между собой принципы модели Blended Education, перечисленные выше. Основная проблема в том, что эти две системы, каждая из которых весьма устойчива, крайне плохо совместимы между собой. Прежде всего, ориентация на традиционные технологии и низкая квалификация преподавателей в области ИТ противоречат стандартизации использования ИТ в профильных дисциплинах вуза. Большая часть преподавателей, вероятнее всего, не сможет соответствовать передовым стандартам, а важность самих стандартов в этих условиях недооценивается. Эти же факторы очевидным образом противоречат созданию и использованию развитого электронного контента. В данную проблему свой вклад носит и неадекватная мотивация, прямо противоположная современной тенденции переноса большой части образовательного контента в электронный, часто - в дистанционный вид. В естественнонаучных дисциплинах эти же факторы препятствуют компьютеризации лабораторного оборудования (системы LIMS) и компьютерному моделированию экспериментов. Наконец, традиционный учебный контент ограничивает возможности оценки практических навыков студентов, что снижает объективность оценки. Оценка студента в информационной системе, автоматически формируемая на основе разнообразных заданий, представляется значительно более объективной.

Таким образом, в образовательном процессе сложившаяся система организационных практик, не затронутая до сих пор реформой образования, является основным тормозом результативности новых образовательных технологий.

Альтернативная модель образовательного процесса В настоящем параграфе будет рассмотрена альтернативная модель организации учебного процесса, позволяющая использовать современные технологии. Предлагаемые организационные практики основаны на анализе литературы, а также трех кейсов: двух ведущих российского вузов и одного американского университета. Среди препятствий к использованию электронных образовательных технологий можно выделить три важнейших:

1. Отсутствие материальных стимулов к созданию электронного контента;

2. Недостаток знаний в области электронных образовательных технологий;

3. Отсутствие технической квалификации, необходимой для ряда работ

раёотпо Е-курсам в нагрузку преподавателя_

Обучение использованию 1ГТ б предметной ибдэстн Обучение созданию развитого зпеотронного контента

Тетнте^кад поддерга работ по Е-курсам_

Преподавание предметной^ области с одну ой ва 1ГТ_

Использование ра^погодгсектровного контента_

Стандарты ИСПОЛЬЗОВАНИЯ 1ГГв пргднетыои й&ТасТи иМЬ б упрапленни лабораторным оборудованием Компьютерное моделирование зтврныгкюЕ Опенки на освой объективных критгрнев Рис. 3. Матрица изменений для практик "как будет" в образовательном процессе

Преодоление некоторых из этих препятствий описано в [13]. Прежде всего, следует отметить создание специализированного Центра научно-образовательных информационных ресурсов (ЦНОИР), осуществляющего координацию всех технических работ в области системы дистанционного обучения (СДО) Moodle, принятой в данном вузе в качестве стандарта. В ЦНОИР также сосредоточена деятельность по обучению преподавателей работе в СДО. Тем самым компенсируются два препятствия из трех, связанных с недостатком знаний и технической квалификации. К сожалению, в данной работе не описана система мотивации преподавателей на разработку электронного контента.

Решение этой проблемы предложено в [14]. Было предложено рассчитывать для преподавателей не только учебную, но и учебно-методическую нагрузку, которые являются равноправными составными частями нагрузки преподавателя. Более того, в штате вуза предусмотрены ставки профессорско-преподавательского состава (ППС) по разработке учебно-методических комплексов, ориентированные именно на такие работы.

Сходный опыт автор обнаружил в американском университете, где он проводил интервью с сотрудниками, занимающимися СДО. В нем тоже соответствующие работы были централизованы, проводилось обучение преподавателей и техническая поддержка разработки и эксплуатации электронного контента, переориентация системы учета нагрузки с «горловой» нагрузки на разработку учебного контента. Таким образом, есть основания считать, что в данной области передовые российские вузы следуют в русле мировых тенденций.

Как видно на рис.3, предложенные меры устраняют противоречие

между современными образовательными технологиями и организационными практиками вуза. Что особенно важно, эти решения предложены для российских условий и, в частности, для российского законодательства.

Новые требования к ИТ-инфраструктуре

Наконец, важный компонент необходимых организационных изменений - развитие соответствующей инфраструктуры, прежде всего, в области ИТ. Такое развитие может проводиться как собственными силами (см., например, [13]), так и силами внешнего провайдера, привлекаемого на условиях аутсорсинга. К сожалению, этот вариант обычно требует больших финансовых затрат, поэтому крайне редко применяется в российских вузах.

В области развития инфраструктур можно выделить две проблемы. Первая - обеспечение надежной работы всей ИТ-инфраструктуры, обеспечивающей ИТ-сервисы, критичные для деятельности вуза. Речь идет об образовательных, научных и управленческих сервисах, по крайней мере, об их части. Как было показано еще в [16], чем глубже вовлечены ИТ-сервисы в основную деятельность организации, тем более высокие требования предъявляются к соответствующей ИТ-инфраструктуре и тем выше стоимость владения последней. Эти процессы необходимо отслеживать и своевременно реагировать на них, в противном случае сбои в работе ИТ-сервисов могут непосредственно сказываться на качестве образовательной и научной деятельности вуза.

Второй проблемой становится развитие специализированных сервисов, прежде всего, образовательных. Эти сервисы в значительной мере специфичны для каждого вуза, вследствие чего не могут быть приобретены на стороне. Вуз должен создавать их самостоятельно, по крайней мере, частично. Это требует взаимодействия преподавателей-предметников и специалистов в области ИТ. Важно отметить, что речь и в этом случае идет о проектной деятельности, которая сегодня не является сильной стороной многих российских вузов. Тем не менее, развитие подобных проектов совершенно необходимо для модернизации вуза.

Последовательное решение этих проблем позволит избежать превращения ИТ-инфраструктуры в «узкое место», препятствующее развитию вуза.

Заключение

В настоящей работе было проведено исследование организационных практик современного российского вуза и возможность их изменения для повышения результативности последнего. Следует отметить, что эти изменения в целом лежат в русле организационных практик, намеченных в зарубежных работах (Табл.1)

№ «Столп производительности» Содержание в вузе

1 Переход от аналоговых процессов к цифровым, т.е. безбумажным Переход к электронным технологиям обучения

2 Открытый доступ сотрудников к информации Портал и другие информационные ресурсы, обеспечивающие доступ студентов, преподавателей и сотрудников к электронному контенту, проектным материалам и внешней информации

3 Расширение полномочий работников и их права принимать самостоятельные решения Расширение возможностей проектной деятельности, как в образовательном процессе, так и в научных исследований, что повышает роль инициативы преподавателей и студентов

4 Прямое измерение производительности сотрудников Фиксация результатов образовательной и научной деятельности в виде доступных для анализа материалов

5 Инвестиции в корпоративную культуру Изменение отношения сотрудников к новым технологиям в области ИТ и образования как такового

6 Изменение требований к нанимаемым сотрудникам Повышение требований к компьютерной грамотности, способностей к командной работе и мобильности сотрудников

7 Вложения в человеческий капитал Обучение преподавателей и сотрудников использованию ИТ, разработке контента, составлению заявок на гранты и т.д.

В то же время, внедрение таких практик представляет собой

отдельную проблему. Поскольку организационные изменения необходимо проводить в тесной связи с внедрением современных ИТ, процесс внедрения выходит за рамки данной работы. Он является предметом отдельного исследования, проводимого в настоящее время.

Литература

1. Федеральная целевая программа развития образования на 2011-2015 гг., доступна по адресу URL: http://www.fcpro.ru/the-concept-of-the, дата обращения 12 мая 2013 г.

2. Бутакова М. М., Мамченко О. П., Мищенко В. В., Соколова О. Н. Проблемы управления в системе высшего профессионального образования при формировании инновационной модели экономики // Успехи современного естествознания. 2007. № 4. - С.22-88.

3. Государственная программа Российской федерации «Развитие образования» на 2013-2020 гг., доступна по адресу URL: http://xn--80abucjiibhv9a.xn--p1ai/%D0%B4%D0%BE%D0%BA %D1%83%D0%BC%D0%B5%D0%BD

iНе можете найти то, что вам нужно? Попробуйте сервис подбора литературы.

%D1%82%D1%8B/3409/%D1%84%D0%B0%D0%B9%D0%BB/2228/13.05.15-%D0%93%D0%BE%D1%81%D0%BF%D1%80%D0%BE%D0%B3%D1%80%D0%B0%D0%BC

%D0%BC%D0%B0-

%D0%A0%D0%B0%D0%B7%D0%B2%D0%B8%D1%82%D0%B8%D0%B5_%D0%BE %D0%B1%D1%80%D0%B0%D0%B7%D0%BE%D0%B2%D0%B0%D0%BD %D0%B8%D1%8F_2013-2020.pdf , дата обращения 13 мая 2013 г.

4. David P., The Dynamo and the Computer: An Historical Perspective to the Modern Productivity Paradox // American Economic Review 1990. Vol. 80, № 2. - P.355-381.

5. Bresnahan T. Prospects for the Information-Technology-Led Productivity Surge // Innovation Policy and the Economy 2002. Vol. 2. - P.135-161.

6. Milgrom P., Roberts J. The Economics of Modern Manufacturing: Technology, Strategy and Organization // American Economic Review 1990. Vol.80, №3. - P.511-528.

7. Brynjolfsson E., Renshaw A., Van Alstyne M. The Matrix of Change // Sloan Management Review 1997. Vol. 38, № 2. - P.37-54.

8. Brynjolfsson E. VII Pillars of Productivity // Optimize. Vol. 22 (May 2005).

9. Vaira M. Globalization and higher education organizational change: A framework for analysis // Higher Education 2004. Vol. 48, № 4. - P.483-510.

10. Marginson S. Dynamics of national and global competition in higher education // Higher Education 2006. Vol. 52, № 1. P.1-39.

11. Kesim E. The Economic Contributions of Developing e-Learning Technologies from the Perspective of Educational Organizations // Procedia - Social and Behavioral Sciences 2012. Vol. 47. - P.2070-2074.

12. Eyring H., Christensen C. // Changing the DNA of Higher Education. American Council on Education. URL: http://www.acenet.edu/news-room/Documents/Changing-the-DNA-of-Higher-Ed.pdf, дата обращения 15 мая 2013 г.

13. В. Н.Устюгова, Р. А.Валитов, И. С.Ермолаев Особенности внедрения и эксплуатации системы дистанционного обучения в Татарском государственном гуманитарно-педагогическом университете // Международный журнал «Образовательные технологии и общество (Educational Technologies & Society)» - 2011 - V. 14 -N 3. - С.311-336. ISSN 1436-4522. URL: http://ifets.ieee.org/russian/periodical/journal.html

14. Карпенко М. П., Семенова Т. Ю., Сечина А. В., Кузина Т. С. Особенности расчета численности профессорско-преподавательского состава при реализации информационно-коммуникационных дистанционных образовательных технологий // Инновации в образовании 2010. № 3. - С.17-38.

15. Альтбах А., Райсберг Л., Юдкевич М., Андрущака Г., Пачеко И. (ред.). Как платят профессорам? Глобальное сравнение систем вознаграждения и контрактов. Сборник: М.: Издательский дом высшей школы экономики, 2012. -

16. Скрипкин К.Г., Экономическая эффективность информационных систем // М.: ДМК-Пресс, 2002. - 256 с.

i Надоели баннеры? Вы всегда можете отключить рекламу.