Научная и практическая эффективность исследования

Тема 16. Научная и практическая эффективность исследования

16.1. Понятие эффективности исследования. Исследовательский потенциал управления.

16.2. Научная и практическая эффективность исследования.

16.3. Параметры эффективности исследования.

16.4. Роль оценивания в исследовании систем управления.

16.5. Принципы оценивания исследования систем управления.

16.6. Виды оценки параметров управления.

16.1. Понятие эффективности исследования. Исследовательский потенциал управления.

Эффективность исследования — это определение или нахождение такого варианта проведения исследования, который кратчайшим путем ведет к успеху. Но это определение можно дополнить более точным.

Эффективность исследования - это одна из его характеристик, которая показывает как соотносятся затраты усилий (или ресурсов) на его проведение и результат (или степень достижения цели).

Все факторы, определяющие эффективность исследования, можно рассмотреть в двух группах: факторы исследовательского потенциала управления и принципы его использования.

Исследовательский потенциал управления.

Понятие исследовательского потенциала управления отражает возможности использования ресурсов и достижения поставленных целей. Ведь наличие необходимых ресурсов еще не ведет автоматически к эффективности. Использование ресурсов зависит и от их структуры, доступности, цели, по которой используются ресурсы, мотивации их рационального использования и пр. Все это в совокупности характеризует понятие исследовательского потенциала. Его величина и качество, его реализация также определяют достижение эффективности.
Все факторы, характеризующие исследовательский потенциал управления, можно представить по трем группам: факторы методологической готовности, факторы наличия и структуры ресурсов и факторы организационных возможностей.

Методологическая готовность проявляется в наличии цели и миссии исследования. Здесь большое значение имеют обоснованность цели, научный подход к ее формулированию и постановке, понимание и приятие цели исследовательской группой или вообще всем коллективом фирмы, интеграционными свойствами цели.

Миссия исследования рассматривается как доминанта его проведения, обеспечивающая последовательное движение к цели. Она помогает выбрать ограничения в движении к цели и приоритеты на каждом из этапов этого движения. Миссия должна отвечать на вопрос: зачем проводиться исследования, позволяет ли реальность достичь цель?

Методологическая готовность определяется также концепцией развития фирмы, разработанной по цели и миссии. Это комплекс положений, отражающих тенденции развития. Концепция теснейшим образом связана с целью и миссией, ибо включает в себя и то и другое, кроме того характеризует их конкретизацию, определяет ключевые положения программы исследования.

Большое значение имеет также опыт исследования. Систематическое проведение исследовательской работы способствует накоплению такого опыта и повышает потенциал эффективности исследовательской деятельности. Опыт экономит время, оберегает от ошибок и облегчает многие операции.

Многие виды исследования зависят от информационной базы его проведения. Чтобы увидеть динамику процессов развития, проводить сравнительный анализ, определять тенденции, выбирать наиболее удачные решения, надо иметь необходимое количество накопленной информации. Эта потребность стимулирует систематическое проведение исследования.
Невозможно провести исследование, не пользуясь той или иной методикой моделирования и оценок процессов или явлений. Но методики бывают различными. Какими из них обладают и пользуются исследователи или менеджер, как разрабатываются собственные методики это тоже характеризует методологический потенциал исследования.

Наконец, следует указать и на возможности использования необходимых методов исследования. Эти возможности определяются их доступностью, наличием соответствующих технических средств, квалификацией исследователей.

Факторы методологической готовности действуют не только в определенном наборе и совокупности, но и в их соотношении и системности.
Следующая группа факторов исследовательского потенциала — наличие и использование ресурсов.

Любое исследование нуждается в ресурсах. Необходимы ресурсы персонала, экономические, материально-технические, информационные, ресурсы времени. Можно также говорить и о ресурсах фактологических. Они отражают наличие необходимых фактов, возможностей их систематизации.
Далее более подробно будет рассмотрено фактологическое обеспечение исследования и его отличие от информационного. Здесь лишь достаточно сказать, что информационные и фактологические ресурсы являются взаимодополняющими.

В исследовании необходимы различные ресурсы и в определенном их соотношении. Ресурсы могут и должны быть взаимозаменяемыми, но до определенных пределов.

Исследовательский потенциал управления включает в себя и организационные возможности его проведения. Они проявляются в наличии необходимой организационной культуры и типа организации. Важную роль также играет позитивный и негативный организационный опыт, позволяющий успешно выбрать тип организации и организовать исследование.

Всякая организация имеет определенную инфраструктуру, которая также влияет на проведение исследования.

Следует здесь назвать и такой фактор, как интеллектуальный потенциал менеджера или исследователя. Его можно отнести и к ресурсам и к методологической готовности, но он также играет важную роль в реализации организационных возможностей. Организация исследования — это организация интеллектуальной деятельности, и она определяется в значительной мере интеллектуальным потенциалом исследователя.
В дальнейшем более подробно будут рассмотрены факторы оценивания, фактологического обеспечения исследования, мышления менеджера-исследователя, креативного образования менеджера, которое и определяет его интеллектуальный потенциал.

16.2. Научная и практическая эффективность исследования.

Научная эффективность ис­следования определяется приростом знаний в определенной облас­ти, имевшем место в результате исследования. Она может находить выражение в числе полученных в результате исследования патентов, авторских свидетельств, публикаций, рейтингах цитирования и др.

Для характеристики прикладных исследований чаще применимо понятие практической эффективности исследования.

Научная эффек­тивность исследования превращается в практическую в процессе вне­дрения научных знаний, полученных при исследованиях. Внедрение результатов исследования - важный элемент развития общества, орга­низационно-производственной системы.

В рыночной экономике основным двигателем прикладных иссле­дований (а именно к таким относится большинство проблем исследо­вания систем управления) является практическая проблема и необхо­димость ее решения на уровне, обеспечивающем конкурентоспособ­ность.

Эффективное исследование - это исследование, достигаю­щее поставленные цели за определенное время при том, что расход ресурсов, риски не превышают плановые объемы.

В более широком смысле эффективность исследования - это одна из его характеристик, которая показывает как соотносятся затраты уси­лий (или ресурсов) на его проведение и результат (или степень дости­жения цели).
Эффективность исследования зависит от факторов исследователь­ского потенциала управления. Исследовательский потенциал отражает возможности использования ресурсов и степень достижения постав­ленной цели.

Факторы исследовательского потенциала представлены тремя группами:

1)  методология;

2)  ресурсы;

3)  организационные возможности.

Методологическая готовность исследовательского потенциала про­является в наличии цели и миссии исследования, наличия концепций развития фирмы, опыта исследований и возможностей использования необходимых методов исследования, соответствующих технических средств.

Фактор ресурсов заключается в наличии необходимых ресурсов персонала, экономических, материально-технических, информационных, ресурсов времени.

Исследовательский потенциал управления включает в себя орга­низационные возможности его проведения. Они проявляются в нали­чии организационной культуры и типа организации, интеллектуальном потенциале исследователей систем управления.

Эффективность исследования зависит от принципов его построе­ния и осуществления.

Среди принципов следует назвать, прежде все­го, принцип объективности. Согласно этому принципу, в любом иссле­довании необходимо искать объективные факторы, связи, зависимос­ти. Это определяет успех исследования. Но использование данного принципа вовсе не означает, что надо исключить все субъективное. Многое в исследовании определяется интуицией, ее необъяснимым влиянием на поведение человека, на поиск истины. Принцип объектив­ности это принцип соизмерения, сопоставления факторов с объектив­ной реальностью, это возвращение к объективному, в конечном резуль­тате размышлений, анализа идей, мыслей, позиций.

Принцип системности - это принцип поиска и определения свя­зей, целостности, сопоставления свойств, нахождения границ внутрен­ней и внешней среды. Этот принцип позволяет концентрировать ис­следования на главном, оценивать связи, разграничивать их на вне­шние и внутренние, понимать свойство, как проявление целого в од­ном случае и как проявление отдельного - в другом.

Принцип последовательности требует проведения исследования по определенной, заранее разработанной технологии. В использова­нии этого принципа большое значение имеет ответ на вопрос: с чего начать и как двигаться к результату?

Принцип целеустремленности означает, что любое исследование должно иметь вполне определенную цель. Исследование - это не толь­ко разрешение возникшей проблемы, но и определение, к какой цели может вести это разрешение, в какой мере оно способствует достиже­нию цели. Цель определяет выбор решений и последовательность их разработки, цель интегрирует деятельность в самых сложных ее вари­антах: многоаспектность, совместное исследование, разветвленность исследования, сложность проблемы и т. д.

Принцип свободы мышления определяет необходимость снятия ограничений в полете мысли, фантазии, воображения, идей.
Принцип управления мышлением предполагает, что мышление, как и всякий процесс, должно быть не спорадическим. Он ведет к эффективности исследования. Это может быть управление процессом индивидуального мышления или процессом групповой мыслительной деятельности.
Как и всякая деятельность, исследование строится на использование определенных ресурсов, величина и структура которых в значительной мере определяют его эффективность. Ресурсы нельзя использовать бездумно, но и стремясь получить необходимый результат, нельзя бездумно лграничивать исследования в необходимых ресурсах, отсюда возникает важный принцип гибкой экономии ресурсов. В некоторых исследованиях заранее очень трудно предусмотреть и рассчитать достаточно точно, сколько рессурсов понадобится для достижения необходимого результата. Поэтому расчет ресурсов надо делать с за­пасом, понимая, что и результат исследования не всегда достаточно предсказуем, иногда он может быть значительнее ожидаемого. Тогда и при перерасходовании ресурсов эффективность исследования будет все равно высокой.

Принцип качественной и количественной определенности исследования заключается в том, что, по возможности, исследования надо проводить, опираясь на количественные измерители параметров, по­казатели, но при этом не терять качество изучаемых явлений, т. е. сово­купность тех свойств, которые определяют их суть и особенности.

Принцип фактологического обеспечения исследования заключа­ется в том, что исследование необходимо строить на фактах и отбирать факты соответствующим образом. В этом основа и объективности ис­следования, и его успешности, а в конечном итоге и эффективности.

Принцип реализации креативного образования менеджера пред­полагает его оформление с помощью образовательных процессов, ко­торое закрепляется и проявляется в практической деятельности и раз­вивается в процессах исследования.

Принцип опоры на исследовательское мышление менеджера пред­полагает его развитие в практике управления и в проведении исследо­вания. Исследование преследует цель не только найти удачное реше­ние проблемы, но и научить менеджера мыслить эффективно, иссле­довательски, инновационно.

И еще один принцип следует добавить к этому перечню - прин­цип трудоемкости. Суть его заключается в том, что всякое исследова­ние должно быть рассчитано по трудоемкости его проведения. От это­го зависит и его организация, и рациональное использование всех ре­сурсов, а, следовательно, и эффективность.

При оценке эффективности исследования критерий эффектив­ности определяют как количественное отражение степени достиже­ния системой поставленных перед ней целей.

В управлении исследованиями удобней рассматривать критерий как правило выбора предпочтительного варианта решения из ряда аль­тернативных.

В соответствии с прогнозной эффективностью можно вы­делить следующие варианты решений по исследованию систем управ­ления:

1)  неэффективные, не позволяющие решить проблему;

2)  рациональные, т. е. позволяющие решить проблему;

3)  оптимальный вариант решения - вариант, позволяющий решить проблему исследования наилучшим в определенном критерием смысле образом построить наилучшую систему исследований в определенномкритерием смысле. Если неэффективных и рациональных ре­шений может быть много, то оптимальное решение одно.

При исследовании сложной системы управления в силу ее много­гранности критерий, как правило, является вектором. При этом задача оптимизации сложной системы является многокритериальной.

Критерий включает в себя в качестве компонентов параметры эффективности (эффекта).

16.3. Параметры эффективности исследования.

Параметр эффективности исследования - относительные значения наиболее важных параметров системы и(или) исследований, а также отношения таких параметров, которые позволяют оценить каче­ство решения проблемы и достижение, поставленных перед системой целей. Например, параметром эффективности будет оценка соотно­шения одного и того же параметра (пусть это будет расход топлива) до и после внедрения результатов исследования. Они отражают степень прогресса в результате исследования и (или) эффективность расхода ресурсов, в частности денежных средств, в процессе исследований. Они позволяют выбирать предпочтительные варианты изменений в объекте или самого процесса исследования.

В качестве параметров эффекта исследования будем называть абсолютные значения изменений важнейших параметров, например, объем сэкономленного топлива в литрах, тоннах, рублях и т п.

При формировании параметров эффективности (или эффекта) при исследовании систем управления организационно-производственной системы наиболее часто используют; стоимость и (или) время созда­ния; доход, прибыль (убытки) за фиксированный период и т. д.

При выборе состава параметров эффекта учитывают как то, ради чего создается система, так и цели исследования. Часто из двух ис­следовательских процессов, относящихся к одним и тем же объектам, и решающих одну и ту же задачу при равных ресурсах, более эффектив­ным считают тот, который при прочих равных условиях приводит к дос­тижению цели за более короткий интервал времени.

16.4. Роль оценивания в исследовании систем управления.

Одной из сложных и важных проблем исследования управления является оценка ситуаций, состояния, изменений, тенденций и пр.

Оценка — это установление наличия и степени проявления той или иной характеристики системы управления. Средством оценки является показатель. На оценках построены анализ, нормативное регулирование функционирования и развития, поиск и определение тенденций, изучение особенностей и существенных черт того или иного явления. Без оценок невозможны разработка и принятие управленческих решений, в том числе и решений по совершенствованию управления. Чем более точную оценку может провести менеджер или исследователь, тем больше вероятность успешного, рационального решения.

Оценки могут быть различными. Можно выделить оценки программно-тестовые и экспертные. Первые очень широко используются в настоящее время, когда существует компьютерная техника, открывающая в этом отношении очень большие возможности. Но многие характеристики можно оценить только на основе работы группы экспертов. Очень эффективно сочетание первого и второго.

Оценки также разделяются на коллективные и индивидуальные. В практике исследований используются как точные, так и приблизительные оценки. По процессным признакам существуют оценки эпизодические и периодические; по масштабам оцениваемых явлений выделяются оценки общие и локальные; по организации и методикам проведения существуют простые и сложные оценки. Последние всегда построены на специальных расчетах, агрегировании информации, построении синтетических показателей.

Выбор вида оценки имеет большое значение в достижении успеха исследования.

Для оценки необходимо:

· выделение объекта и предмета оценки;

· установление критериев оценки и шкалы измерения;

· построение процедуры и системы оценки;

· выбор средств и методов оценки;

· использование результатов оценки.

16.5. Принципы оценивания исследования систем управления.

Существуют определенные принципы оценивания, благодаря которым возможны адекватная оценка реальной действительности, глубокое понимание ситуаций, проблем, результатов или тенденций.

1.  Принцип научности. В основе оценки всегда находятся методики ее проведения или осуществления. А они могут быть разными: можно оценивать на основе здравого смысла, богатого опыта, но можно строить оценку и на использования научных методов, математического моделирования, там, где это возможно. В этом случае и оценивать должен тот, кто знает предмет оценки, владеет ее методикой, способен подойти к ней с объективных позиций.

2.  Важным дополнением этого принципа является также принцип целевого назначения. Оценка может проводиться вообще или быть ориентирована на некоторые предположительные результаты, но может иметь и ясную, конкретную цель. Можно оценивать, скажем, в целях стимулирования деятельности, группирования работников, нормирования работы, распределения финансовых средств и т. д. Целью оценки может быть и поиск путей развития, установление закономерностей, контроль тенденций.

3.  Принцип разнообразия, полноты и системности. Очень часто подлежат оценке только те характеристики, которые известны, доступны, понятны, измеряемы. В результате такого подхода получается деформированная оценка, которая не дает полной картины события или ситуации, явления или проблемы. При проведении оценки очень важно учитывать связь характеристик, стремиться к их полноте, видеть разнообразие и достаточность.

4.  Принцип критериальной определенности. Можно оценивать грубо, приблизительно, предварительно, но не бывает оценки без критерия. Критерий оценки — это точка отсчета, шкала измерений, это констатация специфики характеристики, подлежащей оцениванию. Чем точнее установлен критерий, тем объективнее и значительнее оценка. При проведении оценки недопустимо произвольное изменение критерия.

5.  Принцип количественной определенности оценки. Оценивать можно в параметрах констатации качества, описания особенностей, но оценка может проводиться в количественных показателях, которые дают точную информацию и позволяют эффективнее оперировать оценками: сравнивать, синтезировать, улавливать изменения. В исследованиях систем управления необходимо, по возможности, стремиться к количественным оценкам. Но при этом нельзя отрицать, что в определенных обстоятельствах эвристические оценки могут быть богаче и полезнее. Количественные измерения нередко обедняют ситуацию.

6.  Принцип сочетания оценки состояния и изменений. Чаще всего оценка является фиксацией состояния той или иной характеристики, фотографией остановившегося мгновения, констатацией степени проявления характеристики. Но в исследовании наиболее богатой информацией обладают оценки динамики, способные показать тенденции изменений, позволяющие предвидеть последствия. В конечном итоге необходимо сочетание того и другого.

7.  Но оценка — это не просто установление и измерение тех или иных характеристик, это, помимо прочего, и деятельность исследователя или группы исследователей, работа экспертов, математиков, программистов. И это обстоятельство не может не быть отражено в принципах оценки.

8.  Принцип независимости заключается в том, что оценка должна быть отделена, насколько это возможно, от личностных отношений, служебной зависимости, амбиций и самолюбия. Она должна быть защищена от влияния заинтересованных лиц, доброжелателей или недоброжелателей.
Это достигается как посредством методики оценки, так и соответствующей организацией ее проведения.

16.6. Виды оценки параметров управления.

Оценки могут быть различными. В каждом конкретном случае исследователю приходится выбирать тот вид, который может быть наиболее приемлемым и эффективном. Этот выбор определяется как характером исследуемых проблем, так и возможностями оценивания. Специфика оценивания проблем управления заключается в том, что все они в конечном итоге связаны с деятельностью человека и его человеческими качествами. Многие параметры управления невозможно измерить достаточно точно, а некоторые даже вообще выделить и каким-либо образом отграничить. Поэтому многие оценки необходимо строить на статистическом анализе, либо использовать социометрические методы тесты и экспертные оценки.

1.  По области и масштабам оценивания тех или иных ситуаций можно выделить оценки общие и локальные. Так проявляются и проблемы управления. Одни из них имеют общий характер, другие ограничены какой-либо областью деятельности. Методология исследования должна предусматривать различие этих видов.

2.  Оценки могут быть простыми и сложными, в зависимости от того, предполагают ли они множество расчетов или построены на измерении первичной информации. В сложных оценках нередко случается нарушение валидности показателей, смещение акцентов актуальности и важности, потеря информации. Необходимо избегать таких случаев при конструировании показателей.

3. В оценках большую роль играет момент и продолжительность их проведения. По этому критерию можно выделить оценки эпизодические и периодические. Первые вызываются необходимостью конкретной ситуации, возникновением и обострением новых проблем, вторые систематическим исследованием управления, мониторингом качества.

4.  Всякая оценка отражает потребность поиска и решения проблем и требует затрат определенных ресурсов. Поэтому можно дифференцировать оценки по критерию точности измерения параметров. Существуют оценки точные и приблизительные (грубые, предварительные, ориентировочные, порядковые). Вторая группа способствует экономии ресурсов при. поиске ведущих проблем. Но глубокий анализ и ответственные исследования необходимо строить на предельно строгих и точных оценках.

5.  По организации оценивания можно выделить оценки коллективные и индивидуальные. Часто используется их сравнительный анализ. При этом необходимо учитывать параметры и коллектива, и личности — опыт, образование, квалификация, мотивы, социальность и пр.

6.  Методика проведения оценки имеет ключевое значение в ее корректности. В исследовании управления часто используются два вида оценки — тестовая и экспертная. Не исключаются и их различные комбинации. Тестовая оценка может быть очень эффективной, но зависит от качества тестов, а успех экспертной оценки в значительной мере определяется принципами формирования экспертных групп и организации их работы.

7.  По получению информации и методике ее обработки можно выделить также статистическую и нестатистическую оценку. Искусство исследования, помимо всего прочего проявляется и в выборе вида оценок в конкретных обстоятельствах.