Инструментальные средства контроля в организационно-экономическом управлении тема диссертации по экономике, полный текст автореферата

Диссертация: содержание автор диссертационного исследования: кандидата экономических наук, Кижнер, Анна Иосифовна

Введение

Глава 1. Анализ современных проблем контроля в системах организационно -экономического управления

1.1 Сущность познания и контрольных испытаний

1.2 Виды контроля в организационно-экономическом управлении

1.3 Методы контроля в организационно-экономическом управлении

Выводы по главе I

Глава 2. Исследование компьютерных систем контроля в организационно-экономических процессах

2.1. Основы и принципы компьютеризации контроля в организационно-экономических процессах

2.2. Концептуальные решения по технологии функционирования и организационная структура компьютерной системы контроля в организационно-экономических процессах

2.3. Методы оценки результатов компьютерного тестирования

Выводы по главе II

Глава 3. Организация функционирования компьютерной системы контроля в организационно-экономическом управлении

3.1. Функциональная структура тестирующих компьютерных систем

3.2. Пути совершенствования компьютерной системы контроля в организационно-экономических процессах

3.3. Эффективность компьютерной системы контроля

Выводы по главе III

Диссертация: введение по экономике, на тему "Инструментальные средства контроля в организационно-экономическом управлении"

В современных условиях России, характеризующихся рыночными особенностями развития экономики, финансов и бизнеса, ростом объема и качественными изменениями обрабатываемой информации, коренной трансформацией профессии экономиста, перед экономическими субъектами ставятся новые задачи, решение которых позволит им занять достойное место в рыночном пространстве. Специалисты, работающие в областях экономики, ныне должны обладать знаниями экономических законов, закономерностей, владеть методами, позволяющими управлять производством, проводить экономический анализ, вести бухгалтерский учет, заниматься менеджментом, контролем и аудитом, а также уметь использовать средства, предоставленные современными информационными технологиями в практической деятельности. Все это предъявляет высокие требования к уровню знаний специалистов и обусловливает необходимость постоянного систематического повышения и подтверждения квалификации, усвоения новых программ в связи с неустойчивой и меняющейся экономической ситуацией, а также обновляющейся информацией в сфере законодательства.

Осуществление поставленных задач в значительной мере связано с функциями организационно-экономического управления. Основой же достижения намеченных целей является наличие эффективной системы контроля. К тому же новый тип экономических отношений создает предпосылки для формирования современных подходов к выбору методов проведения различных видов контроля.

Успех любого процесса связан с правильно организованным контролем, что включает в себя верно выбранный метод, правильно расставленные временные точки, профессиональную квалификацию и объективность специалистов, осуществляющих контроль, достоверную информацию об объекте контроля, удачный выбор технических и программных средств, применяемых в случае автоматизированного контроля.

В условиях рыночной экономики обостряется кадровый вопрос. Удачное решение подбора и расстановки кадров - во многом залог успеха фирмы в рыночном пространстве. Сегодня достаточно очевидно возросшее значение контролирующих процессов в организационно-экономическом управлении и усиление роли компьютеризации в этих процессах. Одним из инструментов, используемых для обеспечения функций контроля, является направление, связанное с тестированием. Говоря об использовании метода тестирования для выполнения контрольных функций в экономике, особо следует остановиться на его применении при контроле, связанном с аудиторской деятельностью. Вопросам аудита, как одного из видов независимого контроля, в настоящее время уделяется повышенное внимание в связи с подъемом значимости его для отечественной рыночной экономики. Следует добавить, что вопросам применения компьютерного тестирования в ходе проведения аудита и контроля качества аудита бухгалтерской отчетности, а также для определения профессиональных качеств, необходимых современному экономисту, в литературе уделено недостаточно внимания.

По мнению проф. Аванесова B.C., многолетняя история развития тестирования в мире показала, что применение тестов благотворно влияет на качество образования; качество образования связано с качеством управления; качественное управление создает предпосылки для повышения качества жизни населения. Наиболее развитыми странами в отношении применения тестов считаются страны с высоким уровнем жизни населения: Нидерланды, США, Англия, Япония, Дания, Франция, Израиль, Финляндия, Канада, Австралия, Новая Зеландия и др.

В конце 70 годов прошлого столетия тестовый контроль в СССР после длительного застоя, начавшегося в 30-е годы, стал постепенно возрождаться. В эти годы в Московском экономико-статистическом институте (ныне Московском государственном университете экономики, статистики и информатики) МЭСИ при проведении вступительных экзаменов стали применять тестирование с помощью ЭВМ. В настоящее время в Вузе продолжается развитие направления, связанного с применением тестирования в системах образования, в том числе открытого. Среди вузов России, активно применяющих тестовый метод контроля знаний с применением вычислительной техники, можно назвать: Московский Государственный Университет им. Ломоносова (МГУ), Финансовую академию при Правительстве РФ, Московскую Государственную Текстильную Академию им. Косыгина (МГТА), Российскую Экономическую Академию им. Плеханова, Московский Университет потребительской кооперации, Пензенский технологический институт, Российско-американскую высшую школу управления, Архангельский государственный технический университет и многие другие.

За последние 10-15 лет проблема компьютерного контроля неоднократно обсуждалась на мировых, республиканских, межвузовских форумах (конференциях). Эти проблемы затрагивались в докторских и кандидатских диссертациях, монографиях и научных трудах доктора педагогических наук Ава-несова B.C., кандидата технических наук Хлебникова В.А., доктора технических наук Васильева В.И., доктора психологических наук Шмелева А.Г., кандидата педагогических наук Челышковой М.Б., кандидата физико-математических наук Татур А.О., доктора психологических наук Холодной М.А., академика РАО Беспалько В.П., доктора психологических наук Шадри-кова В.Д., кандидатов экономических наук Наруск А.Х., Мишенина Ю.Н. и др. Большой вклад в развитие тестологии как науки внесла американский психолог, профессор Анастази А. Однако, бурный прогресс в области аппаратного обеспечения компьютерных средств, программных систем, методологии проектирования контролирующих компьютерных систем требует проведения новых исследований, поиска новых методов решения.

Сказанное выше предопределило выбор темы диссертации, посвященной современным проблемам компьютеризации контрольных испытаний в сфере организационно-экономического управления.

Основной целью диссертационного исследования являются теоретическое обоснование и разработка подходов к выбору инструментальных средств контроля в организационно-экономическом управлении.

В соответствии с поставленной целью в диссертации сформулированы и решаются следующие основные задачи: определить место и роль контрольных испытаний в экономических областях познаний; провести анализ технических и программных средств, применяющихся для решения задач контроля в познавательных процессах; исследовать и критически оценить существующие компьютерные тестирующие системы и реализованные в них алгоритмы оценки; разработать алгоритмическую и математическую модели метода оценки результатов тестирования, учитывающих влияние различных факторов, определяющих знания; провести исследование эффективности применения компьютерной системы контроля.

Предметом исследования являются инструментальные средства контроля в процессах организационно-экономического управления.

Объектом исследования выступает система организационно-экономического управления.

В ходе исследования автором использованы материалы в областях экономического познания [25, 8, 10, 32, 64, 54, 99, 43, 33, 40], экономического управления [26, 22, 49, 74, 7, 56, 37, 96], аудита и контроля качества аудита бухгалтерской отчетности [19, 72, 20, 79, 94, 67, 41], в том числе с использованием компьютерной техники [59, 48, 77, 18], компьютерного тестирования [68, 3, 78], проанализирован ряд программных разработок в области компьютерного тестирования.

Практические эксперименты и внедрение проводились на базе Финансовой академии при Правительстве РФ. Основные положения диссертации прошли апробацию: на ежегодных Международных научно-методических конференциях, проводимых Финансовой академией в 1996-2001 г.г. на Научных сессиях МИФИ-98, МИФИ-2000, МИФИ-2001 на выставке «Информационные технологии в образовании» (Москва, ВВЦ, 28 мая - 2 июня 1999 г.) на выставке «Фондовый рынок 2001» (Москва, комплекс «Гостиный двор», 16-19 октября 2001 г.).

По проблеме исследования автором опубликовано 5 работ общим объемом 3,79 п.л.

В первой главе анализируются интеграционные процессы в научном познании, оцениваются методы научных экономических познаний.

Рассматривается вопрос применения вычислительной техники для решения задач, относящихся к области экономических знаний. Выделена общая компонента, присущая процессу познания разнообразных процессов - контрольные испытания. Систематизированы требования, предъявляемые к контролю, сформулированы критерии, обеспечивающие эффективность проведения контрольных испытаний.

Проведен систематизированный анализ видов контроля в процессах организационно-экономического управления. Акцентируется внимание на аудите, как одном из видов контроля состояния бухгалтерской отчетности. Рассмотрены возможности проведения аудита с использованием средств вычислительной техники. Приведены требования к программным продуктам, используемым для целей аудита.

Кроме того, в первой главе рассмотрены методы проведения контроля в процессах организационно-экономического управления. Особо выделен метод тестирования, как наиболее объективный с точки зрения оценки в ходе контроля. Дана классификация тестов по целям использования и сферам применения.

Вторая глава посвящена проблемам компьютеризации контроля в организационно-экономических процессах. Рассмотрена компьютерная система контроля с точки зрения технологии ее функционирования.

Организация и проведение контроля в процессах организационно-экономического управления рассмотрены на примере аудита бухгалтерской отчетности. Отдельное внимание уделено вопросам автоматизированного аудита, приведены доводы целесообразности применения компьютерных методов, одним из которых является использование компьютерных тестов. Приведена классификация тестовых заданий в зависимости от целей, преследуемых аудитором при проведении такого контроля. Использование автоматизированных методов предъявляет определенные требования к знаниям аудитора в области компьютерной техники, отраженные в стандартах аудиторской деятельности.

В зарубежной практике на протяжении многих лет большое значение придается вопросам контроля качества аудита. Сейчас это направление стало развиваться и в нашей стране. В работе приведены положения, закрепленные в законодательных документах, в том числе в правилах (стандартах) аудита, рассмотрены основные элементы контроля качества, показана необходимость прохождения аттестации на право заниматься аудиторской деятельностью как со стороны аудиторских фирм, так и аудиторов - непосредственных исполнителей процесса аудита. Сделан акцент на личностные и профессиональные качества, необходимые аудитору, и в связи с этим на необходимость выяснения и контроля этих качеств с помощью проведения процедуры тестирования.

Использование современных сетевых технологий в процессе ведения удаленного бухгалтерского учета, аудита, контроля знаний заставляет решать проблему информационной безопасности и законности проведения электронных операций. Во второй главе дан обзор современных средств защиты информации, рассмотрена проблема узаконивания электронной подписи за рубежом и в России.

Сделан обзор и дана сравнительная характеристика существующих тестирующих систем для определения профориентации, деловых качеств, наклонностей, способностей, а также систем, осуществляющих установление и подтверждение квалификации сотрудников финансовой сферы организационно-экономического управления при найме на работу. Рассмотрены основные научные методики оценки приведенных качеств и знаний, дано описание информационных баз различных систем.

Обращено внимание на сходства и различия указанных систем, отдельно выделены различия, связанные с интерфейсом, предоставленным пользователю. Приведена классификация тестирующих систем. Рассмотрены функциональные возможности каждой из указанных групп и очерчен круг их пользователей.

Во второй главе также рассмотрены алгоритмы оценки результатов компьютерного тестирования. Приведен алгоритм, основанный на полном соответствии эталона ответа и ответа испытуемого, и предложен алгоритм дифференцированной оценки в зависимости от количества выбранных правильных вариантов, а также от количества недостающих и лишних вариантов, данных испытуемым. Показаны достоинства и недостатки обоих вариантов. Приведены математические формулы расчета коэффициента знаний для дифференцированной оценки результатов тестирования. На основании работы математической модели расчета распределения коэффициента знаний в зависимости от ответов испытуемого, созданной автором диссертации, выведены закономерности изменения динамики этого коэффициента и даны рекомендации, относительно составления тестовых заданий и выбора области значений коэффициентов, которые можно отнести к положительным.

Третья глава посвящена рассмотрению вопросов функционирования существующих тестирующих компьютерных систем, а также определению перспектив развития и путей их совершенствования. Рассмотрены аспекты эффективности применения компьютерной системы контроля.

В главе подробно описана структура и технология функционирования тестирующей компьютерной системы «Академтест», создателем которой является автор диссертационной работы. Уделено внимание рассмотрению вопроса развития дистанционной формы обучения и контроля изученного, связанного с применением сетевых технологий. Указано на прогрессивность использования адаптивного алгоритма предъявления тестовых заданий в процессе тестирования.

Эффективность применения тестирования с целью проведения контроля в процессах организационно-экономического управления рассмотрена с точки зрения методологии, технологии, организации, технического и программного обеспечения, экономических затрат. и

В заключение диссертационной работы содержатся основные результаты, полученные автором в процессе проведенного исследования.

Научная новизна исследования состоит в разработке и научном обосновании организации и технологии контроля в организационно-экономическом управлении, основанного на использовании средств тестирования; формулировке системы требований к обеспечению качества контроля деятельности средствами тестирования; обобщении, систематизации и расширении представления о функциональных возможностях использования инструментальных средств тестирования в процессах организационно-экономического управления; разработке технологии формирования системы дифференцированных оценок профессиональной компетентности специалиста, и предложении методики их использования в процессе распределения функций и полномочий; выделении и обосновании факторов, оказывающих влияние на эффективность компьютерного тестирования и на этой основе разработке модели определения эффективности.

Научно-практическое применение положения диссертационной работы нашли в предложенной классификации тестирующих систем по целям использования и целям применения; разработке и внедрении компьютерной тестирующей системы «Академтест»; построении алгоритмической модели определения коэффициента знаний, основанной на учете ряда факторов.

Диссертация: заключение по теме "Математические и инструментальные методы экономики", Кижнер, Анна Иосифовна

Выводы по главе III

В третьей главе освещаются вопросы, связанные с функционированием существующих компьютерных систем, определением перспектив развития и путей их совершенствования, эффективностью применения компьютерной системы контроля. В главе подробно рассмотрена структура и технология функционирования тестирующей компьютерной системы «Академтест», разработанной автором диссертации; для групп пользователей системы определены их права.

По результатам анализа большого количества тестирующих систем выявлены показатели, обеспечивающие эффект от использования компьютерного тестирования. Это: доступность использования, простота управления, нетребовательность к техническим параметрам компьютерной техники. При создании системы «Академтест» использованы перечисленные требования, а также учтены требования, предъявляемые к созданию тестовых заданий, предусмотрена система администрирования, снабженная совокупностью паролей.

По результатам эксплуатации системы «Академтест» выявлен эффект, состоящий в том, что, во-первых, каждый испытуемый может проконтролировать свои знания самостоятельно в режиме самоконтроля, во-вторых, контроль можно осуществлять поэтапно по мере изучения материала, а также в виде сводного теста по всем пройденным темам, в-третьих, в случаях изменения содержания тестовых заданий, база знаний легко подвергается корректировке, в четвертых, система является универсальной с точки зрения многообразия областей применения, а также разных видов контроля - текущего, зачетного, экзаменационного.

В главе намечены пути совершенствования компьютерной системы контроля в организационно-экономическом управлении. Показано, что все чаще используется метод тестирования с применением компьютерных технологий. Обращено внимание на развитие сетевых телекоммуникационных технологий, в том числе технологий Интернет, для проведения тестирования. Рассмотрена дистанционная форма обучения и контроля. Проанализированы преимущества, присущие сетевым программным продуктам.

Для повышения достоверности и точности компьютерного тестирования рассмотрен адаптивный алгоритм предъявления тестовых заданий. Подобная модель тестирования довольно часто встречается среди существующих программных продуктов. Проанализированы разные алгоритмы реализации этой модели.

Эффективность применения тестирования с целью проведения контроля в процессах организационно-экономического управления рассмотрена с позиций методологии, технологии, организации, технического и программного обеспечения, экономических затрат.

Автором детально рассмотрены принципиальные аспекты экономической эффективности внедрения тестирующих компьютерных программ. Выполнен анализ затрат на проведение бланкового и компьютерного тестирования, при этом экономическая эффективность рассмотрена с точек зрения временных и денежных затрат. Разработаны модели расчета наиболее важных показателей.

Проведено сравнение затрат времени на тестирование в бланковой и компьютерной формах. Доказано, что на стоимость тестирования оказывают влияние множество факторов: количество участников тестирования, стоимость оплаты труда сотрудников, проводящих процесс, время, отведенное на сеанс тестирования, стоимость часа машинного времени, стоимость программной разработки, используемой для целей компьютерного тестирования, количество задействованных компьютеров.

Результаты математического эксперимента свидетельствуют, что компьютерное тестирование не всегда является экономически выгодным. Тем не менее, такие его явные достоинства, как точность и объективность оценки, возможность пополнения базы данных, сохранения статистической информации по результатам тестирования, обслуживание большого количества испытуемых, возможность высвобождения времени квалифицированных преподавателей для творческой работы, в том числе для создания тестов, и другие во многих случаях «перевешивают» денежные затраты.

Заключение

Исследование различных аспектов проблемы контроля в организационно-экономических процессах позволило получить следующие теоретические и практические результаты.

1. На основе теоретического исследования сущности экономического познания, рассмотрения методов математического эксперимента и моделирования выделена общая компонента в процессах познания любой природы -контрольные испытания. Детально рассмотрены и охарактеризованы разновидности контроля в сфере организационно-экономического управления.

Особое внимание автором уделено практике и перспективам развития применения технических и программных средств для проведения контрольных испытаний в экономических процессах. Указано на возможность и необходимость в современных условиях использовать интеллектуальные способности вычислительной техники для принятия решений, предсказания ситуаций, построения теорий, при этом ЭВМ следует рассматривать как часть субъекта познания.

2. Доказано, что в нынешних условиях следует уделять постоянное внимание контролю над совершенствованием знаний работниками организационно-экономического управления на всех этапах профессиональной деятельности.

Подчеркнуто, что в связи с реформированием системы бухгалтерского учета, постоянным обновлением и появлением новых нормативных документов работа бухгалтера, аудитора и других сотрудников сферы экономики и финансов, кроме прочего, требует постоянного поддержания необходимого уровня знаний и квалификации. Большое распространение в организационно -экономическом управлении в этой связи получило направление, связанное с компьютерным тестированием, нацеленным на профориентацию личности, кадровый отбор, определение и подтверждение квалификации сотрудников.

Задачи обучения экономистов и контрольных испытаний полученных знаний представлены в виде непрерывного технологического процесса, что чрезвычайно важно при его механизации и автоматизации.

3. Для решения проблемы контроля в экономических процессах из всей приведенной классификации автором обоснован и выбран метод тестирования, как наиболее объективный, оперативный, технологичный.

Объективность тестирования объясняется отсутствием непосредственного контакта испытуемого и экзаменатора, изначальным предоставлением одинаковых условий для всех претендентов, наличием обоснованного метода оценки знаний. Многие специалисты указывают на факт отсутствия научной обоснованности практически всех известных методов и форм контроля и в силу этого на выгодное отличие от них метода тестирования.

Оперативность тестирования наглядно прослеживается в связи с возможностью за короткое время опросить большое число испытуемых, быстро получить результаты, иметь возможность в дальнейшем провести анализ уровня знаний отдельной личности или сравнительный анализ группы личностей.

Технология проведения тестирования - вопрос или формализованное утверждение, несколько вариантов ответов, из которых выбираются верные или неверные - способствует использованию вычислительной техники в этом процессе, что особенно важно в плане автоматизации приведенного процесса.

4. Предложены концептуальные решения построения компьютерной системы контроля знаний. Они включают открытость системы для наполнения знаниями из любой предметной области, возможность настройки на различные методики оценки знаний, применение для различных форм контроля (текущего, промежуточного, итогового), наличие дружественного пользовательского интерфейса, независимость от технических характеристик компьютерной техники, универсальность по отношению к формам тестовых заданий и др.

5. В диссертационной работе рассмотрены особенности информационной и процедурной основ аудита бухгалтерской отчетности, контроля качества аудита бухгалтерской отчетности и применения метода тестирования для этих целей.

Повсеместное введение компьютеризированного бухгалтерского учета привело к появлению области компьютерного аудита, а тестирование, являясь одним из методов аудиторских доказательств, может проводиться с использованием компьютерной техники.

Контролю качества работы внутри аудиторской организации в современных условиях уделяется особое внимание, и этот контроль непосредственно связан с контролем качества работы аудитора. Аудитор периодически проходит аттестацию, преследующую цель поддержания и повышения уровня деловой квалификации. Здесь весьма логично вписывается возможность применения тестирования знаний, как метода контроля.

В диссертации обращено внимание на возможность удаленного аудита бухгалтерской отчетности с использованием современных средств телекоммуникационного доступа и в связи с этим на вопрос информационной безопасности и узаконивания электронной подписи.

6. Проведенный анализ и систематизация ряда тестирующих компьютерных систем позволили определить критерии для выбора их с целью контроля знаний, аудита и качества аудита бухгалтерской отчетности. Приведены сходства и отличия исследуемых систем, в частности, обращено внимание на то, что различия заключаются не в функциональных возможностях, а в методике обработки результатов и в интерфейсе, предоставленном пользователю.

Рассмотрены системы для определения профориентации, установления и подтверждения квалификации, определения профессиональных качеств и знаний и др. Приведена классификация ТКС на открытые, закрытые, открыто-закрытые. Рассмотрены достоинства и недостатки указанных форм, показаны их функциональные возможности.

7. В качестве практической реализации результатов исследования рассмотрена разработанная тестирующая компьютерная система «Академтест», представляющая собой программную оболочку открыто-закрытого типа. Технология, в соответствии с которой разработана система, позволяет применять ее для тестирования знаний в любой формализуемой области (в учебном процессе, для целей профориентации и подбора кадров, установления и подтверждения квалификации сотрудников, для целей аудита и качества аудита бухгалтерской отчетности).

Блочная структура ТКС «Академтест» дает возможность использовать ее в различной конфигурации, делая ее открытой, закрытой или открыто-закрытой. Одним из отличий системы от многих подобных разработок является наличие возможности создания сводного теста на основании имеющихся тестовых заданий из любых тем текущего комплекса тестов.

Система находится в промышленной эксплуатации с 1996 года в Финансовой Академии при Правительстве РФ. Предлагаемая система позволяет легко, интуитивно понять ее функционирование, что является немаловажным преимуществом, учитывая ее ориентацию на конечного пользователя.

В ходе работы над системой автором были использованы средства алгоритмического языка СУБД «Clarion», возможности электронных таблиц «Ехсс1», средства математического моделирования, математический аппарат датчика случайных чисел, компьютерные графические средства и др.

8. По-новому в работе освещена проблема оценки знаний в процессе тестирования. Практический аспект диссертации заключается в разработке алгоритма оценки компьютерного испытания в познавательных процессах, в том числе экономической деятельности, который обеспечивает более точную и объективную оценку знаний испытуемого. Автором диссертационной работы предложен алгоритм дифференцированной оценки коэффициента знаний с учетом совпадений ответов с эталоном, лишних и недостающих ответов, данных испытуемым, и проведен анализ достоинств и недостатков того и другого методов.

Для реализации алгоритма дифференцированной оценки коэффициента знаний разработана алгоритмическая и математическая модели. После проведения математических экспериментов были сделаны выводы о том, что коэффициент знаний уменьшается менее интенсивно при увеличении числа лишних ответов, чем при увеличении числа недостающих ответов. Подтверждение этого вывода дано с помощью математических формул.

Исходя из проведенного исследования, автором даны рекомендации по составлению тестовых заданий, и очерчены области значений положительных знаний при разных формах тестовых заданий.

9. Рассмотрены принципиальные аспекты экономической эффективности внедрения тестирующих компьютерных программ. Проведен анализ затрат на проведение бланкового и компьютерного тестирования. Приведены разработанные автором модели расчета наиболее важных показателей.

Доказано, что на стоимость тестирования оказывают влияние множество факторов: количество участников тестирования, стоимость оплаты труда сотрудников, проводящих процесс, время, отведенное на сеанс тестирования, стоимость часа машинного времени, стоимость программной разработки, используемой для целей компьютерного тестирования, количество задействованных компьютеров.

Приведены достоинства и обоснована целесообразность применения компьютерного тестирования как метода контроля в процессах организационно-экономического управления.