автореферат диссертации по информатике, вычислительной технике и управлению, 05.13.18, диссертация на тему:Теоретическое описание и развитие системной интеграции для научно-практических структур

кандидата физико-математических наук
Печеркин, Сергей Сергеевич
город
Екатеринбург
год
2002
специальность ВАК РФ
05.13.18
Диссертация по информатике, вычислительной технике и управлению на тему «Теоретическое описание и развитие системной интеграции для научно-практических структур»

Оглавление автор диссертации — кандидата физико-математических наук Печеркин, Сергей Сергеевич

ВВЕДЕНИЕ.

1. ПРОБЛЕМАТИКА МОДЕЛИРОВАНИЯ, РАЗВИТИЯ И ПРИМЕНЕНИЯ ИНСТРУМЕНТАРИЯ СИСТЕМНОЙ ИНТЕГРАЦИИ ДЛЯ НАУЧНО - ПРАКТИЧЕСКИХКТУР: ОБЗОР, АНАЛОГИ, ПРОТОТИП.

1.1 Научно-практические структуры (НПС) как основной заказчик средств системной интеграции.

1.2 Системная интеграция (СИ).

1.3 Методология и инструментарий информационно-компьютерной поддержки деятельности ЛПР.

1.4 Ситуационные представления.

1.5 Моделирование в интересах НПС.

1.6 Развитие, реинжиниринг и жизненный цикл НПС.

1.7 Специфика управления в НПС.

1.8 Системы знаний и управления знаниями.

1.9 Аналоги и прототип системной интеграции.

1.10 Цель и задачи диссертационного исследования.

1.11 Результаты и выводы по главе 1.

2. НАУЧНО-ПРАКТИЧЕСКАЯ СРУКТУРА, ЕЕ ФУНКЦИИ И СПЕЦИФИКА ФАКТИЧЕСКОГО СОСТОЯНИЯ

2.1 Функционально-структурные модели НПС: идеализированное состояние

2.2 Реальное состояние НПС: типичные недостатки.

2.3 Специфика реального состояния НПС в примерах.

2.4 Потребности в разрешении проблем НПС и их удовлетворение.

2.5 Результаты и выводы по главе 2.

3. МОДЕЛИРОВАНИЕ И АНАЛИЗ ПРЕДПОСЫЛОК ДЛЯ СТРУКТУРИРОВАНИЯ И РАЗВИТИЯ ПОНЯТИЙ ПО МЕТОДОЛОГИИ И ИНСТРУМЕНТАРИЮ СИСТЕМНОЙ ИНТЕГРАЦИИ.

3.1 Исходные предпосылки для структурирования и развития понятий по методологии и инструментарию системной интеграции.

3.2 Определение системной интеграции, гипотезы о развитии ее методологии и инструментария

3.3 Направления развития методологии системной интеграции.

3.3.1 Кортежная модель методологии системной интеграции.

3.3.2 Логика работы ЛПР с объектом при поддержке системы знаний

3.3.3 Регулярная технологическая схема системной интеграции как упрощенный вариант методологии

3.3.4 Инженерия знаний как составляющая методологии СИ

3.4 Кортежная модель инструментария системной интеграции

3.5 Оценка рациональности выбора методологии и инструментария системной интеграции.

3.6 Результаты и выводы по главе 3.

4. МОДЕЛИРОВАНИЕ И РАЗВИТИЕ ИНСТРУМЕНТАРИЯ СИСТЕМНОЙ ИНТЕГРАЦИИ.

4.1 Представление терминологии, связанной с НПС, в виде пятиблочного тезауруса.

4.1.1 Иерархия основных понятий, отражающих деятельность НПС

4.1.2 Визуализация, актуализация и маршрутизация.

4.1.3 Распределение гипертекстов по вершинам и дугам.

4.2 Ситуационное досье как часть блока системной поддержки в составе тезауруса НПС.

4.2.1 Определение ситуации и проблемной ситуации.

4.2.2 Иерархия понятий ситуационного досье.

4.2.3 Работа с ситуационным досье.

4.2.4 Критерии для оценки качества работы с ситуационным досье.

4.3 Досье по системной интеграции как часть блока системной поддержки в составе тезауруса НПС.

4.4 Блок оценки эффективности и конкурентоспособности деятельности ЛПР по разрешению проблемных ситуаций НПС

4.5 Системно-информационный метод в помощь ЛПР.

4.6 Системная интеграция: развитие и предлагаемое решение.

4.6.1 Структура предлагаемого решения по системной интеграции.

4.6.2 Оценка уровня системной интеграции

4.6.3 К проблеме рационального выбора методологии и инструментария системной интеграции.

4.7 Результаты и выводы по главе 4.

5. МОДЕЛИ СИСТЕМНО-ИНТЕГРАЦИОННОЙ ДЕЯТЕЛЬНОСТИ ЛПР ПО РАЗРЕШЕНИЮ СИТУАЦИЙ НПС И РЕЗУЛЬТАТИВНОСТЬ ИХ ПРИМЕНЕНИЯ.

5.1. Пакеты концептуальных, алгоритмических и функционально-структурных моделей деятельности.

5.2. Пример пакета критериальных моделей

5.3 Пример настройки системы знаний на решенность проблем НПС

5.4 Примеры работы с ситуационным досье в НПМУ

5.4.1 Формализованное представление и выбор предмета актуальной реабилитационной ситуации.

5.4.2 Система координат для формализованного представления актуальной реабилитационной ситуации.

5.4.3 Формализованное представление системного эффекта при фиксации событий актуальной реабилитационной ситуации.

5.4.4 Матрица связи "что-где-когда-в какой системе координат" для актуальной реабилитационной ситуации.

5.4.5 Мониторинг проблемной ситуации и ранжирование альтернатив в АРМ руководителя НПС

5.5 Математическая модель многоуровневого распределительного управления в НПС.

Введение 2002 год, диссертация по информатике, вычислительной технике и управлению, Печеркин, Сергей Сергеевич

Актуальность. Научно-практическая структура (НПС) - это объект, сложность которого связана как с основной (профильной), так и со вспомогательной (управленческой, экономической, информационной и т.д.) деятельностью. Проблема описания таких объектов освещена в трудах ведущих отечественных и зарубежных ученых: В.И.Арнольда, В.Н.Буркова, В.И.Воропаева, В.А.Горбатова, Ю.М.Горского, В.А.Ирикова, Н.Н. Моисеева, Н.К.Никитиной, С.П.Никанорова, Дж.Обэр-Круса, Э.Роджерса, В.В. Поди-новского, А.И. Половинкина, Э.В.Попова, Д.А. Поспелова, С.А. Редкозубова, Т.Саати, А.А.Самарского, Р.Уилкокса, Дж.Форрестера, П.Чекланда, В.К.Чичинадзе, И.Якобсона и др. - для научно- производственных и административных структур; Р.Беллмана, Н.Бейли, С.А.Гайсаряна, И.М.Гельфанда, Л.Ластеда, В.Н.Новосельцева, Д.С.Чернавского, М.А.Шнепса и др.- для медицинских учреждений; М.Балаш, А.С.Белкина, Г.А.Дегтяренко, А.Ильон, А.Лаутермана, С. Лазареску, А .Я. Найна, В.М. Полонского, М.П.Поташника, В.Д.Семенова, X. Прохазковой, Л.Ферниа, М.Янкова и др. - для образовательных; В.А.Герасименко, В.А.Минеева, В.П.Полошаева, Н.П.Топольского и др. - для правоохранительных.

Заметен также вклад уральских ученых, представляющих технические и физико-математические науки: Э.Г.Альбрехта, В.И.Гольдфарба, С.Л. Гольдштейна, В.Д.Мазурова, И.И.Еремина, Б.Б.Зобнина, Н.Н.Красовского, В.С.Жабреева, Л.С.Казаринова, В.Г.Лисиенко, О.В.Логиновского, Ю.Т. Карманова, Р.П. Чапцова, В.И.Ширяева, А.Ф.Шорикова и др.

Для работы с такими сложными объектами уже 50 лет успешно применяют системный подход и компьютерные технологии. На их основе в последнее время складывается новая дисциплина - системная интеграция (СИ). Ее методология и инструментарий еще только обозначены, описания слабо формализованы, хотя имеются мощные предпосылки в виде аппарата системных исследований и средств современной информационной технологии. Процесс этот идет стихийно, поэтому плохо позиционирует проблемные ситуации НПС и ресурсы для их разрешения.

В этой связи тема диссертационного исследования представляется актуальной. Работа выполнена в соответствии с программой Министерства образования РФ «Университеты России - фундаментальные исследования» по направлению «Математическое моделирование» (гранты 99.15.14 19992000 и УР 03.01.009 2001-2002 гг.), а так же при поддержке грантов №00-0790273 и 01-07-90210 РФФИ по направлению «Создание и развитие информационно-вычислительных и телекоммуникационных ресурсов для фундаментальных исследований» (2000-2002гг). Кроме того, она скоординирована планами НИР и ОКР на период 1996-2002 гг. кафедры вычислительной техники УГТУ-УПИ, научно-практического реабилитационного центра «БОНУМ», ЗАО «Атомпромкомплекс», ООО "Уралтрансгаз" (г. Екатеринбург) и др.

Цель работы - теоретическое описание и развитие методологии и инструментария системной интеграции для научно-практических структур.

Задачи:

1. Выявление аналогов и прототипа системной интеграции.

2. Анализ специфики НПС как объектов системной интеграции.

3. Анализ и моделирование предпосылок для структурирования и развития понятий по методологии и инструментарию СИ.

4. Моделирование и развитие методологии и инструментария СИ.

5. Моделирование деятельности JiiiP по разрешению ситуаций НПС на основе СИ.

6. Апробация разработок по системной интеграции на примерах.

Научная новизна:

1. Выявлены аналоги и предложен компилятивный прототип СИ.

2. Определена специфика НПС как объекта системной интеграции, заключающаяся в комплексной сложности, многоуровневом распределенном управлении, недостаточном системном и интеллектуально-информационном обслуживании, прежде всего в плане позиционирования ситуаций и ресурсов.

3. Упорядочено поле понятий и выработаны направления структуризации и развития по методологии и инструментарию СИ.

4. Предложена кортежная модель методологии и инструментария СИ. Разработаны подсистемы «Ситуационное досье», «Системная интеграция», «Эффективность» пятиблочного тезауруса понятий, связанных с деятельностью ЛПР НПС, как основы интерфейсной позиционирующей среды.

5. Предложены методы разрешения ситуаций в НПС, оценки уровня системной интеграции НПС, настройки системы знаний на оценку решенно-сти проблем НПС.

6. Созданы пакеты концептуальных, алгоритмических, функционально-структурных, критериальных, информационных и математических моделей деятельности специалистов и руководителей НПС в рамках СИ,

Практическая значимость работы:

1. Предложена технология разрешения проблемных ситуаций со сложным объектом типа НПС на основе развитого описания методологии и инструментария системной интеграции.

2. Материал использован в деятельности НПРЦ «БОНУМ», ЗАО «Атомпромкомплекс», ООО «Белоярский завод строительных материалов», ООО «Уралтрансгаз», и др.

3. Результаты внедрены в учебный процесс кафедры вычислительной техники УГТУ-УПИ для студентов специальности 22.01 по дисциплине «Системотехника».

Апробация работы. Материалы диссертационной работы доложены и обсуждены на международных конференциях «Интеллектуальные информационные технологии в управленческой деятельности (1998, 1999, 2001, 2002, Екатеринбург); "Распределенные системы: оптимизация и приложения в экономике и науках об окружающей среде", (2000, Екатеринбург); Всероссийских конференциях: «Информационные технологии, системы управления и электроника» (1997, Екатеринбург); «Информатизация педиатрической науки и практики» (1998, Екатеринбург); «Новые информационные технологии в исследовании дискретных структур (1996, 1998, Екатеринбург; 2000, Томск); «Современные технологии лечения и реабилитации детей» (1999, Москва); «Алгоритмический анализ неустойчивых задач» (2001, Екатеринбург); I -ом Уральском форуме «Культура, искусство и информатизация на рубеже III - го тысячелетия» (1996, Челябинск); «Медицинская и биологическая кибернетика» (1998, 2000, Екатеринбург); НТК «Компьютерная технология в горном деле (1998, 2000, Екатеринбург); «Проблемы информатизации региональных органов управления (1998,1999,2000 Челябинск); «Медико-техническая интеграция в Уральском регионе» (2000, Екатеринбург); научных семинарах кафедры вычислительной техники УГТУ-УПИ (1996-2000).

Положения, выносимые на защиту:

1. Научно-практические структуры отличаются комплексной сложностью и недостаточной обслуженностью в системном и интеллектуально-информационном аспектах, особенно на старших уровнях управления. В работе показана значимость этой специфики, а также способы ее учета и парирования за счет использования средств системной интеграции.

2. Методология и инструментарий системной интеграции находятся в стадии становления, их описания не выходят за рамки вербальной парадигмы. В работе развиты методология и инструментарий СИ в интересах научно-практических структур и предложены их модели.

3. Деятельность НПС формализована недостаточно. В работе получен пакет концептуальных, алгоритмических, функционально-структурных, критериальных, информационных и математических моделей, достаточный для организации системно-информационной подсказки лицу, принимающему решение, по выходу из проблемных ситуаций со сложным объектом на основе системной интеграции.

Публикации. Основное содержание диссертации отражено в 50 публикациях, в т.ч. 30 статьях.

Заключение диссертация на тему "Теоретическое описание и развитие системной интеграции для научно-практических структур"

Выводы:

- пакеты моделей деятельности JJLLJLP в составе методологии и инструментария системной интеграции являются эффективным средством анализа качества функционирования НПС, обеспечивая «прозрачность» и предсказуемость объекта;

- модели деятельности ЛПР разной степени формализации (от концептуальных до строго математических) могут рассматриваться как самодостаточные средства локального анализа ситуаций; обобщенный анализ требует всего пакета моделей;

- при моделировании НПС не следует торопиться применять традиционную в физике и технике обработку эмпирического материала, приоритет должен быть отдан неформальному системно-логическому анализу;

- польза, полученная у заказчиков, свидетельствует об эффективности предложенных средств.

ЗАКЛЮЧЕНИЕ

Приведенные в тексте диссертации материалы исследований и разработок представляют собой законченную работу, посвященную задаче моделирования, развития и применения системной интеграции в научно-практических структурах. Подробные результаты и выводы приведены в конце каждой из пяти глав диссертации.

Основные научные результаты: Выявлены аналоги и предложен компилятивный прототип СИ. Упорядочено поле понятий и выработаны направления структуризации и развития методологии и инструментария СИ. Предложены кортежные модели методологии и инструментария системной интеграции. Разработаны модели подсистем «Ситуационное досье», «Системная интеграция» и «Эффективность» пятиблочного тезауруса понятий, связанных с деятельностью ЛПР НПС. Предложены методы разрешения ситуаций НПС, оценки уровня системной интеграции НПС и настройки системы знаний на оценку решенности проблем НПС. Создан пакет концептуальных, алгоритмических, структурных, критериальных, информационных и математических моделей деятельности специалистов и руководителей НПС в рамках системной интеграции.

Основные практические результаты. Существующий инструментарий системной интеграции дополнен интеллектуально-информационной позиционирующей средой, представляющей собой пятиблочную тезаурусную четырехопционную гипертекстовую структуру знаний, включающую разработанные автором блоки и подблоки. Предложена технология системной интеграции в упрощенном и полном вариантах.

Созданный инструментарий СИ успешно применен (см. табл. 2.5 и 5.27) при разработке автоматизированных рабочих мест специалиста и старших управленцев научно-практического медицинского учреждения (НПРЦ «БОНУМ» г. Екатеринбург), а также топ-менеджмента одной из дочерних фирм крупного холдинга (ЗАО «Атомпромкомплекс», г.Екатеринбург). Кроме того, этот инструментарий в локальных версиях (в виде моделей, методов, схем и технологий) использован для фиксации и анализа состояний ряда научно-практических структур: ООО «БЗСМ», г.Заречный; ООО «Уралтрансгаз», г.Екатеринбург; кафедра вычислительной техники УГТУ, г.Екатеринбург.

В итоге создан теоретический фундамент системной интеграции, представленный новыми описаниями ее методологии и инструментария, достаточными для практических разработок.

Библиография Печеркин, Сергей Сергеевич, диссертация по теме Математическое моделирование, численные методы и комплексы программ

1. Лопатников Л.И. Экономико-математический словарь. -М: Наука, 1987, -508с.

2. Чичинадзе В.К. Введение в теорию систем административного управления и организации. -Тбилиси: ТГУ, 1988. -382с.

3. Янг С. Системное управление организацией. Перев. с англ. М.М. Лопухина. М.: Советское радио, 1972. - 455с.

4. Бир С. Мозг фирмы. М.: Радио и связь. 1993. - 70 с.

5. Обер Крус Дж. Управление предприятием. - М.: Прогресс. 1973. - 220 с.

6. Ананьина Е.А., С.В. Данилочкин, Н.Г. Данилочкина. Контроллинг как инструмент управления предприятием. -М: Аудит, ЮНИТИ, 1998. -279с.

7. Карминский A.M., Оленев Н.И., Примак А.Г., Фалько С.Г. Контроллинг в бизнесе. Методологические и практические основы построения контроллинга в организациях. -М.: Финансы и статистика, 1998, -256с.

8. Манн Р., Майер Э. Контроллинг для начинающих. М.: Финансы и статистика, 1995. -304с.

9. Хан Д. Планирование и контроль: концепция контроллинга. Пер. с нем./Под ред. А.А. Турчака, Л.Г. Головача, М.Л. Лукашевича. М.: Финансы и статистика, 1997. -800с.

10. Карлин С. Математические методы в теории игр, программировании и экономике. -М. Мир, 1964.

11. Замков О.О. Математические методы в экономике. -М: Дело и сервис. 1999, 368 с.

12. Тимошенко С.И. Методология функционального моделирования. Екатеринбург: ИПК УГТУ, 2000. -116с.

13. Костров А.В. Основы информационного менеджмента. -М: Финансы и статистика, 2001. -336с

14. Гольдштейн С.Л. Инюшкина О.Г.,Макаров Э.П. Управление знаниями: обзор, аналоги, прототипы, предлагаемая структура. // Сб. «Интеллектуальныеинформационные технологии в управленческой деятельности»; -Екатеринбург: ИПК УГТУ-УПИ, -2001; с. 9-19.

15. Гольдштейн C.JL, Инюшкина О.Г.,Макаров Э.П. Иерархическая модель системы управления знаниями // там же,- с. 9-19.

16. Гольдштейн C.J1. , Еремеева М.А. , Информационные порталы: обзор, аналитика, аналоги. // там. же. 2002.

17. Райе Э., Траут Д. Позиционирование. С-Пб.: Питер, 2001. - 250с.

18. Д. Бауэрсокс, Дж., Клосс Д., Дж. Логистика. М.:Олимп-бизнес, 2001, - 640с.

19. Веселов Д. Системная интеграция. Новые горизонты, www.cinfo.ru.

20. Поздняков В. Практика системной интеграции, www.iv.com.ua

21. Попов Э., Шапот М. Реинжениринг бизнес-процессов и информационные технологии, http://www.osp.ru/os/1996/001/62.

22. Системная интеграция BINCOM, www.bincom.ru

23. Системная интеграция в Уральском регионе, www.asteria.ru

24. Богатырь Б.Н. и др. Концепция системной интеграции информационных технологий в высшей школе. -М: Рос НИИСИ. 1993.

25. Цуприков С. Системная интеграция: шаг за шагом/Network World, 1998, #01/48

26. Волков Д. Системная интеграция три года спустя/ Network World, 1998, №5/48

27. Коновалов Б. / БОСС, 2001. -№5 /25

28. Гольдштейн С.Л. Введение в информатику / учебное пособие. -Свердловск: УПИ, 1990,-104с.

29. Гайсарян С.С. Объектно-ориентированный подход и разработка сложных информационных систем. -М: ЦИТ. 1998. -111 с.

30. Буч Г. Объектно-ориентированный анализ и проектирование. М.:Бином. 1998.

31. Коллинс Г., Блэй Дж., Структурные методы разработки систем: от стратегического планирования до тестирования. Пер с англ. А.А. Александрова, В.Г. Лукичева. Под ред. В.М. Савинова. М.: Финансы и статистика, 1986. - 263с.

32. Hammer М., Champy J. Reengineering the Corporation: A Manifesto for Business Revolution/ New York: Harper Collins. 1993.

33. Шеер A.B. Бизнес-процессы: Основные понятия. Теория. Методы. М.: Весть. Мета-Технологии, 1999, - 152 с.

34. Гольдштейн С.Л. Ткаченко Т.Я. Введение в системологию и системотехнику. -Екатеринбург: ИРРО, 1994. -200с.

35. Калянов Г.Н. CASE. -М.: Наука, 1996. -242с.

36. Маклаков С.В. BPWin и ERWin: CASE-средства разработки информационных систем, -М: Диалог МИФИ, 2000, -256с.

37. Трофимов С.А. CASE-технологии: практическая работа в Rational Rose. -М: БИНОМ, 2001,-272с

38. Jacobson. I. Business Process Reengeniring with object technology. -Addision Wesley Publishing Company. 1996.

39. Клыков Ю.И. Семантические основы ситуационного управления. Учебное пособие. -М.:МИФИ, 1974.-171с.

40. Клыков Ю.И. Ситуационное управление большими системами. -М.: Энергия, 1974. -135с.

41. Поспелов Д.А. Ситуационное управление. Теория и практика. -М: Наука, 1996, -284с.

42. Саати Т. Принятие решений. Метод анализа иерархий. Пер. с англ. Р.Г. Вачнадзе. -М.: Радио и связь, 1993. 314с.

43. Саати Т. Математические модели конфликтных ситуаций. М. Финансы. 1977. -156с.

44. Айзеке Р. Дифференциальные игры -М: Мир, 1967, -479с.

45. Красовский Н.Н., Суботин А.И. Позиционные дифференциальные игры -М: Наука, 1981.-288с.

46. Еремин И.И. Противоречивые модели экономики. -Свердловск: Средне-Уральское издательство, 1986. -87с.

47. Мазуров В.Д. О построении комитета системы выпуклых неравенств / Кибернетика, 1967, №2, с 56-59.

48. Еремин И.И. Противоречивые модели оптимального планирования, -М: Наука, 1988.-160с.

49. Райков А. Ситуационная комната для поддержки корпоративных решений. /Открытые системы -1999. № 7-8. -С. 56-66.

50. Пирогова Н.И. Ситуационные центры от российских разработчиков / Открытые системы 1999.- №7-8,.

51. Мелихов А.Н., Берштейн JI.C., Коровин С.Я. Ситуационные советующие системы с нечеткой логикой. -М. Наука, 1990.

52. Самарский А.А., Гулин А.В. Численные методы. М.: Наука, 1989. - 432с.

53. Заде JI.A. Дезоер Ч.А. Теория линейных систем. Метод пространства состояний. Пер. с англ. В.Н. Варыгина. Под. ред. Г.С. Поспелова. М.: Наука, 1965г., - 70с.

54. Чернышев М.К. , Гаджиев М.Ю. Математическое моделирование иерархических систем, -М.: Наука, 1983, 192с.

55. Гаджиев М.Ю. Модель координации конфликтных управлений. / АИТ, 1972, №5.

56. Моисеев Н.Н. Математические задачи системного анализа, -М: Наука, 1981. -487с.

57. Самарский А.А., Михайлов А.И. Математическое моделирование. -М: Наука, 1997.-320с.

58. Коршунов Ю.М. Математические основы кибернетики. -М: Энергоатомиздат, 1987.-495с.

59. Математические основы теории автоматического регулирования / под ред. Чемоданова Б. К. в 2т. -М: Высшая школа, 1977.

60. Иванов Б.Н. Дискретная математика. -М: Лаборатория базовых знаний, 2001. -288с.

61. Ромашевский И.В. Дискретный анализ, -С-Пб: -Физматлит, 2000. -240с.

62. Шелобаев С.И. Математические методы и модели. -М: ЮНИТИ. 2000, -367с.

63. Шенон Р. Имитационное моделирование систем исскуство и наука. -М: Мир, 1978,-418с.

64. Форрестер Дж. Мировая динамика. Пер. с англ. А.Н. Ворошука, С.А. Пегова. Под ред. В.М. Гвишиани, Н.Н. Моисеева. М.: Наука, 1978. - 167с.

65. Николис Дж. Динамика иерархических систем, -М: Мир. 1987.

66. Моисеев Н.Н. Алгоритмы развития -М: Наука, 1987. -303с.

67. Зоткин А.И. Термодинамический подход к проблемам развития, роста, старения. -М: Наука, 1974.

68. Пригожин И. От существующего к возникающему. -М: Наука. 1985.

69. Эбелинг В. Энгель А., Фаистель Р. Физика процессов эволюции. -М: УРСС, 2001, -327с.

70. Общее техническое задание на реализацию программы информационного обеспечения социально-экономического развития Свердловской области// в 8т. -Екатеринбург: ИММ УрО РАН. 1998. -т.5.

71. Поспелов Г.С., Ириков В.А. Программно-целевое планирование и управление -М: Сов. Радио, 1976.

72. Кофман А. Введение в теорию нечетких множеств / Под ред. Травкина С. И. -М.: Радио и связь, 1982.

73. Поспелов Д.А. Нечеткие множества в моделях управления и искусственного интеллекта. -М.:Наука, 1986, -104с.

74. Судов Е. Информационная поддержка жизненного цикла продукта / www.cals.ru

75. Ойхман Е.Г., Попов Э.В. Реинжиниринг бизнеса: реинжиниринг организаций и информационные технологии. -М: Финансы и статистика, 1997. -336с.

76. Шапот М.Д. Инструментальные средства поддержки реинжениринга бизнес -процессов. // Сб. «Динамические интеллектуальные системы в управлении и моделировании». -М.: ЦРДЗ, 1996. -154с.

77. Чеботарев В. Моделирование бизнеса: средства и методы. http://www.pcweek.ru/year2000/N9/CP1251/News//

78. Дэминг Э. Выход из кризиса. -Тверь: Альба, 1994.

79. Емельянов С.В., Ларичев О.И. Многокритериальные методы принятия решений -М.: Мысль, 1985.

80. Клыков Ю.И., Горьков JI.H. Банки данных для принятия решений. -М.: Сов. радио, 1980. -208с.

81. Трахтенгерц Э. А. Генерация, оценка и выбор сценария в системах поддержки принятия решений. / АиТ. №3. - 1997.

82. Трахтенгерц Э. А. Компьютерная поддержка принятия решений. М.: СИНТЕГ, 1998.

83. Мулен Э. Кооперативное принятие решений: аксиомы и модели. / пер. с англ. М.: Мир, 1991.-464 с.

84. Гаджиев М.Ю. Трехуровневая модель управления ядерными реакторами // Симпозиум по проблемам планированию и управлению научными исследованиями на уровне научно-исследовательских учреждений. Препринт. -М. : 1971.

85. Арнольд В.И. «Жесткие» и «мягкие» математические модели. -М. 1997.

86. Словарь по кибернетике, /под ред. Михалевича B.C. Киев: Укр. Энциклопедия, 1989, -751с.

87. Подиновский В.В. ГавриловВ.М. Оптимизация по последовательно применяемым критериям. -М: Сов. Радио., 1975, -192с.

88. Самооценка деятельности организации на соответствие критериям премии Правительства РФ в области качества / Рекомендации ВНИИ сертификации госстандарта РФ, -М: 1997.

89. Гантимуров В.Ю., Мелких Д.Л. Методическое пособие по самооценке качества работы центра подготовки персонала Минтруда РФ / Под редакцией Гольдштейна С.Л., -Екатеринбург. : УМЦО, 1999. -40с.

90. Бакулин Н. В. Механизм самооценки эффективности управления в хозяйственной системе / Известия Донецкого горного института, -Донецк: 1997. № 2 (6). - с. 67 -73.

91. Даневич В.А. и др. Показатели и критерии эффективности управления М.: Мысль, 1988.

92. Дружинин А.И., Рыжова В.В. Экономический анализ хозяйственной деятельности предприятия: учебное пособие; Под ред. О.Н. Дунаева. -Екатеринбург: ИПК УГТУ, 1998. -87с.

93. Дракер П. Управление, нацеленное на результаты. Пер. с англ. М.: Технологическая школа бизнеса, 1992. - 192с.

94. Жюльен Ф. Трактат об эффективности. Пер с фр. Б. Крушняка. Науч. ред. Н. Трубникова. С.-Пб.: Университетская книга, 199. - 236с.

95. Литвинов В.В. Оценка экономической эффективности управления корпорацией. Журнал депонированных рукописей. №3 март, 2000. www.mte.ru

96. Багов В.П., Ступаков B.C., Токаренко Г.С. Методика оценки эффективности стратегии корпоративных систем по обобщенным характеристикам./ Финансы -2000. -№ 11,.-С. 59.

97. Уткин О. Определение эффективности работы корпорации: применение технологии анализа среды функционирования. / Российский экономический журнал -2001. -№ 6. -С. 12.

98. Месарович М., Мако Д., Такахара И. Теория иерархических многоуровневых систем. -М: Мир, 1973,

99. Криворотов В.В. , Воронов Д. С., Конкурентоспособность предприятия: оценка анализ и прогнозирование /препринт Екатеринбург., Институт экономики Уро РАН, 2001.-32с.

100. Самуэльсон П., Нордхаус В. Экономика: Учебное пособие. Пер. с англ./под ред. Л.С. Тарасевича, А.И. Леусского. М.:Бином-Конрус, 1999. - 799с.

101. Генкин А.А. Новая информационная технология анализа медицинских данных. -С.-Пб.: Политехника, 1999. -191с.

102. Мелких Д.Л. , Гольдштейн С.Л., Ткаченко Т.Я., Оценка завершенности теории и технологии построения систем знаний / Сб. «Новые информационные технологии в исследовании информационных структур», -Екатеринбург: Имаш УРО РАН, 1998, -С 46-55

103. Симоне Дж. ЭВМ пятого поколения. -М: Финансы и статистика, 1985, -173с.

104. Системные исследования. Ежегодник. -М: Наука, 1969-1999.

105. Исскуственный интелект. Справочник, т. 1-3 -М: Радио и связь, 1990

106. Попов Э.В. и др. Статические и динамические экспертные системы, -М: Финансы и статистика, 1996

107. Гаврилова Т.А., Хорошевский В.Ф. Базы знаний интеллектуальных систем, -С-Пб: Питер, 2000,-3 84с.

108. Калья А. и др. ПРИЗ- семейство интеллектуальных средств, ориентированных на знания / Искусственный интеллект. Справочник. Т.З. -М: Радио и связь, 1990, с 120-130.

109. Переверзев-Орлов B.C. Проблемы и концепция построения интеллектуальных партнерских систем // Сб. "Компьютеры и познание", -М: Наука, 1990, с.52-67.

110. Фролов Ю.В. Интеллектуальные системы и управляющие решения. -М: МГПУ, 2000,-294с

111. Горбатов В.А. Фундаментальные основы дискретной математики. -М: Наука. 1999, -544с.

112. Гублер Е.В. Информатика в патологии, клинической медицине и педиатрии. -Л.: Медицина, 1990. -176с.

113. Бурдаков В.П. Эффективность жизни, -М: Энергоатомиздат, 1997, -304с.

114. Бурков В.Н. и др. Большие системы: моделирование организационных механизмов . -М: Наука. 1989. 246с.

115. Управление большими системами /под ред. В.Н. Буркова, -М: ИПУ РАН. 1997, -398с.

116. Чапцов Р.П. Системная траектория -Челябинск. Версия, 1998, -68с.

117. Гаазе-Рапопорт М.Г., Поспелов Д.А. От амебы до робота: модели поведения, -М: Науки, 1987., -288с.

118. Саати Т. Л., Керне К. Аналитическое планирование. Организация систем. М.: Радио и связь, 1991.

119. Гайдамакин Н.А. Автоматизированные информационные системы, базы и банки данных. -М: Гелиос АРВ, 2002, -367с.

120. Тиханова Л.В. Системная интеграция в Уральском регионе. / Эксперт -2000. № 10,.-С. 10.

121. Обзор журнала «СТА» (№4/2000, №1/2001, №2/2001 ), http://logicon.com.ua/ stanew.html

122. Ершов А.П. Избранные труды. -Новосибирск: Наука, СО, 1994, -416 с.

123. Романов А.Н., Одинцов Б.Е., Советующие информационные системы в экономике, -М: ЮНИТИ, 2000, -487с.

124. Эртли-Каякоб П. Экономическая кибернетика на практике. -М: Экономика, 1983, -160с.

125. Соловьев В., Курдюмов Г., Кулагин А, В поисках критериев эффективности преподовательского труда. http://www.informika.ru/windows/higher/l 97/ 4razdel.html#4-l

126. Буч Г., Рамбо Д., Джакобсон А. Язык UML. Руководство пользователя: пер. с англ. -М: ДМК, 2000, -432 с.

127. Печеркин С.С., Гольдштейн С.Л. и др. Научно-производственное учреждение: структура, функции и специфика фактического состояния // Сб. «Интеллектика, логистика, системотехника», вып.З, -Челябинск: Изд. Т.Лурье, 2001, с.52-67.

128. Аузан В., Шпагина М. Новая экономика/ Эксперт, №20, 2000, с. 1-5.

129. Гольдштейн С.С., Кадушников P.M. и др. Информационные технологии в жизнедеятельности города, -Екатеринбург: Академкнига, 2000, -103 с.

130. Гольдштейн С.С., Давыдов А.А., Печеркин С.С., Ткаченко Т.Я. Системная формализация знаний о деятельности научно-производственной фирмы. // Сб. «Информационная проблематика нечетких технологий», -Екатеринбург: УИТ Пр.Св.обл., 1996, с.30-34.

131. Гольдштейн С.С., Печеркин С.С., Ткаченко Т.Я. Системная интеграция: методология и интеллектуально-информационный инструментарий поддержкиуправленческой деятельности. / ИНФОР, пилотный выпуск, Челябинск: ЧЦНТИ, 1998, с. 17-24.

132. БСЭ, т. 16, -М: Советская энциклопедия, 197, с. 165

133. Половинкин А.И. Законы строения и развития техники. Волгоград: ВПИ, 1985, -202 с.

134. Печеркин С.С., Ткаченко Т.Я. Информационно-лингвистическая поддержка описания проблемной ситуации // Сб. «Информационная проблематика нечетких технологий», Екатеринбург: УИТ Пр.Св.обл., 1996, с. 30-34,

135. Печеркин С.С. Регулярная технологическая схема реинжиниринга медицинского учреждения // Материалы Уральской НПК «Медицинская и биологическая кибернетика», -Екатеринбург: УГМА, 1998, с. 64-66.

136. Гольдштейн С.С., Печеркин С.С., Ткаченко Т.Я. Интеллектуально-информационная среда для сопровождения жизненного цикла в сложных сферах деятельности // Сб. «Качество», -М: Фонд «Качество», 2001, с. 93-94.

137. Гольдштейн С.С., Печеркин С.С., Ткаченко Т.Я. Логика работы пользователя с объектом при поддержке системы знаний // Сб. «Интеллектуальные информационные технологии в управленческой деятельности», -Екатеринбург: ИПКУГТУ, 1999, с. 18-21.

138. Блохина С.И., Гольдштейн С.С., Печеркин С.С., Ткаченко Т.Я. Системная интеграция в интересах педиатрической науки // Тезисы Всерос. конференции «Информатизация педиатрической науки и практики», -Екатеринбург: БОНУМ, 1998, с. 159-162.

139. Гольдштейн С.С., Печеркин С.С., Свинина Н.А., Ткаченко Т.Я. Структура ресурсов для решения реабилитационных задач с помощью интеллектуально-информационной системы / там же, с.22-25.

140. Моделирование языковой деятельности в интеллектуальных системах / Под ред. Кибрика А.Е. и Нариньяни А.С., -М: Наука, 1987,-280 с.

141. Юзвишин И.И. Основы информациологии. -М: Высшая школа, 2000, -515 с.

142. Подиновский В.В. Принятие решений в органах государственной власти и негосударственных организациях: математические методы анализа и компьютерные системы поддержки // Материалы НПС «Аналитика в государственных учреждениях», -М: 1997.

143. Гольдштейн С.С., Печеркин С.С., Ткаченко Т.Я. Системная интеграция: системно-информациологический подход к проблеме знаний и управления знаниями / ИНФОР, №1(5), 2000, с. 98-111.

144. Гольдштейн С.С. и др. Системный аспект информатизации правоохранительных органов: выход на системные интеллектуальные подсказчики. -Екатеринбург: УГТУ, 1995,- 190 с.

145. Ириков В.А. и др. Приступаем к стратегическому плнированию-2 / PC-Week, №36(160), 1998.

146. Печеркин С.С. Способ настройки системы знаний на оценку решенности проблем предприятия // Сб. «Новые информационные технологии в исследовании дискретных структур», -Екатеринбург: УрО РАН, 1998, с.46-55.

147. Фрапаоло К., Томе В. Управление знаниями: от земли неведомой к земле обетованной / Электронный офис, №2,1998.

148. Голенцова Е. Falcrum на рынке управления знаниями / Электронный офис, №2, 1998.

149. Дмитриев А.С. Детерминированный хаос и информационные технологии / Компьютерра, №47, 1998, с.27-30.

150. Лазарев B.C., Поташник М.П. Управление развитием школы. М: Новая школа, 1995,-464 с.

151. Лощенко В.Л., Гольдштейн С.Л., Печеркин С.С., Гончаров А.В., Лопатин Д.А. Иерархическое представление основных понятий в деятельности руководителя холдинга // Сб. «Интеллектика, логистика, системотехника», №6, -Челябинск: ЧЦНТИ, 2001, с. 108-118.

152. Блохина С.И., Печеркин С.С. и др. Макроструктуры системы знаний НПРЦ «БОНУМ» и маршрутизатора на ней // Тезисы региональной конференции

153. Медико-техническая интеграция в Уральском регионе», -Екатеринбург: БОНУМ, 2000, с. 73-75.

154. Блохина С.И., Гольдштейн С.Л. и др. Информационный аспект задачи управления социоорганизационными системами /ИНФОР, №1, 1998, с. 18-26.

155. Печеркин С.С., Ткаченко Т.Я. Алгоритм классификации технического текста по критерию «сущность-связь» // Материалы НТК «Информационные технологии, системы управления и электроника», Вестник №4 УГТУ, -Екатеринбург: УГТУ, 1997, с. 67.

156. Сакович В.А. Исследование операций. Минск: ВШ, 1985, - 256 с.

157. Горский Ю.М. Системно-информационный анализ процессов управления. -Новосибирск: наука, 1988, -325 с.

158. Кармен Т., Лейзерман Ч., Ривей Р. Алгоритмы: построение и анализ. -М: МЦНМО, 1999, -960 с.

159. Печеркин С.С., Гольдштейн С.Л. Ситуационное досье в интеллектуальном АРМе руководителя // Сб. «Информация органов управления регионального и муниципального уровней», -Челябинск: Адм.Чел.области, 1999, с. 71-76.

160. Гольдштейн С.Л., Печеркин С.С., Свинина Н.А. Проблемная ситуация и ее описание в иерархической модели // Сб. «Интеллектуальные информационные технологии в управленческой деятельности», -Екатеринбург: ИПК УГТУ, 1999, с. 31-45.

161. Гольдштейн С.Л., Печеркин С.С., Свинина Н.А. Иерархическая модель объяснения и разрешения проблемной ситуации, там же, с.52-67.

162. Печеркин С.С., Гольдштейн С.Л. Ситуационное досье как инструмент разрешения проблемных ситуаций регионального уровня // Сб. «Информатизация органов управления регионального и муниципального уровней», -Челябинск: Адм. Чел. обл., 2000, с.

163. Логиновский О.В., Козлов А.С., Емельянова И.В. Формализация и развитие SADT-методологии, там же, 1999, с. 91-101.

164. Блохина С.И., Свинина Н.А., Печеркин С.С., Репина З.А. Моделирование деятельности логопеда: ситуационное досье / ИНФОР, №1(5), 2000, с.27-45.

165. Минцберг Г., Альстрэнд Б., Лэмпэл Д. Школы стратегий. -С-Пб: Питер, 2000, -336 с.

166. Кривоножко В.Е. и др. Анализ эффективности функционирования сложных систем / Автоматизация проектирования, №1, 1999.

167. Гольдштейн С.JT., Печеркин С.С., Свинина Н.А. Критериальные модели качества деятельности для системы знаний // Сб. «Компьютерные технологии в горном деле», -Екатеринбург: УГГГА, 1999, с. 70-73.

168. Лощенко В.Л., Печеркин С.С., Гольдштейн С.Л., Кабанова С.В. Системная интеграция: прототип и предлагаемые решения // Сб. «Интеллектика. Логистика. Системология», №7, -Челябинск: ЧЦНТИ, 2002, с. 62-75.

169. Эшби У.Р. Введение в кибернетику. -М: Иностр. литература. 1959.

170. Печеркин С.С. и др. Разработка концепции становления и перевода экономической деятельности ООО «БЗСМ» в новое качество / Отчет о НИР / Рук. Гольдштейн С.Л., -Екатеринбург: АЛДИЗ, 1997, -88 с.

171. Гольдштейн С.Л., Печеркин С.С., Ткаченко Т.Я. Системная интеграция: алгоритмические модели деятельности директора // Сб. «Проблемы информатизации региональных органов управления», -Челябинск: Адм. Чел. области, 1998, с.37-57.

172. Блохина С.И., Свинина Н.А., Печеркин С.С. и др. Концептуальные и алгоритмические модели деятельности логопеда / ИНФОР, №1(5), 2000, с.54-75.

173. Печеркин С.С., Свинина Н.А. и др. Функционально-структурные модели деятельности логопеда // Сб. «Интеллектуальные информационные технологии в управленческой деятельности», -Екатеринбург: ИПК УГТУ, 1999, с. 77-98.

174. Печеркин С.С. и др. Пакет моделей управленческой деятельности предприятия ООО «Уралтрансгаз» в финансово-экономической сфере / Отчеты о НИР, т. 1-4 / Рук. Гольдштейн С.Л., -Екатеринбург: УГТУ, 2000, 2001.

175. Печеркин С.С., Ткаченко Т.Я. Задача системной диагностики актуального объекта нечетких наукоемких технологий // Сб. «Информационная проблематика нечетких технологий», -Екатеринбург: Упт. Пр. Св. обл., 1996, с. 148-152.

176. Блохина С.И., Печеркин С.С. и др. К проблеме построения модели управления научно-производственным объединением медицинского профиля // Сб. «Современные реабилитационные технологии и качество здоровья», Екатеринбург: НПРЦ «БОНУМ», 1996, с. 39-44.

177. Блохина С.И., Печеркин С.С. и др. Моделирование деятельности логопеда: критерии оценки / ИНФОР, №1(5), 2000, с. 45-54.

178. Печеркин С.С. и др. Формализованное представление и выбор предмета актуальной реабилитационной ситуации // Материал НТК «Медико-техническая интеграция в Уральском регионе», -Екатеринбург: БОНУМ, 2000, с. 75-77.

179. Печеркин С.С. и др. Формализованное представление, выбор и упорядочение мест актуальной реабилитационной ситуации // там же, с. 77-80.

180. Печеркин С.С. и др. Формализованное представление времени в актуальной реабилитационной ситуации // там же, с. 80-82.

181. Печеркин С.С. и др. Система координат для формализованного представления реабилитационной ситуации // там же, с. 82-85.

182. Печеркин С.С. и др. Системный эффект от фиксации событий в актуальной реабилитационной ситуации // там же, с. 86-88.

183. Печеркин С.С. и др. Матрица связи «что-где-когда-в какой системе координат» для актуальной реабилитационной ситуации // там же, с. 88-90.

184. Печеркин С.С., Патраков М.В. Программное средство для мониторинга проблемной ситуации в АРМе директора // Сб. «Компьютерные технологии в горном деле», -Екатеринбург: УГГГА, 1998, с 40-43.

185. Клюкин В.Э., Патраков М.В., Печеркин С.С. Программное средство по ранжированию альтернатив в АРМе директора, там же, с. 44-45.

186. Залецкий П.В., Мелких Д.Л., Патраков М.В., Печеркин С.С. Моделирование и разработка базы данных для АРМ руководителя // Сб. «Интеллектуальные информационные технологии в управленческой деятельности», -Екатеринбург: ИПК УГТУ, 1998, с. 62-64.

187. Печеркин С.С. и др. Модель и вычислительный эксперимент для задачи многоуровневого управления // Сб. «Компьютерные технологии в горном деле», -Екатеринбург: УГГГА, 1999, с. 79-81.

188. Печеркин С.С. и др. Устойчивость, стимулируемость и распределенность многоуровневого управления // Сб. «Интеллектуальные информационные технологии в управленческой деятельности», -Екатеринбург: ИПК УГТУ, 2001, с. 244-251.

189. Печеркин С.С. и др. Математическая модель и алгоритмы многоуровневого управления // Сб. «Алгоритмический анализ некорректных задач», -Екатеринбург: УрГУ, 2001, с. 302-303.

190. Блохина С.И., Печеркин С.С. и др. Многоуровневое управление в медицинском учреждении // Сб. «Интеллектуальные информационные технологии в управленческой деятельности», -Екатеринбург: ИПК УГТУ, 2001, с. 274-281.

191. Волкова Г.Д. Концептуальное моделирование предметных задач в машиностроении, -М: Станкин, 2000, -98 с.

192. Ткаченко Т.Я. Инструментальная среда системотехнического обслуживания сложных объектов, -Екатеринбург: УГТУ-УПИ, 2002, -203 с.

193. Kosko В. Neural Networks and Fussy Systems. NJ: Prentice-Hall, 1991, -186 p.

194. Вохминцев A.B., Мельников A.B. Модель знаний на основе нечетких семантических гиперсетей для представления отношений между объектами в естественном тексте. // Сб. «Интеллектика. Логистика. Системотехника», вып.7, -Челябинск: ЧНЦ РАЕН, 2002, с. 21-32.

195. Рот К. Конструирование с помощью каталогов. -М: Машиностроение, 1995, -420 с.

196. Техническое творчество: теория, методология, практика/ Под ред. Половинкина А.И., Попова В.В. -М: НПО «Информсистема», NAUKA, 1995, -410 с.

197. Волкова Г.Д. Методология автоматизации проектно-конструкторской деятельности в машиностроении, -М: Станкин, 2000, -81 с.

198. Краснощеков П.С., Петров А.А. Принципы построения моделей. М: МГУ, 1983. -264с.

199. Разработка концептуальной модели, http://ssu.sumy.ua/~chekalov/teach/corce/dbase/ desktop/2/2 l.shtml

200. Lotus knowledge Management. Technologies and Products. http://lotus.com/lotus/km.nsf/wdocs/products. Microsoft Buseness Web Site Home. Knowledge Management, http:// www.microsoft.com/business/km/default.asp.

201. Гольдштейн С.Л., Печеркин C.C. и др Система знаний логопеда: фрагмент об управлении качеством речи пациента НПМУ // Сб. «Новые информационныетехнологии в исследовании дискретных структур», Томск: ТНЦ СО РАН, 2000, с. 112-117.

202. Гольдштейн М.Л., Печеркин С.С. и др. Средства формирования сервис- среды локальной сети суперкомпьютерного центра ИММ УРО РАН // Сб. «Алгоритмы и программы средства паралелльных вычислений», вып. 5., 2001, с. 82-96.

203. Системная интеграция, http://www.topsbi.ru/si/

204. Полная интеграция бизнеса в стиле IONA Technologies. http:// www.topsbi.ru/si/pps/borland-iona/#2

205. Barr A., Feigenbaum E., The handbook of Artificial Intellegens, vol 1,2 Pitman, 1981, 1982.

206. Юдин Э.Г. Деятельность и системность// Сб. «Системные исследования», ежегодник, 1976, -М: Наука, 1977. с 11-37.

207. Фатхуднинов Р.А. Управленческие решения. М: ИНФРН-М, 2001, -283с.

208. Бреховских С.М. Основы функциональной системологии материальных объектов, -М: Наука. 1986, 192с.

209. Арсеньев Б.П., Яковлев С.А. Интеграция распределенных баз данных. -СПб: Лань, 2001,-464 с.

210. Классики менеджмента: энциклопедия / Под ред. М.Уорнера, -СПб: Питер, 2001, 1146 с.1. ТОРГОВЫЙ ЦЕНТР1. АКТвнедрения результатов НИР и ОКР

211. Организационно-технические преимущества: новое качество управления в холдинговой компании и совершенствование ее структуры управления.

212. Социальный эффект: новое качество работы лиц, принимающих решения.

213. Р/счет № 40702810916490100164в Уральском банке СБ РФ. г. Екатеринбург

214. ОКПО 25078150. ОКОНХ 95400, 95120,

215. Корр./счет № 3010181050Q000000674 ИНН 6662024501 БИК 046577674за JL место в конкурсе программных продуктов

216. Первой Всероссийской конференции "ИНФОРМАТИЗАЦИЯ В ПЕДИАТРИЧЕСКОЙ НАУКЕ И ПРАКТИКЕ"1. СЕРТИФИКАТ1. CERTIFICATE OF MERITвыдан1. С.С. Печеркинучлену бригады разработчиков пакета программ

217. СИСТЕМНАЯ ИНТЕГРАЦИЯ В МЕДИЦИНСКОМ УЧРЕЖДЕНИИ" (Уральский Государственный Технический Университет.г.Екатеринбург)

218. Международный Межакадемический Союз INTERNATIONAL INTERACADEMIC UNION Свердловское региональное отделение)1. СЕРТИФИКАТ1. CERTIFICATE OF MERIT