автореферат диссертации по информатике, вычислительной технике и управлению, 05.13.18, диссертация на тему:Цифровая обработка малоконтрастных изображений, искаженных турбулентным слоем
Автореферат диссертации по теме "Цифровая обработка малоконтрастных изображений, искаженных турбулентным слоем"
На правах рукописи ООУ'* 1 " * —
0 6 ав г 2009
ПАХОМОВ АНДРЕИ АНАТОЛЬЕВИЧ
ЦИФРОВАЯ ОБРАБОТКА МАЛОКОНТРАСТНЫХ ИЗОБРАЖЕНИЙ, ИСКАЖЕННЫХ ТУРБУЛЕНТНЫМ СЛОЕМ
05.13.18 - математическое моделирование, численные методы и комплексы программ
АВТОРЕФЕРАТ диссертации на соискание ученой степени доктора технических наук
Москва 2009
003475109
Работа выполнена в Институте радиотехники и электроники РАН
Официальные оппоненты: Белолипецкий Александр Алексеевич
доктор физико - математических наук; Мандросов Валерий Иосифович доктор технических наук; Соколов Сергей Михайлович доктор физико - математических наук;
Ведущая организация: Институт систем обработки изображений РАН
I
Защита состоится С~> С-вЛийЛ^^ 2009 года, на заседании диссертационного совета ДМ521.019.01 при новом университете по адресу 105005, г. Москва, ул. Радио, д. 22, каб. 308.
С диссертацией можно ознакомиться в библиотеке ИРЭ.
Автореферат разослан (§ 2009 г.
Ученый секретарь диссертационного совета, /'/ // Растягаев Д.В.
кандидат физико - математических наук, доцент, начальник управления информатизации Российского нового университета
ОБЩАЯ ХАРАКТЕРИСТИКА РАБОТЫ
Актуальность работы. Работа посвящена математическим основам теории некорректных обратных задач в оптике, а также методам обработки и восстановления изображений по неполной информации об их Фурье-спектрах. Задача разработки таких методов является частью общей задачи устранения влияния атмосферных и оптических искажений при обнаружении и регистрации удаленных объектов на дальности 5-1000 км при плохих метеоусловиях. К числу оптических искажений относятся смазы и расфокусировка по дальности, а к факторам атмосферных искажений - туман, сумерки, восходящие атмосферные потоки и турбулентная атмосфера Земли. Решение рассматриваемой задачи вызывает большой интерес при наблюдении за удаленными космическими объектами, которые представляют собой поток фотонов, где на один кадр приходится от десяти до сотни фотонов.
Конечным этапом задачи обработки является автоматическое распознавание изображения или интересующего объекта. В данной работе для распознавания выделяются так называемые вектора - признаки или наиболее информативные участки изображения. Развитые в работе методы основаны на теории академика А.Н.Тихонова, которая известна в науке как регуляризация по Тихонову и фактически является развитием этой теории на случай обработки многомерных сигналов в задачах оптики, лазерной техники и астрономии. Математическая формулировка большинства подобных задач сводится к системе уравнений типа свертки. Для решения рассматриваемых задач в работе предложены новые подходы, основанные на последовательном улучшении оценки изображения путем согласования её с имеющейся априорной информацией о неискаженном изображении. При этом согласование с априорной информацией математически записывается в виде операторов проекции на соответствующие множества. Сами алгоритмы восстановления неискаженного изображения представляют собой последовательность операторов проекции, причем если соответствующие множества выпуклы, то подобные процедуры сходятся к истинному решению. Анализ однозначности решения подобных некорректных задач требует привлечения аппарата меры Лебега для оценки математической вероятности постороннего решения. При этом в двумерном и многомерном случаях подобные задачи, как правило, решаются однозначно, а в одномерном случае имеют счетное множество решений.
Наряду с теоретическими исследованиями представлены экспериментальные результаты по обработке изображений, полученных с помощью крупных отечественных телескопов. Представленные результаты отражают 20-летний опыт автора по эксплуатации,
созданию методик аттестации крупных отражательных телескопов на основе обработки изображений.
Цель работы. Разработка физико-математических основ и методов цифровой обработки малоконтрастных изображений, искаженных турбулентной атмосферой. Устранение этих искажений с помощью цифровых методов обработки и восстановление неискаженного изображения объекта, наблюдаемого оптическими приборами на большой дальности.
Задачи работы:
• нахождение необходимых и достаточных условий однозначного восстановления изображения по неполной информации об его Фурье-спектре;
• разработка общего регуляризирующего подхода к численному решению различных типов обратных задач на основе операторов проекции на выпуклые множества;
• разработка программного комплекса для проверки теоретических положений и новых методов обработки реальных космических объектов, слабых астрономических изображений и космических снимков Земли.
• разработка программного комплекса для изображений, наблюдаемых на горизонтальных трассах в условиях тумана, облачности или сквозь толщу воды, а также для обработки цветных искаженных изображений, регистрируемых современной фототехникой;
• построение трехмерных изображений по его двумерным проекциям;
• исследование методов автоматического распознавания восстановленного изображения и выделение устойчивого к шумам вектора-признака.
Научную новизну характеризуют следующие основные результаты диссертационной работы, выносимые на защиту:
• доказан ряд новых утверждений для гарантированной однозначности решения обратных оптических задач в практически важном двумерном случае. Утверждения относятся к таким задачам как, например, восстановление изображения только по фазе Фурье-спектра, только по амплитуде Фурье-спекла, только по тангенсу фазы Фурь-спектра, только по фазе и отношению модулей и т.д.
• проведено обобщение известного метода обработки слабых фотоотсчетных изображений с целью повышения точности восстановления изображения. Метод опробован при обработке серии из 1000 реальных изображений двойной звезды и получено двукратное повышение точности по сравнению с исходным методом
• биспектрального анализа. Суть метода сводится к повышенной точности
восстановления фазы неискаженного спектра и восстановлению изображения только по восстановленной неискаженной фазе.
• разработан общий регуляризирующий подход для обработки коротких серий изображений, искаженных атмосферой. Метод сводится к итерационному последовательному восстановлению неизвестных передаточных функций, после чего восстанавливается неискаженное изображение. При обработке реальных изображений полученных в белом свете метод приводит в 2-3 кратному повышению точности по сравнению с методом усреднения. При обработке изображений полученных в режиме узкополосной фильтрации метод приводит к 10-и кратному повышению точности.
• разработан ряд методов обработки только одного кадра изображения, искаженного смазом, расфокусировкой и амплитудным смазом. При обработке реальных изображений полученных в белом свете метод приводит в 2-3 кратному визуальному повышению точности по сравнению с исходным.
• разработан метод обработки когерентных изображений, сводящийся к формированию безопорной голограммы интенсивности и восстановлению из неё неискаженного изображения. Метод опробован в стендовых условиях и устойчиво работал в условиях аддитивных, мультипликативных и нелинейных шумах фотопленки.
• разработан метод обработки одиночных кадров изображений наблюдаемых в условиях сильного тумана, облачности, а также наблюдаемых через значительную толщу водной среды. При обработке реальных изображений полученных в белом свете метод приводит в 2-3 кратному визуальному повышению точности по сравнению с исходным.
• разработан метод цифровой обработки искаженных цветных изображений. Метод сводится к программно реализованному разложению на компоненты Я,в,В, обработке каждой из компонент и весовому или итерационному сложению обработанных компонент цветного изображения.
• разработан новый метод построения узоров для нужд текстильной промышленности. В качестве основы послужили фазовые распределения, вносимые атмосферой Земли, в которых заметен эффект объемности, после чего были синтезированы цветные композиции полученных узоров
• разработан новый пирамидальный метод оценки третьей координаты по двум двумерным изображениям, зарегистрированным с различных точек наблюдения. По сравнению с известным точечным методом обработке метод обладает 10 кратным повышением быстродействия, но примерно в 2-4 раза проигрывает в точности.
• выделен новый тип вектора признака для задачи распознавания изображений, основанный на выделений точек излома внешнего контура изображения. При практическом тестировании метод дает 90% вероятность правильного распознавания.
• Практическая значимость работы. Разработанные новые итерационные методы обработки и восстановления искаженных изображений с целью повышения разрешающей способности нужны и уже используются в многочисленных астрономических задачах при наблюдении очень удаленных и очень слабых источников излучения, что представляет несомненный научный и практический интерес. Другим практическим приложением данных методов является их применение в различных международных системах контроля космического пространства (СККП) для выявления и диагностики состояния спутников, долго находящихся на космических орбитах, диагностики и распознавания неуправляемых элементов космического мусора и заблаговременном оповещении о метеоритной опасности и принятия мер предосторожности. Большое значение методы обработки искаженных изображений имеют при решении транспортных задач, например, при посадке самолетов в условиях ограниченной метеорологической видимости, при движении судов в условиях тумана, а также при движении автомашин и колонн грузовиков в тяжелых метеорологических условиях для заблаговременного обнаружения встречного транспорта во избежание катастроф. Возможно применение этих методов в задачах обеспечения безопасности, например для пограничных застав, при наблюдении в пределах прямой видимости неизвестных судов, людей и автотранспорта для улучшения качества их изображений и визуального распознавания. Один из предложенных в работе методов обработки способен функционировать на телескопе с искривленным зеркалом, т.е. при неизвестных статических аберрациях, что позволяет экономить большие средства, которые пошли бы на исправление аберрационной карты. При обработке космических изображений, полученных, со спутников итерационный метод позволяет повысить разрешение примерно в 2 раза и увеличить точность дальнего обнаружения объектов. При посадке самолета в условиях тумана этот метод повышает безопасность пассажиров. Разработки автора в области создания новых методов обработки малоконтрастных изображений внедрены в программно - алгоритмическое обеспечение ряда радиооптических комплексов.
Новый метод проектирования двумерных узоров, обладающих эффектом объемности развит для нужд текстильной промышленности с учетом современных требований к качеству ее продукции.
Апробация работы. Результаты работ докладывались и обсуждались на семинарах НПО «Астрофизика», ИРЭ им. В.А. Котельникова РАН, ВЦ РАН, ИКИ РАН, CAO РАН (станица Зеленчукская), ОАО «МАК «Вымпел», ОАО «Гос «МКБ «Вымпел» им. И.И. Торопова», ОАО НПО «Радиофизика», ВИРТА ПВО им. Л.А. Говорова (г. Харьков), ХГУ, ГОИ им. С.И. Вавилова, СНИИ-45, НИИ судебной медицины, а также на следующих российских и международных научных конференциях: 5-я Международная конференция «Распознавание образов и анализ изображений: новые информационные технологии» (Н. Новгород, 2000, 2002), V Международная НТК «Физика и технические приложения волновых процессов» (Самара, 2006 г.), Ninth Int. Conf. «Pattern Recognition and Information Processing - PRIP 2007» (Minsk, 2007), Международная науч. конф. «Излучение и рассеяние электромагнитных волн - ИРЭМВ-2007» (Таганрог, 2007 г.), Second European Conference on Antennas and Propagation EuCAP 2007 (The EICC, Edinburgh, UK, 2007), VII Международная НТК «Физика и технические приложения волновых процессов» (Самара, 2008 г.).
По теме диссертации опубликовано 63 научные работы. Среди них 1 монография, 29 статей в ведущих Российских и зарубежных журналах "Доклады Академии наук СССР", "Радиотехника и электроника", "Оптика и спектроскопия", "Оптико-механическая промышленность", "Оптика атмосферы и океана", "Optics Communications", "Optical Engineering". По результатам работы автором получено 25 авторских свидетельств об изобретении. Полный перечень публикаций автора приведен в конце автореферата
Достоверность результатов работы подтверждается согласованностью результатов аналитического исследования, численного моделирования и физического эксперимента между собой, а также с результатами других авторов. Новые теоретические результаты получены с помощью строгой общепризнанной теории, такой как многомерная теория функций комплексного переменного и т.д. Все полученные автором новые соотношения снабжены подробнейшими строгими математическими выкладками, что также подтверждает их достоверность. Работы по основным результатам диссертации неоднократно цитировались как в отечественной, так и в зарубежной научной печати.
Личный вклад автора. Основные результаты, представленные в работе получены лично автором. Вклад автора был определяющим при разработке основных теоретических идей, постановке задач и выборе методов исследований, а также при написании статей, докладов и 25 изобретений. О приоритете автора в развитии данной тематики свидетельствуют выигранные им на конкурсной основе грант РФФИ № 05-07-90349-в (20052007 гг.) о создании системы обработки изображений реального времени, грант РФФИ (№ ■07-07-07005-д (2007 г.) о написании монографии (в соавторстве) по новейшим методам
обработки изображений и грант РФФИ № 07-08-00637-а (2007-2009 гг.) о создании пассивного оптического локатора для регистрации изображений.
Автором лично развит новый подход к решению обратных некорректных задач и сделан ряд программ, реализующих этот подход для широкого круга задач. Автором также разработан ряд методик по аттестации, измерению параметров оптических приборов; реализованы методики, позволяющие многократно повысить разрешающую способность оптических приборов в атмосферных условиях эксплуатации. Все перечисленные методики внедрены в оптические изделия и прошли успешные испытания на различных крупных наземных телескопах, расположенных на Северном Кавказе, с. Зеленчукская. Большую помощь при проверке теоретических выкладок и сложных аналитических выражений автору оказывали П.А. Бакут, A.A. Курикша и А.Д. Ряхин. При создании и программной реализации новых методов обработки и восстановлении изображений большую помощь оказали K.P. Лозин и Г.А.Смехова. Автор выражает искреннюю благодарность A.A. Потапову за творческие дискуссии и внимание к работе, а также сотрудникам лаборатории 152 В.Е. Анциперову и С. А. Никитову за общее руководство и поддержку исследовательских работ.
Структура и объем работы. Диссертация состоит из введения, трех глав, двух приложений, заключения, и списка литературы из 211 источников. Общий объем работы составляет 330 страниц, включая 120 рисунков.
СОДЕРЖАНИЕ РАБОТЫ
Во Введении обоснована актуальность проводимых в работе исследований, их научная новизна и практическая значимость, сформулированы цели и задачи диссертации, основные положения и результаты, выносимые на защиту, приведены сведения об апробации результатов и кратко изложено содержание работы.
В первой главе рассматриваются вопросы, связанные с моделированием и обработкой нескольких типов длинных серий изображений наблюдаемых снизу вверх через атмосферу на вертикальной трассе при различных режимах регистрации изображений. Также кратко рассмотрена задача формирования изображения через неоднородную среду. При рассмотрении вопроса формирования изображения через неоднородную среду показано, что амплитудные флуктуации мало влияют на процесс распространения излучения, а основной вклад вносят фазовые атмосферные искажения. В приближении Френеля-Фраунгофера произведен пересчет распространения поля от объекта к плоскости апертуры с учетом фазовьгх искажений и далее от апертуры к плоскости регистрации. В результате показано,
что регистрируемое изображение является сверткой неискаженного распределения интенсивности в плоскости объекта и передаточной функции системы атмосфера-телескоп.
На основе модели Колмогорова-Обухова рассмотрены статистические свойства атмосферной турбулентности и проведен пересчет аналитических выражений в инженерные программируемые модели. Структурная функция фазовых атмосферных искажений моделировалась по закону 5/3, а сами фазовые атмосферные искажения считались распределенными по гауссову закону с очень большой дисперсией, что близко к равномерному закону. Была проведена дискретизация апертурной плоскости и плоскости регистрации и получены соотношения неопределенности, связывающие угловые размеры апертурной плоскости и плоскости регистрации.
Рассмотрено понятие параметра Фрида - радиуса корреляции фазовых атмосферных искажений г0, и введено число МА =(О/г0)г »1, определяющее количество независимых фазовых корреляционных ячеек в апертурной плоскости. Вторым параметром, характеризующим степень атмосферной турбулентности, является дисперсия фазовых атмосферных искажений. В конкретной программной реализации имитатора она составляла ?г/2, т.е. максимально возможную величину. Используя введенное выше число Мл, можно сделать следующий качественный вывод: при й = г0 регистрируемое изображение будет неискаженно, а его разрешение ограничено только дифракцией от апертуры; при этом изображение точечного источника будет представлять собой картину Эри. В другом предельном случае £)/г0 »1 изображение точечного источника будет состоять из набора интерференционных всплесков, число которых равно (£>/г0)2, и в этом случае изображение протяженного объекта сильнейшим образом искажено. В работе приведен алгоритм моделирования искаженных изображений в зависимости от отношения £)/г0 и величины остаточных аберраций при фиксированной дисперсии фазовых атмосферных искажений. Программа позволяет моделировать искаженные изображения протяженных и точечных объектов. Результаты моделирования приведены в диссертационной работе и использовались для проверки правильности работы методов последетекторной компенсации атмосферы. Теоретические особенности и описания алгоритмов, частично описанных следующих работах [1-9].
Далее рассмотрены модификации метода тройных корреляций (ТК). В настоящее время для обработки искаженных атмосферой изображений наиболее часто используются методы Нокса - Томпсона [10 - 15] и тройных корреляций [15 - 24], позволяющие восстановить фазу Фурье-спектра изображения с точностью до остаточных аберраций телескопа. Каждое к - е регистрируемое изображение представляет собой свертку истинного
изображения с импульсным откликом системы атмосфера - телескоп [25, 63]. Переходя в область пространственных частот, мы приходим к уравнению вида
Л(/)=о(7)я»(7), (I)
где / - пространственная частота, Jk(f)- спектр к - го искаженного изображения, 0(/)-спектр истинного изображения, Нк (/) - передаточная функция системы атмосфера -телескоп при регистрации к - го изображения.
Метод тройных корреляций заключается в вычислении усредненного Фурье - спектра на замкнутых частотах, т.е. / = / + /2:
{Л(7,)Л(7:)-А(7, +Ц=0(1)0в1)0\1 +f1){HkCfl)Hk(f1)Hk\ji+f1)). (2)
В формуле (2) скобки <...> обозначают символ статистического усреднения; а tf t(7)= jdrw(r)w(r - Л/) ехр ¡[ц/(г)-ц/(г - Я/)}ехр i {ft (г) - <pk (г - lf)\ - Фурье-спектр к- го
искаженного изображения точечного источника (передаточная функция системы атмосфера -телескоп); w(F) - функция зрачка телескопа, равная 1 в пределах апертуры и 0 вне ее; у/(г) - статические аберрации телескопа; <pt(r) - фазовые атмосферные искажения. Три последних сомножителя в (2), зависящие от атмосферы, остаточных аберраций и оптики телескопа называют передаточной функцией метода. В случае однородной и изотропной атмосферы и гауссовой статистике атмосферных искажений, передаточная функция метода является положительной функцией, вид которой детально рассмотрен в многочисленных работах, посвященных исследованию этого метода [27].
Приравнивая фазы спектра в (2), получаем: arg Г, = arg Г0 + arg Тн, где argTj - фаза спектра правой части, argT0 - фаза первого сомножителя в левой части, arg7"H - фаза передаточной функции. Поскольку в отсутствии аберраций последнее слагаемое равно нулю, это позволяет восстановить неискаженные фазы спектра изображения на замкнутых частотах. Еще одна очевидная особенность метода состоит в нечувствительности (7) к линейным сдвигам обрабатываемых изображений, при этом отпадает необходимость их центрирования перед обработкой. Из формулы (2) следует:
а^=ф(7)+<р(72)-ф(7+72), (з)
где ф(7) = arg {0(7)} - неизвестное фазовое распределение Фурье-спектра неискаженного изображения.
Решение линейной системы (3) относительно ср(/) является основной задачей метода тройных корреляций. Выражение (3) еще называют соотношением замкнутых фаз, позволяющие выражать значения фазы (p{Jx + f¡) через два других значения на меньших частотах. Так, например, на основании (3) возможно построение рекуррентной формулы для значений фаз в узлах / = р&/{ + qAf2 решетки с базовыми векторами Af¡ и Д/2. Рекуррентная процедура восстановления неискаженной фазы заключается в восстановлении фазы на высоких пространственных частотах по ее значениям на низких частотах [34 - 40, 63].
Точность восстановления фазы можно существенно поднять, если организовать итерационную процедуру последовательного улучшения оценки фазы. Детальный вид итерационной процедуры сводится к анализу усеченного варианта тройной корреляции, формированию простым суммированием начальной оценки фазового распределения и ее улучшению методом последовательных приближений по замкнутому циклу. При этом, как показали экспериментальные исследования, примерно за 30 - 50 итераций процесс восстановления фазы устойчиво сходится, а ошибка восстановления фазы нарастает в зависимости от пространственной частоты по логарифмическому закону в отличие от метода простого интегрирования с заданными начальными условиями. Восстановление фазы с учетом веса измеренной корреляции на каждой частоте также быстро и устойчиво сходится за 20 - 30 итераций.
Для восстановления неискаженного изображения автор использовал только восстановленное фазовое распределение. Суть процесса восстановления сводилась к последовательному улучшению оценки изображения в плоскости изображения и в Фурье-плоскости путем наложения на изображение условий пространственной ограниченности и положительности и в Фурье-плоскости при замене фазового распределения на заданное. Не останавливаясь здесь на деталях этой процедуры, отметим, что такой процесс устойчиво сходится за 100 - 200 итераций при наличии значительных шумовых помех.
Метод тройных корреляций незаменим при обработке серий слабых фотоотсчетных изображений, поскольку у таких изображений нет центра тяжести, и поскольку суть ТК сводится к накоплению сигнала специфическим образом. Фототсчетные изображения
к
представляют собой случайный набор импульсов вида: j(x)=^S(x - х^), где к - общее
к. 1
число зарегистрированных в изображении квантов, распределенное по закону Пуассона
/\к
^^ ~ кГЭТ0М ^ " °Реднее' а ~~ координаты квантов, независимо
распределенные в плоскости регистрации х с плотностью вероятности /(í).
В этом случае ТК фототсчетных изображений в плоскости изображения записывается
к к к
в виде: Г,(^1,3с2) = ^ ^ ^ 8(3с, +хк-х,)Ь(хг + хк-*„), из которого следует, что теперь
¿=1 /=| гл=!
расчет ТК может быть сведен к вычислительно простой, эффективно реализуемой в машинных кодах операции формирования разностных координат импульсов
изображения.
Для проверки модифицированного метода тройных корреляции, автор получил серию спекл - изображений в узком спектральном диапазоне (ДА. = 0,012 мкм, А. - 0,6 мкм) на метровом телескопе, расположенном на Северном Кавказе в с. Зеленчукская. Избранные результаты обработки приведены далее на рис. 1 и 2 [63].
(б)
Рис. 1. Результаты обработки серии из 1000 фотоосчетных изображений модифицированным методом тройных корреляций: (а) - типичное слабое изображение, (б) - восстановленное изображение двойной звезды.
(а) (б) (в)
Рис. 2. Спекл-изображение одиночной звезды 4-й звездной величины (а), длинноэкспозиционное изображение звезды с угловым размером 3 секунды (б), результат обработки (в) серии из 100 изображений методом тройных корреляций (угловой размер 0,5 секунды).
Из приведенных экспериментальных результатов видно, что модифицированный метод тройных корреляции позволяет получить разрешение, ограниченное только
остаточными аберрациями зеркала телескопа и вполне пригоден для обработки изображений стационарных объектов.
Далее рассмотрим обработку объектов, быстро-меняющих свой ракурс. Рассмотрим исходную систему уравнений (1) при отсутствии аддитивных шумов. Для получения оценки изображения 0(<5) при условии, что передаточные функции #„(¿3) известны, воспользуемся критерием вида:
Г = |/„ (5) - 0(т)Нп (ш)[2 ¿5) = тт. (4)
Найдем минимум (4) по О, отбрасывая зависимость от частоты ¿5 и считая О и Я,
независимыми функциями. Дифференцируя подынтегральное выражение по О' и приравнивая результат к нулю, получаем оценку изображения:
п
0=1/Ж/£|Я„|2. (5)
Подставляя полученную оценку изображения (5) в исходный функционал (4), после ряда громоздких выкладок и использования очевидных тождеств, приходим к следующему выражению:
¿/„я;
Таким образом, исходный функционал (4) принимает окончательный вид (6). Для нахождения оценок Нт, необходимо продифференцировать (6) по Нт и приравнять результат к нулю. После громоздких выкладок получим выражение для оптимальных в смысле метода наименьших квадратов оценок передаточных функций в виде:
я„=/„£/х/£|/„12. (7)
п-1 п-1
Алгоритмическая идея предлагаемого метода заключается в последовательном улучшении оценок передаточных функций Нт путем согласования с имеющейся априорной информацией о передаточной функции. Подобная циклическая процедура строго и быстро сходится к истинному решению, и с ее помощью можно восстановить неискаженные атмосферой оценки передаточных функций. Затем при обратном Фурье-преобразовании (10), восстанавливается неискаженное изображение.
Эту процедуру можно записать [41 - 44] на языке операторов проекции на соответствующие множества, а именно, Оы=ТхТгОк, где к - номер итерации; Г„Г2 -обобщенные операторы проекции на множество положительных финитных функций и на множество функций вида (7). Здесь 7^ = 1 + А, (/}. -1), где - обычный оператор проекции; 1 - единичный оператор, не меняющий значения функции; Л1 е (0,1) - релаксационный множитель. Для анализа сходимости подобных алгоритмов используется следующее утверждение, являющееся следствием теоремы о сжимающихся отображениях (теорема о точке). Справедливо следующее утверждение [45,46]:
Утвервдение 1. Пусть восстановление О осуществляется по схеме: Ок^1=Т1Т1...ТпОк,
где множества С,, соответствующие операторам Р,, выпуклы. Тогда, если множество С0 =С, п С2 п С,... о С„ непустое, то для любой начальной оценки Оя и V ^ е (ОД) последовательность {Ок] сходится к О, е С,.
Можно доказать что все участвующие в процессе восстановления априорные ограничения? такие как множество положительных, множество финитных функций и множество функций вида (7) - выпуклы, и поэтому алгоритм монотонно сходится. На основе приведенных в первой главе теорем о неразложимости многомерных полиномов [47, 48], легко доказать однозначность восстановления истинного изображения.
При моделирований и обработке реальных изображений в знаменатель (5) добавлялся регуляризирующий множитель вида с|ш|2, где с - управляемая константа. Начальная оценка выбиралась в виде случайных импульсов, разнесенных на величину, равную расстоянию между центрами тяжести изображений. При этом для восстановления изображения достаточно 10-20 итераций. Обработку можно свести к долям секунды. Устойчивость алгоритма к аддитивным шумам регистрации проверялась при добавлении к модельным, искаженным имитатором атмосферы, изображениям аддитивного гауссовского шума. Алгоритм быстро и устойчиво сходится при отношениях сигнал/шум
Дальнейшие исследования метода проводились при обработке реальных изображений, полученных на одном из телескопов, расположенных в районе Северного Кавказа (рис. 3).
(а) (б)
Рис. 3. Результаты обработки изображений международной космической станции (МКС):
(а) - исходное, (б) - обработанное (Изображения получены в 2003 г. на дальности 900 км на одном из телескопов с. Зеленчукская, Северный Кавказ).
Обработка серии спекл-изображений точечного источника этим методом показала, что разрешение по сравнению с атмосферным повышается примерно в 15 раз. При среднем атмосферном разрешении 3 угловые секунды описанный метод дает разрешение 0,15 угловых секунды. Последняя цифра означает, что метод дает дифракционное разрешение.
Во второй главе рассматривается наиболее актуальная в настоящее время задача обработки одного кадра, зарегистрированного искаженного изображения при произвольных и специфических типах искажений. Рассмотрим сначала обработку изображений, искаженных амплитудным смазом.
В целом ряде оптических задач, регистрируемое изображение часто бывает искажено смазами: наблюдаемый объект смещается во время экспозиции, или существенно влияние изотропной среды распространения. Исходное регистрируемое изображение представляет собой свертку, а Фурье-спектр имеет вид (1). При наблюдений космических объектов с длинной экспозицией передаточная функция близка к гауссовскому распределению и является действительной и положительной функцией [49]. Если наблюдение объектов происходит не только с длинной экспозицией, но и в белом свете (имеет место дополнительное усреднение по длинам волн), то передаточную функцию можно считать круговой гауссоидой с неизвестной дисперсией а и нулевым средним. Стандартным методом устранения подобных искажений является Винеровский фильтр и его многочисленные модификации [50]. Основной недостаток этого метода - необходимость точного знания передаточной функции.
В настоящей главе предлагается иной подход к решению этой задачи. Поскольку в перечисленных выше случаях #(ш) - вещественная положительная функция, то (1) можно записать следующим образом:
/(®,,й>2) = 0(ш,,а>2)|Я(а>,,а>2)|. (8)
Приравнивая в обеих частях (8) фазовые распределения, приходим к выводу, что фаза 0(5) неискаженного спектра 0(са,,<а2) совпадает с фазой <р(й) искаженного спектра /(о,,<в2), те- фазовое распределение неискаженно, а искажается только амплитудное распределение спектров. В этом случае задачу восстановления неискаженного изображения при искажении, например, гауссовым смазом, можно переформулировать как задачу восстановления неискаженного изображения только по фазе его Фурье-спектра. Вообще говоря, из (8) можно извлечь еще один тип неискаженной информации, если учесть круговую симметрию передаточной функции Я(о),,<1)2) = Я(|ю|). Приравнивая только амплитудные распределения, получаем:
|/(ю„(о2)| = |0(со1,<в2)||я(|5|)|. (9)
Если развернуть (9) на произвольный угол и разделить его на исходное выражение, то можно выделить неискаженное отношение модулей. В случае разворота на 90°, неискаженное отношение имеет вид:
сг(й>„й>2) = |/(<и„®2)|/|/(«2,-®1)| = |0(©1,й)2)|/|0(й)2,-<и,)|. (10)
Таким образом, исходная задача может быть переформулирована двумя способами:
1) Восстановление изображения о(х) по фазе 0(й) его спектра или ехр/0(5):
а (<у,, й)2) = ехр 10(5). (11)
2) Восстановление изображения о(5)пофазе 0(5) и отношению модулей спектра:
а(а>,,<и2) = [0(й>,, сог )| /|0(й>2 )| ехр /0(<у). (12)
При обработке изображений, искаженных симметричным смазом, обусловленным движением наблюдаемого объекта, передаточная функция смаза Я(ш„<а2) имеет вид Л'лсО -функции и является действительной. Фурье-спектр такого изображения Ф(о„<а2) имеет вид: Ф(й>,,й>2) = Р(ц,еог)Н(со1,шг), где^(а„а)2) - Фурье-спекгр неискаженного изображения, а,,а)2 - пространственные частоты. Поскольку Я(м) - действительная функция, то можно записать: Я"(со„со2) = Я(й)|,шг) = Я(-(в1,-й)2). В этом случае неискаженное отношение а(сй,,0)2) запишется в следующем виде:
а(й11,а>1)= Ф(й),, «г) / Ф" (о),, й)2) =/Г((У1, й)2) / ^' («,, й)2 ) = ехр {/' 2р(<3)} = ехр{/2©(5)}, (13)
где <р(й) и 0(5) - фазы Фурье - спектров искаженного и неискаженного изображений соответственно.
Если имеются дополнительные аберрации типа дефокусировки, обладающие круговой симметрией [51], то передаточная функция #(5) в этом случае обладает также круговой
симметрией: Я(ш) = Н(¡¿¡|). Фурье - спектр Ф(ш,,ш2) искаженного изображения имеет вид Ф(ш,,<в2) = /•"(¿¡|,<52)Я(|<5|), где F(со,,ю2) - Фурье - спектр неискаженного изображения J(x{, лг2). В этом случае неискаженное отношение а(ш,,т2) запишется в следующем виде:
а(о)„ й)2) = Ф(й>,, й)2)/Ф(ш2, -ol) = F(coi,w1)lF(w2, -а,). (14)
Таким образом, сформулированы четыре типа некорректных задач, где необходимо восстановить неискаженное изображение по известным отношениям в Фурье-плоскости, а именно: (11), (12), (13), (14). Однозначность восстановления сводится к доказательству следующих новых утверждений, а сами доказательства приведены в работе.
Утверждение 2. Ecnuz-образы Л, (г) и ЛД?) изображений Кп) и J(n) не имеют в своем разложении нетривиальных, симметричных множителей и <р, (5) = <ру (ö) V 5, то 1{п) = cj(n), где с > 0. Задача (11).
Утверждение 3. Пусть изображение J(n) отлично от нуля в пределах области S и <р, (5) = <Pj (ö) V й. Если R, (г) не имеет в своем разложении нетривиальных, симметричных множителей, то I(n) = cJ(n). Причем с> 0, если <р( (ш) = (р^ (ö). Задача (11).
Утверждение 4. Пусть неизвестное двумерное изображение 0(п) отлично от нуля в пределах заданной области S. Задача восстановления (12) реишется однозначно при условии О(й) ^ |0(й)|, а задача восстановления (13) реишется однозначно при условиях О(й) *|0(й)|и одновременно 0(й),,й)2) # 0(й)2,-й),). Приведенные условия справедливы с точностью до линейного сдвига изображения. Задача (12).
Утверждение 5. Пусть изображение J(n) отлично от нуля в пределах области S и tgip,(¿3) = tg<Pj(<S) V ¿Г) (восстановление из (13)). Если R,(z)He имеет в своем разложении нетривиальных, симметричных множителей, то 1(п) = cJ(n). Причем с > 0, если tg<P, (<") = tg<pj (5) -Задача (13).
Утверждение 6. Пусть изображение J(n) отлично от нуля в пределах области S и Fj (й),, <а2) = Fj (а>г ,-й),) V ¿3. Если R, (?) не имеет в своем разложении нетривиальных,
симметричных множителей, то 1(п) = а/(п). Причем с> 0, если (ю,, «и2) = (сог ,-й),). Задача (14).
Для восстановления изображения по неполной информации используется модификация метода циклического улучшения оценки изображения в соответствии с имеющейся априорной информацией [52]. Если изображения очень сложные, и размеры определены с большой погрешностью, то число итераций может достигать несколько тысяч. Поэтому актуальной является задача ускорения сходимости проекционных алгоритмов и управления сходимостью с помощью адаптивных релаксационных параметров. Рассмотрим общую схему восстановления [53, 63]:
Ли = да, Л , (15)
Здесь Г, = (1-Л,)/+ Л,Р), Р, - обычный оператор проекции, /-единичный оператор, не меняющий значение функции, Л, е (0,1) - релаксационный множитель.
Поставим задачу получения аналитических соотношений для X,, и использование при восстановлении изображения схемы (15) с адаптивными множителями X,. Для этого необходимо минимизировать разность Е = |/ - 7У|2 путем выбора соответствующего значения Л. Запишем выражение для невязки Е: £ = | / - Г./| . Дифференцируя выражение
для Е по Л, и, приравнивая нулю, получаем оптимальное значение Я. в виде
, Kc(í-J,PJ-J) , Re(I~PJ,PJ-J) „,.
Л =-:-= 14--:-. (10)
\PJ-Jf \PJ~Jl1
В соотношении (16) введены следующие обозначения (/,./) = Ц' - скалярное произведение двух элементов функционального пространства, / - истинное изображение, J — оценка изображения на (к - 1)-й итерации, PJ - оценка изображения после применения оператора Р. Чтобы применить (16), необходимо сделать некоторые предположения относительно I, поскольку это истинное решение, которого мы не знаем. Попытка вычислить оптимальное X по положительности в области изображения приводит к результату = 2, что не является переменной величиной. Попытка вычислить оптимальное X по финитносги в области изображения приводит к результату Л2°"" =1, что также не является переменной. Попытка вычислить X,0™" для оператора проекции на множество функций с заданной фазой приводит к адаптивному выражению с индексом к (номер итерации):
^ «™ _ 1__со5(в»(м)-ф(ю)1<0_
XК (®1> ®2 )|2Со.г2 [вь (ё) - ф(ш)]
Аналогичное вычисление параметров оптимизации можно провести и для задачи восстановления по фазе и отношению модулей, однако в области изображения, как показано выше, она бессмысленна, а в области спектра - слишком сложна. Применение расширенных операторов проекции ускоряет процесс сходимости примерно на 30% , что актуально при обработке сложных изображений. Примеры обработки реальных изображений приведены на рис. 4 и 5.
(а)
(б)
Рис. 4.
(в) (б)
Рис. 5. Обработка смазанных изображений спутника Юпитера Ио: (а)-исходное, (б)- обработанное.
(Изображения получены космическим телескопом Хаббл).
Произвольный тип искажений при полностью неизвестной передаточной функции и неизвестных аддитивных шумах полностью устранить практически невозможно. Для обработки подобных изображений автором использовались итерационные процедуры устранения неравномерного фона, а затем применялись многопроходные Винеровские и кепстральные фильтры. В обработку были включены как изображения искаженные туманом в видимой части спектра, так и тепловизионные изображения (рис. 6-10).
Обработка спекл-изображений неизвестных объектов: (а) - исходное, (б) - обработанное. (Изображения получены космическим телескопом Хаббл).
. ра? - - ^ - Щ
(«). (б) Рис. 6. Примеры обработки изображений жилых зданий в условиях сильного тумана: (о) - исходное, (б) - обработанное. (Снимки получены фотокамерой на дальности 3-5 км).
(«) (б)
Рис. 7. Примеры обработки изображений Земной поверхности: (а) - исходное,(б) - обработанное. _(Снимки получены из Интернега).
(я) (б)
Рис. 8. Примеры обработки изображений жилых зданий в условиях сильного тумана: (а) - исходное, (б) - обработанное. (Снимки получены фотокамерой на дальности 3-5 км).
(я) (б)
Рис. 9. Примеры обработки изображений жилых зданий в условиях сильного тумана: (а) - исходное, (б)- обработанное. (Снимки получены фотокамерой на дальности 3-5 км).
(а) (б) (в)
Рис. 10. Обработка изображения моста в условиях сильного тумана: (а) - исходное, (б) - обработанное, (в) - эталонное. (Снимки получены фотокамерой на дальности 3-5 км).
Третья глава посвящена решению ряда прикладных задач, относящихся к различным направлениям народного хозяйства. К таким задачам относится, например, голография без опорного пучка и, в частности, конечная задача восстановление изображения или поля по амплитуде его Фурье-спектра, а также усложненные варианты этой задачи - восстановление изображения по отношению модулей или по нескольким модулям спектра; методы построения стереоскопических узоров для текстильной промышленности; построение трехмерной формы изображения по его двумерным проекциям (стереосинтез); создание устойчивого набора признаков для распознавания неизвестного изображения при наличии базы данных эталонов и т.п.
Рассмотрим сначала восстановление изображений по амплитуде его Фурье-спектра (фазовая проблема). Рассмотрим еще раз исходную постановку задачи (6). Допустим, что передаточная функция имеет следующий вид:Я((а,/и2) = ехр ¿(»(¿у,, ш2.), где ср{сох,а)г)-случайные фазовые искажения. Можно выделить неискаженный модуль Фурье-спсктра и получить соотношение вида |/(ет1,су2)|=|0(би1,й)2)|. Возводя в квадрат, и беря обратное
Фурье-преобразование, приходим к уравнению автокорреляции <2(х) = |о(?)о(? + х)с!х. Уравнение автокорреляции и необходимо решить относительно изображения о(х).
Как было показано [54], аналитические решения фазовой проблемы с помощью уравнений Гильберта проблемы возможны для довольно узкого класса изображений и, в частности, имеющих в своем распределении точечный источник. Наиболее перспективными с точки зрения автора методами практического решения задачи являются ранее описанные методы проекции на выпуклые множества:
(27)
где Jk - оценка изображения на к-ой итерации, Рх - оператор проекции на множество положительных функций, Рг - оператор проекции на множество финитных функций (с заданной областью Р3 — оператор проекции на множество функций с заданным модулем Фурье - спектра.
Из определения оператора проекции [55] непосредственно следуют выражения для
/(л) при пе5,
й 5 В г И") "Р" й,
операторов Р1,Р1: Р,1 = \п ... Рг1 =
[О при 1(п) > О,
О при п й 5,
где 1(п) - любая действительная функция.
Определим вид оператора Рг. Опуская промежуточные выкладки легко получить, что
оператор Р} имеет вид: = Jt(x)A(x)/pk(x)\, тле ■/,(*) = £{/к}, Р" - оператор Фурье -
преобразования, А(х) - заданный модуль Фурье - спектра. Однозначность восстановления изображения по модулю Фурье-спектра гарантируется следующими утверждениями. Доказательство приведены в диссертационной работе.
Утверждение 7. Если г-образы /?,(?) и ЛД?) изображений /(Я) и J{n) не имеют в своем разложении нетривиальных, симметричных множителей и А, (¿5) = ^ (5>) V 5, то /(Я) = сУ(й), где с > 0.
Утверждение 8. Пусть изображение J{n) отлично от нуля в пределах области 5 и А, (со) = AJ (¿3) V й. Если Я,(г) не имеет в своем разложении нетривиальных, симметричных множителей, то 1(п) = с!(Я). Причем с> 0, если А, (со) = А} (а).
Для анализа сходимости алгоритма (17) обычно используется Утверждение 5, которое гарантирует сходимость к истинному решению, если соответствующие операторы проекции множества выпуклы. Можно показать, что операторам Р, и Рг соответствуют
выпуклые множества; однако множество, соответствующее оператору Р\ - невыпуклое. Это обусловливает необходимость более подробного исследования его сходимости. Экспериментальный анализ показывает, что ошибка в процессе восстановления уменьшается, т.е. алгоритм сходится, однако очень медленно. Поэтому была использована комбинированная схема восстановления. Запишем алгоритм в следующем виде:
при а = 1 — алгоритм «встряски». Под Гж понимается область, объединяющая операторы
Алгоритм восстановления сводился к чередованию 10 итераций при а = 0 и 10 итерации при а = 1. Число циклов чередования примерно 3 - 4 и уровень среднеквадратичной ошибки восстановления составляет 1%, что вполне отвечает всем критериям на качество восстанавливаемого изображения. В качестве начальной оценки выбиралась реализация равномерного закона во всем поле изображения. Определение размеров изображения (области 5) проводилось пороговой фильтрацией автокорреляции по уровню 0,1 от максимального ее значения. При ошибках в сторону увеличения не более 50 % алгоритм продолжает работать, но число итераций увеличивается в 5 раз.
При практическом восстановлении необходимо связать число отсчетом модуля спектра и число отсчетов изображения. Суть задачи здесь заключается в определении линейного размера объекта и связи его с размером всего кадра изображения и размером автокорреляции изображения. Пусть изображение и массив - квадратные и К - размер изображения, М - размер массива Фурье - плоскости, т.е. Кт1„ < МП. Более тонкие оценки при построчном вытягивании автокорреляции в одномерный аналог и, соответственно
2
двумерного изображения в одномерное, приводят к следующему: КтА% < —М.
Перейдем теперь к теоретическому рассмотрению вопроса устойчивости при наличии шума. В одномерном случае справедливо следующее новое утверждение [56]:
Утверждение 9. Для того чтобы одномерная действительная и симметричная последовательность была автокорреляцией {()„}, необходимо и достаточно, чтобы ее Фурье - спектр был положителен.
К сожалению, на двумерный случай этот результат не обобщается и справедливо новое противоположное утверждение, вида:
Здесь при а = 0 получаем обычный оператор проекции,
пё Г4.
проекции Р1 и Рг. Коэффициент р выбирался из интервала (0,1).
Утверждение 10. Мера Лебега подмножества автокорреляций {б»,»,} из множества всех действительных и симметричных последовательностей } с
положительным Фурье - спектром равна нулю.
В этом смысле двумерная фазовая проблема неустойчива - шум будет приводить к отсутствию точного решения. Однако многочисленные эксперименты показывают, что всегда существует приближенное решение в виде изображения, автокорреляция которого близка к зашумленной, а само изображение оказывается близким к истинному. Далее возникает вопрос об ошибке восстановления. Из уравнения автокорреляции сразу можно получить грубую качественную оценку ошибки восстановления изображения при заданной ошибке автокорреляции (или квадрата модуля): 5у = ■
При экспериментальном исследовании шумовых характеристик фазовой проблемы исследовались два вида шумов: мультипликативный и аддитивный. Результаты исследований устойчивости задачи к этим видам шумов подтвердили корневую связь между ошибкой модуля и ошибкой изображения. А также подтвердили общую устойчивость задачи. Для исследования устойчивости задачи к влиянию нелинейных шумов фотопленки автором был поставлен простейший физический эксперимент. Плоская волна, полученная с помощью гелий-неонового лазера (А. = 0,63 мкм) и коллиматора, была пропущена через маску, играющую роль изображения, с пропусканием в пределах области, по форме, совпадающей с цифрой «4». При помощи собирающей линзы с фокусным расстоянием £ = 500 мм было осуществлено Фурье - преобразование излучения, и его интенсивность была зарегистрирована фотоаппаратом в фокусе линзы — рис. 11.
Автором был также рассмотрен усложненный вариант задачи восстановления изображения по модулю его Фурье-спектра - задача восстановления изображения по отношению модулей Фурье-спектра и близкие задачи восстановления изображения по нескольким модулям Фурье спектра. Доказан ряд новых теорем об абсолютной гарантированной однозначности восстановления по неполной информации в непрерывном случае. Эти задачи актуальны при астрономической постановке задачи наблюдения удаленных объектов с использованием метода Лабейри [57].
' ^ , -" ; Vл-с.*"-
г
4
(о) (б)
Рис. 11. Восстановление модельного изображения из безопорной голограммы интенсивности: (а) - изображение зарегистрированного модуля Фурье - спектра; (б) - восстановленное изображение после 30 итераций.
Вернемся к исходной постановке задачи и усредним модули (1) по серии изображений с постоянной ориентацией: ^|/(<й)|2^ = |0(<3)|2^. Анализ атмосферной турбулентности
приводит к выводу об изотропности фазовых искажений, тогда приходим к выводу, что второй сомножитель также имеет круговую симметрию. Если развернуть последнее уравнение на произвольный угол и разделить на исходное уравнение, то можно выделить неискаженное отношение модулей и попытаться восстановить по нему исходное изображение. Если угол разворота 90°, то отношение модулей будет иметь вид:
а(а>) = \0{сох,сог)\1\0{сог,-со,)\ . Однозначность восстановления изображения по а (со) в двумерном и многомерном случаях не вызывает сомнения, и подробно описана в тексте работы. Она сводится к анализу разложимости двумерных полиномов. Детальный анализ показывает, что задача однозначна за исключением изображений, обладающих круговой симметрией. Схема итерационного алгоритма также очевидна:
Л.1 = АААл. (18)
Здесь новым является Д - оператор проекции на множество функций с заданным отношением модулей Фурье - спектра. Виды операторов проекции на множества положительных и финитных функций аналогичны вышеописанным для фазовой задачи. Оператор проекции Рг имеет вид:
- 1Лео,, со,) , 1Л(®2 ,-®,)| + а(й)„®2)|Л(®1.®2)|
=17 , а(со''Шг)-Г7--'
Все обозначения аналогичны используемым для фазовой проблемы. Легко показать, что все операторы проекции соответствуют выпуклым множествам, а математическое
моделирование подтверждает монотонную сходимость для простых изображений. Исследования устойчивости к шумам, аналогичные для фазовой задачи, показали, что ошибка восстановления изображения при добавлении в спектр аддитивных и мультипликативных шумов нарастает по кубическому закону, либо по закону четвертой степени.
Перейдем к экспоненциальной фильтрации изображений. Как следует из анализа рассмотренных задач восстановления изображения по модулю или отношению модулей его Фурье спектра, при практической реализации этих методов желательно повысить их устойчивость к шумам и расширить класс однозначно восстанавливаемых изображений. Для этой цели можно использовать так называемую предварительную экспоненциальную фильтрацию изображений. Легко видеть, что умножение обеих частей уравнения свертки на затухающую экспоненту вида ехр(-ей), приводит к тому, что экспонента проникает под интеграл типа свертки. Поэтому если осуществить Фурье-преобразование экспоненциально отфильтрованных искаженных изображений и усреднить модули их спектров, то можно получить еще один дополнительный модуль спектра что позволит получить гарантированную однозначность и существенно повысить устойчивость процесса восстановления и ускорить сходимость. Для гарантированной однозначности непрерывного двумерного случая фазовой проблемы автором доказано следующее новое утверждение:
Утверждение 11. Финитная функция J(x) однозначно определяется модулями ее
Фурье - спектра |7(5)| и модулями Фурье - спектров |У,(5)| и [72(й5)| двух ее
экспоненциально отфильтрованных аналогов, векторы, фильтрации которых, неколлинеарные. Доказательство в приложении к работе.
Для дискретных изображений, распределения которых описываются наборами {■/„,„., Ойт<М, 0<п<Ы), двумерную задачу удается свести к одномерной, путем построчного вытягивания изображения. В результате заключаем, что при специальном выборе направления фильтрации для однозначного восстановления (•/„,„) можно ограничиться двумя Фурье - модулями. Более того, как было показано в [58], всегда можно выбрать такой коэффициент фильтрации уо одномерного дискретного изображения Ок, что Фурье - спектр экспоненциального аналога (ЭА) изображения не будет иметь нулей в верхней полуплоскости (а>0), и для восстановления фазы можно воспользоваться одномерным преобразованием Гильберта [59].
Таким образом, проведенный анализ показал, что для гарантированного однозначного восстановления в самом общем случае непрерывного двумерного изображения достаточно знания исходного Фурье - модуля и двух Фурье - модулей ЭА с неколлинеарными векторами
фильтрации. В практически важном случае дискретного изображения при специальном выборе вектора фильтрации можно обойтись только одним Фурье - модулем ЭА. Для задачи восстановления изображения по отношению модулей Фурье-спектров использование дополнительных модулей от экспоненциально отфильтрованных изображений позволяет сформировать еще одно дополнительное отношение модулей Фурье-спектров и значительно повысить устойчивость и скорость сходимости описанного выше алгоритма (17).
На основе разработанных методов рассмотрим вопрос проектирования узоров тканей и самих узоров. Проведенные автором исследования в области обработки изображений показали исключительную важность фазы Фурье-спектра для анализа и восстановления изображений и заставили визуально просмотреть огромное количество фазовых распределений. Сотрудничество с работником Текстильного Института (В.В. Жулева) показало, что текстильная промышленность нуждается в новых типах и подходах к построению узоров для тканей и гобеленов, и на эту роль идеально подходят фазовые распределения. В связи с этим автор поставил задачу создания простой и доступной методики построения узоров с наперед заданными орнаментами. Не вдаваясь в детали алгоритма построения узоров, отметим только, что в качестве узоров выбирались фазовые распределения от случайных изображений с управляемыми размерами, контурами и статистическими характеристиками (рис. 12).
(а) (б) (в)
Рис. 12. Примеры узоров, полученных в результате синтеза черно-белых изображений: (а) и (б) - от случайных изображений, (в) - от управляемых колец. (Оказалось, что фазовые черно-белые узоры обладают эффектом объемности и антисимметричности).
Данная методика нашла свое практическое применение при проектировании узоров тканей и гобеленов, получаемых на жаккардовых и обычных текстильных станках. Приведенные на рис. 12 изображения фактически являются готовыми образцами и без дальнейших доработок могут быть запущены в производство. Еще в 1996 г. на ОАО «Трехгорная мануфактура» текстильный образец, приведенный на рис.12 (а). Сама методика была рекомендована к промышленному применению.
Следующей важной научной задачей рассмотренной в работе, является задача стереосинтеза или восстановление по двум плоским двумерным изображениям объемного трехмерного изображения. Задача стереозрения хорошо известна в таких прикладных областях обработки изображений, как робототехника и аэрофотосъемка. Обозначим правое и левое изображения, как IR{r) nIL(r) соответственно. Между ними существует связь
1„(г) = 1(г). il(t) = i (? + d(r)), (23)
где d(r) - искомая неизвестная функция диспарантности, которая обратно пропорциональна высоте поверхности в данной точке с учетом фокусного расстояния формирующей системы.
Фактически добавок во втором уравнении (23) представляет собой искривление системы координат правого кадра. Система уравнений (23) представляет собой 2 уравнения с двумя неизвестными, т.е. задача корректна. Однако специфическая зависимость от неизвестной функции d{f), которая сама является аргументом функции, делает задачу крайне неудобной для решения численными методами. В общем случае обычно используется метод наименьших квадратов (поскольку шум аддитивен) в виде:
(?) - h (ОГ =|Дг) - 1{Г + d(r))I2 =min. (24)
Используя введенный критерий (24), можно тем или иным образом подбирать неизвестную функцию d(r) и подставлять ее опять же в (24). Если алгоритм подбора сходящийся, то критерий даст нулевой результат, и появится визуальный критерий восстановления: IR(r)= IL(r).
В настоящее время наибольшее распространение получил алгоритм поиска сопряженных точек. Суть этого алгоритма сводится к фиксации, например, на левом кадре, какой-либо точки вместе с малой окрестностью, и формирование корреляции со всем правым снимком. При достижении максимума корреляции на правом снимке фиксируется соответствующая сопряженная точка, т.е. точка, куда переходит точка с левого снимка на правый снимок. Такой процесс выполняется для каждой точки левого снимка, при этом устанавливается поточечное соответствие, а затем находится поточечная диспарантосгь d{r) = rR-rL и после интерполяции, сама форма поверхности.
Основные усилия были направлены автором на создание устойчивого и сходящегося алгоритма, не приводящего к появлению ложных деталей. Были реализованы и исследованы несколько алгоритмов, таких как алгоритм поиска сопряженных точек и пирамидальный алгоритм. Все перечисленные методы основаны на нахождении корреляции между точками соседних кадров и фиксировании и запоминании областей кадра, дающих максимальное значение корреляционной функции.
Наилучшие результаты дал пирамидальный алгоритм, подробно описанный в самой работе. Суть подхода заключается в разделении, например, обеих кадров на четыре части и нахождении области максимальной корреляции каждого участка с соответствующим ему участком на сопряженном кадре. Затем соответствующие участки также делятся на четыре части и также находится максимальная корреляция с сопряженным кадром. В результате повторения этой процедуры до элемента разрешения оптической системы удается найти соответствие между сопряженными точками, и тем самым вычислить карту диспарантности и восстановить трехмерную форму. Данный алгоритм обладает свойством стягиваться и можно доказать его строгую сходимость. Восстановление рельефа показано на рис. 13.
(") (б) Рис. 13. Восстановление рельефа горного прибрежного участка озера Байкал при обработке двух пролетных снимков с вертолета пирамидальным алгоритмом: (а) - один из исходных снимков с высоты 400 м, (б)- восстановленный профиль высот.
Следующая важная задача, которая решалась автором в представленной работе, это задача распознавания восстановленного изображения после устранения искажений изображения или сравнение его с эталоном. Входная информация представляет собой изображение (или несколько изображений), а выходная состоит из информации о данном объекте. Объект определяется как совокупность взаимосвязанных частей, свойства которых (например, средняя яркость, размеры, форма) и отношения (например, относительное положение, относительный размер и т.д.) удовлетворяют заданным ограничениям. Поэтому для распознавания объекта на изображении надо искать набор частей изображения, которые соответствуют частям объекта и удовлетворяют соответствующим ограничениям.
В настоящем разделе приведены примеры признаков, устойчивых к влиянию аддитивного шума и к изменению ракурса объекта, а также проведено математическое моделирование, подтверждающее теоретические исследования. Наиболее информативным с точки зрения распознавания является внешний контур изображения. Задача выделения контура изображения на фоне подстилающей поверхности и на фоне собственной яркостной картины изображения решалась применением различных сглаживающих масок размера 3x3 пикселя с различными весовыми коэффициентами. При этом приближенно учитывалось
распределение яркостной картины обрабатываемого изображения. Не вдаваясь в детали сравнительного анализа применяемых масок, приведем окончательные результаты (рис. 14 и рис. 15), полученные с помощью предлагаемой методики [26].
(а) (6) (в)
Рис. 14. Построение вектора-признака, состоящего из точек излома внешнего контура изображения: (а) - исходное искаженное изображение, (б) - результат подавления шумов и выделения контура, (в) - построение точек излома контура - признак изображения. (Изображение из Интернета).
(а) (б) (в)
Рис. 15. Процесс цифрового формирования признаков: (а) - модельное изображение из банка данных; (б) - процесс выделения внешнего контура изображения и его точек излома, по которым происходит распознавание (промежуточная операция), (в) - полное оконтуривание изображения и полное выделение точек излома внешнего контура [26].
Для реального распознавания были сформированы вектора признаки, состоящие из точек излома внешнего контура изображения. Для учета изменяемости ориентации распознаваемого объекта были сформированы вектора-признаки с шагом 10° по оси х - 36 штук, по оси у - 36 и 36 по оси г. В результате сформирована база данных, включающая около 50 тысяч векторов признаков, полностью описывающих трехмерную структуру исследуемого изображения. При испытании предложенного метода распознавания в базу данных было заложено около 10 модельных изображений с соответствующими векторами признаками. На вход системы распознавания подавалось модельное, искаженное атмосферой и шумами, изображение при отношениях сигнал/шум = 10 с неизвестным произвольным
ракурсом. После обработки искажения и шумы устранялись, проводилось выделение признаков и сравнение с эталонной базой.
Как показали результаты тестирования, вероятность правильного распознавания в описанных условиях при исследовании сложных многосвязных объектов достигала 90% [26]. Очевидный недостаток описанной методики - чувствительность к ракурсу объекта находится в стадии преодоления с помощью перехода к анализу на основе фрактальных признаков.
В Заключении сформулированы основные результаты и выводы работы.
В Приложении 1 приведены доказательства всех утверждений и доказано несколько новых утверждений, а также подробно освящен вопрос вероятностной однозначности на основе аппарата меры Лебега. Рассмотрена также общеизвестная специфика задачи восстановления финитной положительной функции с использованием Фурье-методов, рассмотрены простейшие характеристики аналитического продолжения Фурье-спектра. И тонкие моменты, отличающие восстановление положительной фунции и восстановление действительной функции по компонентам их Фурье-спектра. Приведены и доказаны утверждения гарантирующие аналитическое решение фазовой и амплитудной проблем.
N
Например: Утверждение. Конечная последовательность вида П(е) = отлична от
нуля при е ^
, АА
1 + 7—7
\аЛ
, где ак - первый отличный от нуля элемент из {я„}, АА = тах|а„
И большое количество следствий, обобщенных в Приложении 2 на двумерный дискретный случай. При доказательстве утверждений гарантирующих однозначность восстановления изображения по неполной информации использовался метод от противного и показывалось ( почти всегда) в смысле меры Лебега некорректные обратные задачи имеют единственное решение.
В Приложении 2 рассмотрена задача обработки только одного кадра изображения с помощью аналитических методов, основанных на использовании преобразований Гильберта как в одномерном непрерывном и дискретном случаях так и в двумерном непрерывном и дискретном случаях. Для этого автором было детально рассмотрено поведение целых функций экспоненциального типа. Уравнения Гильберта выводились, как из интегральной формулы Коши так и с использованием обобщенных функций. Было показано, что взаимосвязь амплитуды и фазы Фурье-спектра в одномерном дискретном случае однозначна , если изображение или сигнал предварительно экспоненциально отфильтрованы с небольшим коэффициентом фильтрации и имеют следующий вид:
Ш А(х) = ,
Данные уравнения вполне пригодны для практического расчета на ЭВМ. Дальнейший анализ двумерного случая впервые проводился автором, опираясь на теорию функций многих комплексных переменных и в частности на обобщение формулы Коши на многомерный случай. Формула Коши использовалась автором по одномерным срезам при фиксировании одной из переменных интегрирования. В результате чрезвычайно громоздкого и кропотливого анализа автору удалось получить аналитические связи между модулем и фазой в двумерном непрерывном и дискретном случаях и наряду с этим получено впервые большое количество совершенно новых интегральных взаимосвязей между компонентами Фурье спектра. Для практического применения могут быть использованы двумерные дискретные преобразования Гильберта которые наряду с предварительной экспоненциальной фильтрацией позволяют аналитически решать задачу обработки изображения для двух случаев - малоконтрастных изображений или изображений имеющих либо яркую точку или угловую точку. Для примера приведем пару упомянутых уравнений:
И также для примера приведем дополнительные ограничения на компоненты спектра финитной положительной функции:
где *|/(х,, х1) = ф(;с,, х2) - ф(х,, 0) - ф(0, х1), 1п , хг) = 1п А(х,, х2) - 1п А(х1,0) - 1п Л(0, хг).
С помощью приведенных выше уравнений можно как аналитически решить хорошо известную фазовую проблему, так и качественно доказать однозначность ее решения в двумерном непрерывном случае при отсутствии минимально-фазовых ограничений. Большое внимание здесь уделено общему методу сведения двумерного дискретного случая фазовой и амплитудной проблем к одномерному посредством как построчного, так и постолбцового вытягивания в одномерное изображение. Рассмотрен также метод построения всех решений обеих некорректных задач, как в непрерывном, так и дискретном случаях. Именно вследствие чрезвычайной громоздкости и сложности промежуточных выкладок автор решим поместить этот материал в приложение. Еще одной причиной переноса в приложение является техническая сторона реализации подомного метода решения обратных задач, поскольку речь идет о машинной реализации аппарата обобщенных функций.
В Приложений 3 представлены акты о внедрении результатов работы.
ОСНОВНЫЕ РЕЗУЛЬТАТЫ И ВЫВОДЫ
1. Рассмотрена задача оптимизации методов обработки очень слабых астрономических изображений в режиме счета фотонов и проведено испытание программного комплекса на реальных изображениях, полученных на ряде крупных наземных телескопов, расположенных на Северном Кавказе.
2. Предложен новый метод обработки короткой серии ярких космических изображении для объектов, быстро меняющих свой ракурс. Программное обеспечение прошло испытания при сдаче ряда комплексов и принято заказчиком. Данный метод позволяет устранить не только влияние атмосферы, но и остаточные аберрации оптического регистратора.
3. Развит новый подход для решения задач связанных с устранением смаза, дефокусировки, фазового смаза и т.д. Разработан общий регуляризирующий метод для решения аналогичных задач при неизвестных параметрах искажений. Проведены многочисленные успешные экспериментальные исследования по обработке реальных изображений.
4. Впервые предложены оригинальные цифровые методы обработки, позволяющие устранить нелинейный аддитивный фон. Сюда входят искажения, вносимые при наблюдении во время пылевой бури, в условиях тумана и через водную среду. Подобные методы очень полезны для водолазных работ, при повышении безопасности полетов в условиях тумана, при движении автотранспорта в условиях сильной загрязненности атмосферы.
5. Разработанные программно - алгоритмические методы применены к обработке цветных изображений, полученных современными оптическими фоторегистрирующими камерами
и фотоаппаратами. Результаты обработки (по визуальному критерию) превосходят широко известный программный продукт Photoshop CS2 примерно в 5 раз.
6. Разработанные методы впервые применены к обработке тепловизионных ИК-изображений в диапазонах от 3 до 12 микрон. После обработки подобных изображений повышение разрешения (по критерию Релея) увеличивается в 2 - 3 раза.
7. Впервые предложены практические и теоретические методы, позволяющие решать только одно уравнение типа свертки с обеими неизвестными функциями и при наличии неизвестного аддитивного шума.
8. Впервые предложены методы, основанные на предварительной экспоненциальной фильтрации исходных искаженных изображений. С теоретической точки зрения это приводит к гарантированной однозначности восстановления, а с практической - примерно на порядок ускоряет сходимость итерационных алгоритмов.
9. Предложены и программно реализованы новые методы обработки стереопар или сгереосинтеза. С помощью данных методов можно уверено восстанавливать трехмерные изображения по их плоским проекциям.
10. Развит новый подход по построению объемных узоров для нужд текстильной промышленности. Разработанное программное обеспечение опробовано на ряде текстильных фабрик.
11. Предложен новый тип вектора признаков, обеспечивающий 90% вероятность распознавания неизвестного трехмерного изображения.
12. В результате проведенных исследований в ИРЭ им. В.А. Котелъникова РАН создана экспериментальная установка под условным названием «Пассивный оптический локатор». Установка прошла предварительные натурные испытания при наблюдении и регистрации удаленных объектов на горизонтальной трассе. Разработанное автором программное обеспечение активно используется при обработке искаженных атмосферой изображений, полученных на установке в реальном масштабе времени. Время обработки одного кадра -0,01 ... 0,001 секунды.
13. Разработана новая методика регистрации оптических искаженных изображений, сводящаяся к установке различных узкополосных интерференционных светофильтров в параллельном пучке телескопа или оптического локатора. Применение этой методики позволяет'частично обойтись без энергоемкого когерентного подсвета наблюдаемого объекта. Использование прилагаемого к ней программного обеспечения впервые позволяет грамотно обработать когерентные и частично когерентные спекл-изображения и повысить их разрешение примерно в 10 раз.
СПИСОК ОСНОВНЫХ РАБОТ ПО ТЕМЕ ДИССЕРТАЦИИ
Статьи в научных журналах:
1. Бакут П.А., Пахомов A.A., Ряхин А.Д., Свиридов К.Н., Устинов Н.Д. О взаимосвязи компонент пространственного спектра финитной функции в двумерном случае // Оптика и спектроскопия, 1986, т. 60, № 4, с. 788 - 791.
2. Бакут П.А., Пахомов A.A., Ряхин А.Д., Свиридов К.Н., Устинов Н.Д. О восстановлении изображения из его автокорреляции // ДАН СССР, 1986, т. 290, № 1, с. 89 - 92.
3. Бакут П.А., Пахомов A.A., Ряхин А.Д., Свиридов К.Н., Устинов Н.Д. Об использовании экспоненциальной фильтрации при решении фазовой проблемы // Оптика и спектроскопия, 1987, т. 63, № 4, с. 856 - 858.
4. Бакут П.А., Пахомов A.A., Ряхин А.Д., Свиридов К.Н., Устинов Н.Д. О восстановлении изображения по фазе его Фурье-спектра// Оптика и спектроскопия, 1988, т. 64, № 1, с. 165 -169.
5. Бакут ПЛ., Пахомов A.A., Ряхин А.Д., Свиридов К.Н. К вопросу об алгоритме восстановления сигнала по одной из компонент его Фурье-спектра // Радиотехника и электроника, 1988, т. 33, № 4, с. 871 - 872.
6. Бакут П.А., Пахомов A.A., Ряхин А.Д., Свиридов К.Н. О возможной модификации метода Лабейри // Радиотехника и электроника, 1989, т. 34, № 1, с. 199 - 200.
7. Бакут П.А., Пахомов A.A., Ряхин А.Д., Миловзоров В.В. О возможности восстановления изображения по неполной информации в многоапертурной системе // Оптика атмосферы, 1989, т. 2, №8, с. 886-887.
8. Бакут П.А., Балашов С.Г., Пахомов A.A., Ряхин А.Д., Свиридов К.Н. О возможности восстановлении изображения по отношению модулей его Фурье-спектра // Оптика и спектроскопия, 1990, т. 68, № 5, с. 1202 -1205.
9. Балашов С.Г., Пахомов A.A., Ряхин А.Д., Садыков Ю.А. О восстановлении изображений, искаженных симметричным смазом // Оптика атмосферы, 1990, т. 3, № 3, с. 294 - 298.
10. Пахомов A.A., Ряхин А.Д.. Методы решения фазовой и амплитудной проблем при цифровой обработке изображений. Обзор // ЦНИИТИ, 1990, № 5361, с.1 - 85.
11. Бакут П.А., Пахомов A.A., Ряхин А.Д., Свиридов К.Н. Оптимизация алгоритма восстановления изображения по фазе его Фурье-спектра // Оптика и спектроскопия, 1991, т. 70, № 1, с. 236 - 237.
12.Макаров Д.В., Пахомов A.A., Плотников И.П., Ряхин А.Д. Методы решения фазовой проблемы при экспоненциальной фильтрации изображения // Оптико-механическая промышленность, 1991, т. 63, № 4, с. 54 - 57.
13.Бакут П.А., Пахомов A.A., Ряхин А.Д. Теоретические вопросы фазовой проблемы // Оптика атмосферы, 1992, т. 5, № 5, с. 472 - 477.
14. Бакут П.А., Пахомов A.A., Ряхин А.Д. Аналитические методы решения фазовой проблемы // Оптика атмосферы, 1992, т. 5, № 5, с. 480 - 487.
15.15. Пахомов A.A., Плотников И.П., Ряхин А.Д. Алгоритмы восстановления изображения // Оптика атмосферы, 1992, т. 5, № 5, с. 488 - 496.
16.Анциперов В.Е., Пахомов A.A. Подавление эффекта множественности оптического изображения методом локальной дефокусировки // Радиотехника и электроника, 1992, т. 37, №12, с. 2290-2292.
17. Пахомов A.A., Ряхин А.Д. Восстановление изображений, искаженных амплитудным смазом // Радиотехника и электроника, 1993, т. 38, № 1, с. 183 - 186.
18. Лозин К.Р., Пахомов А.А. Обработка короткой серии изображений, искаженных турбулентной атмосферой Земли // Радиотехника и электроника, 1994, v. 39, № 11, с. 1751 - 1755.
19.Safronov A.N., Pakhomov А.А. Adaptive speckle interferometry concept // SPIE, 1994, v. 2201, p. 1035- 1047.
20.Safronov A.N., Pakhomov A.A. Novel techniques for restoration of images of highly-variable extended objects // SPIE, 1996, v. 2759, p. 543 - 559.
21.Pakhomov A.A., Lozin K.R. Processing of shot sets of bright speckle images distorted by the turbulent Earth's atmosphere // Optics Communications, 1996, v. 1, p. 5 - 12.
22. Pakhomov A. A., Lozin K.R. Processing of shot sets of images distorted by the turbulent Earth's atmosphere // Optical Engineering, 1996, v. 35, p. 1446 - 1450.
23. Pakhomov A.A. Optimization of an image restoration algorithm from its Fourier spectrum phase // Optical Engineering, 1996, v. 35, p. 1044 - 1045.
24. Пахомов А.А. О восстановлении изображений, искаженных симметричным смазом, дефокусировкой и амплитудным смазом // Радиотехника и электроника, 2000, т. 45, № 3, с. 333-338.
25. Пахомов А.А., Севостьянов К.К., Григорошенко В.М. Использование методов спекл-интерферометрии для оценки разрешающей способности крупных наземных телескопов // Радиотехника и электроника, 2000, т. 45, № 4, с. 458 - 461.
26. Пахомов А.А., Потапов А.А. Построение вектора признаков лоцируемого объекта по информации о точках излома внешнего контура на изображениях // Нелинейный мир, 2007, т. 5, № 9, с. 557-571.
27. Пахомов А.А., Потапов А.А., Лозин К.Р. Наблюдение и распознавание удаленных движущихся объектов на горизонтальной трассе с помощью пассивного оптического локатора нового типа // Нелинейный мир, 2007, т. 5. № 10-11, с. 626 - 632.
28.Пахомов А.А. Быстрая обработка короткой серии искаженных атмосферой изображений // Радиотехника и электроника, 2007, т. 52, № 10, с. 56 - 59.
29. Пахомов А.А., Потапов А.А. Обработка и построение многоалертурных оптических систем // Нелинейный мир. 2008, т. 6, № 7.
Изобретения:
30.Бакут П.А., Пахомов А.А., Ряхин А.Д., Свиридов К.Н., Устинов Н.Д. Способ формирования изображения, наблюдаемого через турбулентную атмосферу II Авторское свидетельство №234444 от 03.03.1986.
31.Бакут П.А., Пахомов А.А., Ряхин А.Д., Свиридов К.Н. Способ аттестации телескопа // Авторское свидетельство № 235719 от 01.04.1986.
32.Бакут П.А., Пахомов А.А., Ряхин А.Д., Свиридов К.Н., Устинов Н.Д. Топографический способ формирования изображения // Авторское свидетельство № 228232 от 01.11.1985.
33.Бакут П.А., Пахомов А.А., Ряхин А.Д., Свиридов К.Н., Устинов Н.Д. Способ формирования изображения // Авторское свидетельство № 227692 от 01.11.1985.
34.Бакут П.А'., Пахомов А.А., Ряхин А.Д., Свиридов К.Н. Способ восстановления изображения искаженного смазом // Авторское свидетельство № 243409 от 01.10.1986.
35.Бакут ПЛ., Пахомов АЛ., Ряхин А.Д., Свиридов К.Н. Способ восстановления изображения искаженного смазом // Дополнительное Авторское свидетельство № 263247 от 01.10.1987.
36.Бакут П.А., Пахомов A.A., Ряхин А.Д., Свиридов К.Н. Способ восстановления изображения наблюдаемого через турбулентную атмосферу // Авторское свидетельство № 265103 от 02.11.1987.
37.Бакут П.А., Пахомов A.A., Ряхин А.Д., Свиридов К.Н. Способ обработки оптической информации// Авторское свидетельство № 265338 от 01.12.1987.
38.Бакут П.А., Пахомов A.A., Ряхин А.Д., Свиридов К.Н. Способ формирования изображения наблюдаемого через турбулентную атмосферу // Авторское свидетельство № 253922 от 04.05.1987.
39.Бакуг П.А., Пахомов A.A., Ряхин А.Д., Свиридов К.Н. Способ формирования изображения // Авторское свидетельство № 278211 от 01.07.1988.
40.Бакут П.А., Пахомов A.A., Ряхин А.Д., Свиридов К.Н. Способ аттестации телескопа // Авторское свидетельство№278515 от01.07.1988.
41.Бакут П.А., Балашов С.Г., Пахомов A.A., Ряхин А.Д., Свиридов К.Н. Способ восстановления изображения из его искаженной автокорреляции // Авторское свидетельство № 287936 от 02.01.1989.
42.Бакут П.А., Кузнецов М.В., Пахомов A.A., Ряхин А.Д., Свиридов К.Н. Способ формирования изображения наблюдаемого через турбулентную атмосферу // Авторское свидетельство № 286618 от 02.01.1989.
43.Бакут П.А., Балашов С.Г., Пахомов A.A., Ряхин А.Д., Рожков И.А., Свиридов К.Н. Способ восстановления изображения искаженного, равномерным смазом // Авторское свидетельство № 301622 от 02.10.1989.
44.Бакут П.А., Миловзоров В.В., Пахомов A.A., Ряхин А.Д., Рожков И.А., Свиридов К.Н. Способ формирования интерференционной картины с помощью светового потока искаженного, турбулентной средой // Авторское свидетельство № 312457 от 02.06.1990.
45.Бакут П.А., Кузнецов М.В., Пахомов A.A., Свиридов К.Н. Способ определения параметров отражающей поверхности // Авторское свидетельство № 296911 от 03.07.1989.
46. Макаров Д.А., Пахомов A.A., Ряхин А.Д., Рожков И.А., Садыков Ю.А., Свиридов К.Н. Способ восстановления изображения, искаженного смазом // Авторское свидетельство № 301318 от 02.10.1989.
47.П.А.Бакут, С.Г.Балашов, А.А.Пахомов, А.Д. Ряхин, И.А.Рожков, К.Н.Свиридов. Способ восстановления изображения искаженного симметричным смазом // Авторское свидетельство № 301035 от 28.11.1988.
48.П.А.Бакут, С.Г.Балашов, А.А.Пахомов, А.Д. Ряхин, И.А.Рожков, К.Н.Свиридов. Способ восстановления изображения из его случайно-смазанной реализации // Авторское свидетельство № 323868 от 01.03.1991.
49.П.А.Бакут, В.В.Миловзоров, А.А.Пахомов, А.Д. Ряхин, И.А.Рожков, К.Н.Свиридов. Способ формирования изображения объекта, наблюдаемого через турбулентную атмосферу в многоапертурную оптическую систему // Авторское свидетельство № 299636 от 01.08.1989.
50.П.А.Бакут, М.В.Кузнецов, А.А.Пахомов, А.Д. Ряхин, К.Н.Свиридов. Способ определения геометрических размеров объекта и устройство его реализации // Авторское свидетельство №302194 от 28.11.1988.
51.П.А.Бакут, М.В.Кузнецов, А.А.Пахомов, А.Д. Ряхин, И.А.Рожков. Способ восстановления изображения из его автокорреляции//Авторское свидетельство №306979 от 20.02.1989.
52.А.А.Пахомов, А.Д. Ряхин, И.А.Рожков, К.Н.Свиридов. Способ фазирования многоапертурной оптической системы // Авторское свидетельство № 302586 от
22.12.1988.
53.П.А.Бакут, А.А.Пахомов, А.Д. Ряхин, И.А.Рожков, К.Н.Свиридов. Способ аналогово-цифрового преобразования изображения // Авторское свидетельство № 318053 от
03.09.1989.
54.П.А.Бакут, В.Н.Лексина, А.А.Пахомов, А.Д. Ряхин, И.А.Рожков. Способ измерения оптической разности хода в многоапертурной оптической системе // Авторское свидетельство №318039 от 03.11.1990.
Труды конференций:
55.Пахомов А.А. Аттестация оптических инструментов в атмосферных условиях наблюдения // Тр. 5-й Междунар. конф. «Распознавание образов и анализ изображений: новые информационные технологии», (Новгород, 16-22 октября 2000 г.). - Новгород: НовГУ, 2000. С. 589 - 592.
56. Пахомов А.А. Обработка изображений движущихся объектов при наличии атмосферных искажений // Тр. 5-й Междунар. конф. «Распознавание образов и анализ изображений: новые информационные технологии», (Новгород, 16 - 22 октября 2000 г.). - Новгород: НовГУ, 2000. С. 593 - 596.
57. Пахомов А.А. Распознавание объектов по их искаженным оптическим изображениям // Тр. 5-й Междунар. конф. «Распознавание образов и анализ изображений: новые информационные технологии», (Новгород, 16-22 октября 2000 г.). - Новгород: НовГУ, 2000. С. 597 - 598.
58.Пахомов А.А. Достижение дифракционного разрешения при наблюдении космических объектов в условиях атмосферных искажений // Тр. 6-й Междунар. конф. «Распознавание образов и анализ изображений: новые информационные технологии», (Новгород, 21-26 октября 2002 г.). - Новгород: НовГУ, 2002. Т. 2. С. 446 - 449.
59. Пахомов А.А., Потапов А.А. Быстрая обработка одного изображения, искаженного атмосферой Земли // Тез. Докл. V Междунар. науч. - техн. конф. "Физика и технические приложения волновых процессов" (Самара, 11-17 сентября 2006 г.).- Самара: «Самарское книжное издательство», 2006. С. 323 - 324.
60.Pakhomov A.A., Potapov А.А. The Development of Scaling Effects in Fractal Theory and Iterative Procedures for Processing of the Distorted Images // Proc. of the Ninth Int. Conf. "Pattern Recognition and Information Processing - PRIP 2007" (Belarus, Minsk, May 22 - 24, 2007). - Minsk: UlIP NASB, 2007. V. II. P. 66 - 70.
61. Пахомов А.А., Потапов А.А., Гуляев Ю.В., Никитов C.A. Обработка одиночных кадров цветных изображений, наблюдаемых через толщу морской воды // Тр. Междунар. науч. конф. «Излучение и рассеяние электромагнитных волн - ИРЭМВ-2007» (Таганрог, 25 - 30 июня 2007 г.).- Таганрог: Изд. ТТИ ЮФУ, 2007. Т. 1. С. 41 -45.
62. Pakhomov A.A., Potapov А.А. The Improvement of the Quality of Images Observed by the Turbulent Earth Atmosphere // Proc. the Second European Conference on Antennas and Propagation EuCAP 2007 (U - 16 November 2007, the EICC, Edinburgh, UK). - Edinburgh: The Institution of Engineering and Technology & EurAAP AISBL, 2007. TuPP.012. Pdf. 4 pp. (http://www.eucaD2007.org/programmel.htm).
Монография:
63. Потапов A.A., Гуляев Ю.В., Никитов С.А., Пахомов А.А., Герман В.А. Новейшие методы
обработки изображений / Под ред. А.А. Потапова,- М.: ФИЗМАТЛИТ, 2008.- 496 с. (монография - по гранту РФФИ № 07 - 07 - 07005).
Пахомов Андрей Анатольевич
Цифровая обработка малоконтрастных изображений, искаженных турбулентным слоем
АВТОРЕФЕРАТ
Гарнитура Times. Формат 60\90/16.Бумага офсетная 80г. Печать офсетная. Уч.-изд. Л 1,0 Усл. Печ. Л 1,5. Тираж 100 экз.
Отпечатано с готового оригинал макета в ООО «Знаменка».
Оглавление автор диссертации — доктора технических наук Пахомов, Андрей Анатольевич
Введение.
Глава 1. Моделирование и обработка серии искаженных атмосферой изображений.
1.1. Моделирование искаженных атмосферой изображений.
1.1.1. Формирование изображений через атмосферу.
1.1.2. Линейная оптическая система.
1.1.3. Статистика атмосферной турбулентности.
1.1.4. Алгоритм моделирования искаженных атмосферой независимых изображений.
1.1.5. Результаты моделирования.
1.2. Обработка длинной серии слабых астрономических изображений искаженных атмосферой.
1.2.1. Краткая история вопроса.
1.2.2. Постановка задачи и определение МТК.
1.2.3. Дискретный случай МТК.
1.2.4. Восстановление фазы.
1.2.5. Инвариантность МТК к сдвигу и развороту.
1.3. Тройные корреляции фотоотсчётных изображений.
1.3.1. Детекторы фотоотсчётных изображений.
1.3.2. Специфика фотонных пуассоновских изображений в МТК.
1.4. Тройные корреляции искаженных атмосферой коротко-экспозиционных изображений.
1.4.1. Коротко-экспозиционные и длинно-экспозиционные изображения.
1.4.2. Параметр Фрида.
1.4.3. Расчет средней передаточной функции ТК.
1.5. Средний биспектр коротко-экспозиционных изображений.
1.5.1. Ограничения и приближения для атмосферных параметров.
1.5.2. Переход к парным корреляциям.
1.5.3. Точность оценки фазы.
1.6. Точность восстановления спектра по среднему биспектру.
1.6.1. Точность восстановления модуля.
1.6.2. Точность восстановления фазы. Одномерный случай.
1.6.3. Точность восстановления фазы. Двумерный случай.
1.6.4. Сравнение методов восстановления изображения.
1.6.5. Алгоритм обработки слабых изображений.
1.7. Обработка длинной серии ярких изображений искаженных атмосферой.
1.7.1. Специфика получения изображений.
1.7.2. Математическое обоснование МТК.
1.7.3. Восстановление изображения методом парных корреляций.
1.7.4. Результаты обработки астрономических изображений.
1.8. Обработка короткой серии ярких изображений искаженных атмосферой.
1.8.1. Специфика задачи и методы ее решения.
1.8.2. Известные практические методы решения.
1.8.3. Недостатки известных астрономических методов.
1.8.4. Метод слепой деконволюции и его обобщение.
1.8.5. Метод совместной деконволюции.
1.8.6. Обработка методом последовательных проекций.
1.8.7. Вывод метода последовательных проекции из метода наименьших квадратов.
1.8.8. Сходимость, однозначность и достоверность методов.
1.8.9. Моделирование и обработка реальных изображений.
1.9. Обработка серии ярких изображений объектов, быстро меняющих свой ракурс.
1.9.1. Специфика задачи.
1.9.2. Постановка задачи и математические критерии.
11.9.3. Итерационная процедура решения.
1.9.4. Сходимость, однозначность и достоверность метода.
1.9.5. Моделирование и специфика обработки реальных изображений.
Глава 2. Обработка одного кадра изображения, искаженных атмосферой и смазами.
2.1. Обработка изображений искаженных амплитудным смазом.
2.1.1. Постановка проблемы.
2.1.2. Переформулировка задачи.
2.1.3. Однозначность решения.
2.1.4. Алгоритм решения задачи 1.
2.1.5. Сходимость алгоритма решения задачи 1.
2.1.6. Алгоритм решения задачи 2.
2.1.7. Сходимость алгоритма решения задачш2".
2.1.8: Математическое моделирование.
2.1.9. Оптимизация параметров алгоритмов.
2.1.10. Математическое моделирование и обработка реальных изображений.
2.2. Обработка изображений, искаженных симметричным смазом?.
2.2.1. Постановка задачи.
2.2.2. Переформулировка задачи.
2.2.3. Однозначность решения.
2.2.4. Алгоритм восстановления.
2.2.5. Сходимость алгоритма.
2.2.6. Математическое моделирование и обработка реальных изображений:.
2.2.7. Общий подход к задаче на основе метода наименьших квадратов.
2.3. Обработка изображений искаженных дефокусировкой;.
2.3.1. Постановка задачи.
2.3.2. Переформулировка задачи.
2.3.3. Однозначность восстановления.
2.3.4. Алгоритм восстановления.
2.3.5. Сходимость алгоритма.
2.3.6. Математическое моделирование и обработка реальных изображений.
2.3.7. Общий подход к задаче на основе метода наименьших квадратов.
2.4. Обработка одного кадра изображения, искаженного случайными атмосферными искажениями и аддитивными шумами регистрации.
2.4.1. Постановка задачи.
2.4.2'. Алгоритм восстановления.
2.4.3. Сходимость алгоритма.
2.4.4. Алгоритм восстановления путем проектирования на соответствующие множества.
2.4.5. Математическое моделирование и обработка реальных и цветных изображений.
2.5. Итерационное устранение неравномерного фона.
Глава 3. Нетрадиционные приложения Фурье-методов обработки изображений.
3.1. Обработка изображений искаженных фазовым смазом.
3.1.1. Постановка задачи.
3.1.2. Алгоритм прямого решения.
3.1.3. Теоретический алгоритм.1483.1.4. Итерационные алгоритмы.1483.1.5. Алгоритм сшивки фазы.
3.1.6. Оптимальный алгоритм.
3.1.7. Алгоритм встряски.
3.1.8. Комбинированный алгоритм.
3.1.9. Однозначность восстановления изображения:.1583.1.10: Устойчивость к шумам.
3.2. О восстановлении изображения по отношению модулей Фурье-спектра.
3.2.1. Постановка задачи.
3.2.2. Метод экспоненциальной фильтрации.
3.2.3. Однозначность восстановления.
3.2.4 Астрономическая специфика.
3.2.5. Однозначность восстановления изображения.169*
3.2.6. Алгоритмывосстановления.
3.3: Применение методов Фурье-оптики в офтальмологии.
3.3.1. Постановка задачи.
3:3.2. Математическая постановка задачи:.
313:3. Расчет прохождения излучения через систему глаз-очки.
3.3.4. Обзор известных технических решений:.
3.3.5. Жидкокристаллические очки*.
3.4. Применение методов Фурье-оптики для задач художественного проектирования узоров тканей и гобеленов.
3.4.1-. Важность,фазы*Фурье-спектра.
3.4.2. Свойства фазовых распределений.
3.4.3-. Алгоритм построения фазовых узоров
3.4.4. Алгоритм построения-амплитудных узоров.
3.4.5. Подбор цветовой гаммы.:.
3.5. Обработка стереоизображений.
3.5.1. Постановка задачи.
3.5.2. Математическая постановка задачи.
315.3. Алгоритм поиска сопряженных точек.
3.5.4. Пирамидальный алгоритм.
3.6. Использование информации о контурах изображений для построения вектора-признака и распознавания.
3.6.1. Постановка задачи.
3.6.2. Принцип формирования изображения.
3.6.3. Дифференциальные операторы выделения контуров.
3.6.4. Дискретные аппроксимации.
3.6.-5. Сравнительная оценка методов выделения контуров.'.
3.6.6. Методы улучшения контуров.
3.6.7. Сегментация изображения:.
3.6.8. Выделение причин порождающих контур.
Введение 2009 год, диссертация по информатике, вычислительной технике и управлению, Пахомов, Андрей Анатольевич
Постановка задачи. В целом ряде важнейших отраслей науки и народного хозяйства регистрируемая и наблюдаемая информация обычно искажена влиянием неизвестной средой распространения и шумами регистрирующей аппаратуры. Наиболее сильно этот эффект сказывается в оптике при обработке и регистрации видимого или теплового излучения. Например; любое фотографическое изображение снятое даже на небольшой дальности неизбежно искажено влиянием воздушного турбулентного потока вносящего сильнейшие, случайные фазовые искажения. А также влиянием ограниченного поля зрения приемной оптики и естественно аддитивными и мультипликативными., шумами фотоприемника. Если фотографируемый объект находится на значительном расстоянии то влияние фазовых искажений вносимых восходящим воздушным потоком от нагретой подстилающей поверхности столь велико, что может полностью разбить изображение на отдельные фрагменты. Этот эффект отчетливо наблюдается в пустынях, при наблюдений на горизонтальной трассе, а многочисленные отражения от подстилающей поверхности и нижнего слоя тропосферы приводят к появлению миражей. При наблюдении в безлунную ночь звездных скоплений явно заметен эффект мерцания звезд который также обусловлен искажениями вносимыми атмосферой Земли в видимом диапазоне. Причем если до определенного предела увеличивать диаметр приемной оптики, то сначала качество изображения заметно увеличивается, а затем перестает меняться и увеличивается только яркость. Этот эффект впервые проявился в 50-е годы прошлого века при эксплуатации крупных наземных телескопов. Разрешающая способность, например, метрового телескопа оказывалась эквивалентной разрешающей способности десятисантиметрового телескопа. С тех пор эффект получил название проблемы видения через турбулентную атмосферу Земли и проявился при решении многочисленных астрономических задач.
При наблюдений Земной поверхности с большой высоты, например с борта спутника сравнительно небольшой слой турбулентной атмосферы (10-30 километров), ведет себя как тонкая искажающая линза, положенная на удаленный предмет и наблюдаемые изображения также значительно искажены.
Стоит отметить, что в перечисленных случаях все искажения совершенно случайны и подчиняются только общим статическим законам справедливым для турбулентных сред. Большое значение при регистрации имеет также относительное расположение и синхронизация процесса регистрации. Например, при относительном движении камеры и объекта возникают так называемые смазы, обусловленные смещением объекта регистрации во время экспозиции. И, наконец, наиболее распространенный вид искажений расфокусировка по дальности - квадратичная аберрация, обусловленная расположением объекта не точно в фокальной плоскости объектива фотоприемника. В последнее время появился относительно небольшой класс цветных изображений наблюдаемых через толщу водной поверхности, где искажения водной среды трудно разделить на фазовые и амплитудные.
Обработке перечисленных классов изображений с целью повышения их разрешающей способности или их визуального качества и посвящена настоящая работа В данной работе предлагается отличный от классического подхода, метод обработки основанный на выделении неискаженной информации из Фурье спектра искаженного изображения и восстановление по этой неискаженной информации неискаженного истинного изображения. При этом часто неискаженной информацией является либо фаза, либо модуль Фурье-спектра изображения,- либо некие их функции (тангенс, отношение спектров). Процесс восстановления представляет собой замкнутый циклический процесс, который сводится к исправлению случайной начальной оценки изображения в соответствии с имеющейся неискаженной информацией. Большой внимание в работе уделено взаимосвязи компонент Фурье-спектра в практически важном двумерном случае, таких как фаза и амплитуда. Анализу и получению двумерных аналогов преобразований Гильберта в непрерывном и дискретном случаях. А также применению аппарата меры Лебега к оценке однозначности решения перечисленных задач в одномерном^ многомерном случаях.
Задачи восстановления изображения по неполной информации о Фурье-спектре относятся к классу некорректных обратных оптических задач. Весьма важно не только создать работоспособные алгоритмы их решения, но и проанализировать полностью их однозначность и выявить класс возможных решений.
В работе рассмотрены многочисленные прикладные задачи, такие как обработка как одного искаженного изображения, так и короткой серии искаженных изображений так и длинной серии и обработка очень слабых фотоотсчетных изображений методом биспектрального анализа и его некоторые модификации. Последний упомянутый метод весьма актуален при обработке астрономических наблюдений за очень слабыми источниками света, такими как удаленные туманности и метеориты. Работоспособность всех рассмотренных новых методов обработки подтверждена как обработкой модельных изображений полученных на имитаторе атмосферных искажений, так и при обработке реальных изображений полученных на ряде крупных наземных телескопов, расположенных на Северном Кавказе вблизи станицы Зеленчукская либо из Интернета из базы данных изображений американского космического телескопа Хаббл. Рассмотрен также вопрос создания компьютерного имитатора атмосферных искажений на основе статистических характеристик турбулентной атмосферы. Созданный имитатор позволяет моделировать степени искажений вносимых атмосферой в зависимости от погодных условий и как следствие получать искаженные изображения с наперед заданной степенью искажений.
Большое внимание уделено задачам построения цветных, многосюжетных изображений сконструированных автором по спектральной информации и последующей их раскраске. Данная методика нашла свое отражение в работах текстильного института по разработке узоров для жаккардовых станков. Рассмотрен вопрос стереосинтеза основанный на обработке двух изображений одного и того же объекта зарегистрированных при различных углах наблюдения. Целью обработки таких стереопар является извлечение информации о глубине или о высоте зарегистрированного изображения. Разработанный пирамидальный.алгоритм дал хорошие результаты и позволил восстановить высоту рельефа района озераБайкал.
Предложен общий принцип конструирования адаптивных жидкокристаллических очков, основанный на элементах адаптивной техники нового типа — на основе управления элементами очков специального типа. Данная задача решалась в интересах офтальмологии для исправления зрения у больных, роговица которых имеет значительные локальные повреждения.
Частично рассмотрена задача распознавания изображений протяженных объектов наблюдаемых на очень слабом фоне. Рассмотрен и проанализирован ряд важных информационных признаков, описан механизм их выделения и включения в базу данных признаков для распознаванию неизвестных летающих объектов. Исследования показали, что выявленный признак - точки излома внешнего контура изображения является устойчивым к развороту объект и к различным видам шумов.
Актуальность темы работы. Работа посвящена математическим основам теории некорректных обратных задач в оптике, а также методам обработки и восстановления изображений по неполной информации об их Фурье-спектрах. Задача разработки таких методов является частью общей задачи устранения влияния атмосферных и оптических искажений при обнаружении и регистрации удаленных объектов на дальности 5-1000 км при плохих метеоусловиях. К числу оптических искажений относятся смазы и расфокусировка по дальности, а к факторам атмосферных искажений - туман, сумерки, восходящие атмосферные потоки и турбулентная атмосфера Земли. Решение рассматриваемой задачи вызывает большой интерес при наблюдении за удаленными космическими объектами, которые представляют собой поток фотонов, где на один кадр приходится от десяти до сотни фотонов.
Конечным этапом задачи обработки является автоматическое распознавание изображения или интересующего объекта. В данной работе для распознавания выделяются так называемые вектора — признаки или наиболее информативные участки изображения. Развитые в работе методы основаны на теории академика А.Н.Тихонова, которая известна в науке как регуляризация по Тихонову, и фактически являются развитием этой теории на случай обработки многомерных сигналов-в задачах оптики, лазерной техники и астрономии.
Математическая формулировка большинства подобных задач сводится к системе уравнений типа свертки. Для решения рассматриваемых задач в работе предложены новые подходы, основанные на последовательном улучшении оценки- изображения путем согласования её с имеющейся априорной информацией- о неискаженном изображении. При этом согласование с априорной информацией математически записывается в' виде операторов проекции на соответствующие множества. Сами алгоритмы восстановления неискаженного изображения представляют собой последовательность операторов проекции, причем если соответствующие множества выпуклы, то подобные процедуры сходятся к истинному решению. Анализ однозначности решения подобных некорректных задач требует привлечения аппарата меры Лебега* для.оценки математической вероятности постороннего решения. При этом в двумерном и многомерном случаях подобные задачи, как правило, решаются однозначно, а в одномерном случае имеют счетное множество решений.
Для восстановления- изображения важно выявить аналитическую связь между компонентами Фурье-спектра, например, модулем и фазой, как в одномерном, так и в двумерном случае. Подобная взаимосвязь известна под названием преобразований Гильберта, которые ранее получены только для одномерного случая. В* настоящей работе проведено обобщение уравнений Гильберта на двумерный непрерывный и дискретный случаи (котаигенсная форма уравнений Гильберта), а также выявлены условия однозначного аналитического решения ряда важных некорректных задач. Наряду с теоретическими исследованиями представлены экспериментальные результаты, по обработке изображений, полученных с помощью крупных отечественных телескопов. Представленные результаты отражают 20-летний опыт автора по эксплуатации, созданию методик аттестации крупных отражательных телескопов на основе обработки изображений.
Цель работы. Разработка физико-математических основ и методов цифровой обработки малоконтрастных изображений, искаженных турбулентной атмосферой. Устранение этих искажений с помощью цифровых методов обработки и восстановление неискаженного изображения объекта, наблюдаемого оптическими приборами на большой дальности.
Задачи работы:
• нахождение необходимых и достаточных условий однозначного восстановления изображения по неполной информации об его Фурье-спектре;
• разработка общего регуляризирующего подхода к численному решению различных типов обратных задач на основе операторов проекции на выпуклые множества;
• разработка программного комплекса для проверки теоретических положений и новых методов обработки реальных космических объектов, слабых астрономических изображений и космических снимков Земли.
• разработка программного комплекса для изображений, наблюдаемых на горизонтальных трассах в условиях тумана, облачности или сквозь толщу воды, а также для обработки цветных искаженных изображений, регистрируемых современной фототехникой;
• построение трехмерных изображений по его двумерным проекциям;
• исследование методов автоматического распознавания восстановленного изображения и выделение устойчивого к шумам вектора-признака.
Достоверность результатов работы, подтверждается, согласованностью результатов аналитического исследования, численного моделирования и физического эксперимента между собой, а также с результатами других авторов. Новые теоретические результаты получены с помощью строгой общепризнанной теории, такой как многомерная теория функций комплексного переменного, интегральная формула Коши и т.д. Все полученные автором новые соотношения снабжены подробнейшими строгими математическими выкладками, что также подтверждает их достоверность. Работы по основным результатам диссертации неоднократно цитировались как в отечественной, так и в зарубежной научной печати.
Практическая ценность работы. Разработанные новые итерационные методы обработки и восстановления искаженных изображений с целью повышения разрешающей способности нужны и уже используются в многочисленных астрономических задачах при наблюдении очень удаленных и очень слабых источников излучения, что представляет несомненный научный и практический интерес. Другим практическим приложением данных методов является их применение в различных международных системах контроля космического пространства, для выявления и диагностики состояния спутников, долго находящихся на космических орбитах, диагностики и распознавания неуправляемых элементов космического мусора и заблаговременном- оповещении о метеоритной опасности и принятия мер предосторожности. Большое значение методы обработки искаженных изображений имеют при- решении транспортных задач, например, при посадке самолетов в условиях ограниченной метеорологической видимости, при» движении судов в условиях тумана, а также при движении автомашин и колонн грузовиков в тяжелых метеорологических условиях для* заблаговременного обнаружения встречного транспорта во> избежание катастроф. Возможно применение этих методов в-задачах обеспечения-безопасности, например для пограничных-застав, при наблюдении, в пределах прямой видимости неизвестных судов, людей- и- автотранспорта для улучшения качества их изображений и визуального распознавания. Один из предложенных в работе методов обработки способен функционировать на телескопе с искривленным зеркалом,-т.е. при неизвестных статических аберрациях, что позволяет экономить большие средства, которые пошли бы на исправление аберрационной карты. При-обработке космических изображений, полученных, со спутников итерационный, метод позволяет повысить разрешение примерно в 2 раза и увеличить точность дальнего обнаружения объектов. При посадке самолета в условиях тумана этот метод повышает безопасность пассажиров. Разработки автора в области создания новых методов обработки малоконтрастных изображений внедрены в программно - алгоритмическое обеспечение ряда радиооптических комплексов. Новый метод проектирования двумерных узоров, обладающих эффектом объемности развит для нужд текстильной- промышленности с учетом современных требований к качеству ее продукции:
Апробация работы. Результаты работ докладывались и обсуждались.на семинарах НПО «Астрофизика», ИРЭ им. В.А. Котельникова РАН, ВЦ РАН, ИКИ РАН, САО РАН (станица Зеленчукская), ОАО «МАК «Вымпел», ОАО «Гос «МКБ «Вымпел» им. И.И. Торопова», ОАО НПО «Радиофизика», ВИРТА им. J1.A. Говорова (г. Харьков), ХГУ, ГОИ им. С.И. Вавилова, СНИИ-45, НИИ судебной медицины, а также на следующих российских и международных научных конференциях: 5-я Международная конференция «Распознавание образов и анализ изображений: новые информационные технологии» (Н. Новгород, 2000, 2002), V Международная НТК «Физика и технические приложения волновых процессов» (Самара, 2006 г.), Ninth Int. Conf. «Pattern Recognition and Information Processing - PRIP 2007» (Minsk, 2007), Международная науч. конф.
Излучение и рассеяние электромагнитных волн — ИРЭМВ-2007» (Таганрог, 2007 г.), Second European Conference on Antennas and Propagation EuCAR 2007 (The EICC, Edinburgh, UK, 2007), VII Международная НТК «Физика и технические приложения, волновых процессов» (Самара, 2008 г.).
По теме диссертации опубликовано 63 научные работы. Среди них 1 монография, 29 статей в ведущих Российских и зарубежных журналах "Доклады Академии • наук СССР", "Радиотехника и электроника", "Оптика и спектроскопия", "Оптико-механическая промышленность", "Оптика атмосферы и океана", "Optics Communications", "Optical1 Engineering". По результатам работы автором получено 25 авторских свидетельств об изобретении. Полный перечень публикаций автора приведен в конце автореферата. Научную новизну характеризуют следующие основные результаты диссертационной работы, выносимые на защиту:
• доказан ряд новых утверждений для гарантированной однозначности решения обратных оптических задач в практически важном двумерном случае. Утверждения относятся к таким задачам как, например, восстановление изображения только по фазе Фурье-спектра, только по амплитуде Фурье-спектра, только по тангенсу фазы. Фурь-спектра, только по фазе и отношению модулей и т.д.
• проведено- обобщение известного метода обработки слабых фотоотсчётных изображений, с целью повышения точности восстановления изображения. Метод опробован при обработке серии из ЮОО реальных изображений двойной,звезды и получено двукратное повышение точности по сравнению? с исходным методом биспектрального анализа. Суть метода сводится к повышенной точности' 1 восстановления* фазы неискаженного спектра и восстановлению изображения только по восстановленной неискаженной фазе.
• разработан общий регуляризирующий подход для обработки коротких серий, изображений, искаженных атмосферой. Метод сводится к итерационному последовательному восстановлению неизвестных передаточных функций, после чего восстанавливается неискаженное изображение. При обработке реальных изображений полученных в белом свете метод приводит в 2-3 кратному повышению точности по сравнению с методом усреднения. При обработке изображений полученных в режиме узкополосной фильтрации метод приводит к 10-и кратному повышению точности.
• разработан ряд методов обработки только одного кадра изображения, искаженного смазом, расфокусировкой и амплитудным смазом. При обработке реальных изображений полученных в. белом свете метод приводит в 2-3 кратному визуальному повышению точности по сравнению с исходным.
• разработан метод обработки когерентных изображений, сводящийся к формированию голограммы, интенсивности и восстановлению из неё неискаженного изображения. Метод опробован в стендовых условиях и устойчиво* работал в условиях аддитивных, мультипликативных и нелинейных шумах фотопленки.
• разработан метод обработки одиночных кадров изображений- наблюдаемых в условиях сильного тумана, облачности, а также наблюдаемых через значительную толщу водной среды. При-обработке реальных изображений полученных в белом свете метод приводит в, 2-3 кратному визуальному повышению' точности по сравнению с исходным.
• разработан метод цифровой обработки искаженных цветных изображений. Метод сводится к программно- реализованному разложению на компоненты R,G,B, обработке каждой из компонент и< весовому или итерационному сложению обработанных компонент цветного изображения.
• - разработан новый метод построения узоров" для нужд текстильной промышленности. В качестве основы послужили фазовые распределения, вносимые атмосферой Земли, в которых заметен эффект объемности, после чего были синтезированы цветные композиции полученных узоров
• разработан новый1 пирамидальный метод оценки третьей координаты по двум двумерным изображениям, зарегистрированным с различных точек наблюдения. По сравнению с известным точечным методом обработке метод обладает. 10 кратным повышением быстродействия, но примерно в 2-4 раза проигрывает в точности.,
• выделен новый тип вектора- признака для задачи распознавания изображений, основанный, на выделений точек излома внешнего контура изображения. При практическом тестировании метод дает 90% вероятность правильного распознавания.
Личный вклад автора. Основные результаты, представленные в работе получены лично автором. Вклад автора был определяющим при разработке основных теоретических идей, постановке задач и выборе методов исследований, а также при написании статей, докладов и 25 изобретений. О приоритете автора в развитии данной тематики свидетельствуют выигранные им на конкурсной основе грант РФФИ № 05-07-90349-в (2005-2007 гг.) о создании системы обработки изображений реального времени, грант
РФФИ (№ 07-07-07005-д (2007 г.) о написании монографии (в соавторстве) по новейшим методам обработки изображений и грант РФФИ № 07-08-00637-а (2007-2009' гг.) о создании пассивного оптического локатора для регистрации изображений.
Автором решена важная народно-хозяйственная задача, касающаяся цифровых методов устранения влияния атмосферных искажений на качество оптических изображений регистрируемых, оптическими приборами и сделан ряд программ, реализующих этот подход для широкого круга задач. Автором разработан ряд методик по аттестации, измерению параметров оптических приборов; реализованы методики, позволяющие многократно повысить разрешающую способность оптических приборов в атмосферных условиях эксплуатации. Все перечисленные методики внедрены в оптические изделия и прошли успешные испытания на различных крупных наземных телескопах, расположенных на Северном Кавказе, с. Зеленчукская.
Содержание объем работы. Диссертация состоит из введения, трех глав, двух приложений, заключениями списка литературы из 226 источников. Общий объем работы составляет 314 страниц, включая 50 рисунков.
Заключение диссертация на тему "Цифровая обработка малоконтрастных изображений, искаженных турбулентным слоем"
Заключение
Подведем основные итоги и результаты представленной диссертационной работы.
1. Проведен анализ свойств функций многих комплексных переменных и в особенности поведение их корней как метода разложимости аналитической целой функции многих переменных на простейшие сомножители. И выявлены классы функций и возможности обеспечения отсутствия нулей хотя бы в одной из полуплоскостей.
На основе интегральной теоремы Коши. Получены уравнения Гильберта для связи мнимой и действительной частей спектра финитной функции в одномерном и двумерном случаях. При обобщении теоремы Коши на многомерный случай получены двумерные уравнения Гильберта для связи между модулем и фазой спектра. Выявлены условия однозначности эти связи, т.е. минимально-фазовые решения, например для фазовой проблемы. При выводе двумерных логарифмических преобразований Гильберта впервые получены неявные интегральные связи компонент спектра ограничивающие класс возможных решений некорректных задач.
2. Проанализирован двумерный дискретный и непрерывный случаи однозначности решения обратных задач и доказан ряд новых утверждений гарантирующих однозначность восстановления изображения по неполной информации о его Фурье-спектре. Однозначность достигается привлечением предварительной экспоненциальной фильтрации исходного изображения. Для дискретного двумерного случая на основе аппараты меры Лебега доказана вероятностная однозначность восстановления за исключением крайне специфических типов изображений вероятность появления которых на практике равна нулю.
3. Разработан и проанализирован общий метод сведения двумерного дискретного случая к одномерному, и построение всех возможных решений фазовой проблемы и отбраковка посторонних.
4. На основе теории турбулентности Колмогорова-Обухова и ряда упрощающих предположений разработан имитатор фазовых атмосферных искажений. Имитатор позволяет генерировать как длинные серии искаженных атмосферой изображений, так и одиночные кадры, а также изображения точечных когерентных, спекл-изображений. В зависимости от параметра Фрида и точности дискретизации можно изменять величину и интенсивность искажений.
5. Проанализирован и доведении до практического применения известный метод биспектральной обработки серии слабых изображений. Проведен его точностной и теоретический анализ-и приведенных результаты обработки реальных астрономических изображений.
6. Проведена оптимизации бипектрального метода с целью упрощения реализации и повышения точности восстановления. Суть модификации заключается в переходе парным и диагональным корреляциям и итерационной процедуре сшивки разностных фаз. Что привело к значильному повышению точности обработки серии ярких изображений. Данный метод также проверен на реальных астрономических изображения и дал положительные результаты.
7. На основе метода наименьших квадратов и элементов теории функционального анализа разработан новый метод обработки короткой серии (не менее двух) когерентных или спекл - изображений. Проведено математическое обоснование и математическое моделирование. При обработке реальных спекл - изображений как точечных, так и протяженных объектов, например МКС, метод дал разрешение близкое к дифракционному разрешению телескопа. Интересно, что данный метод оказался нечувствительным к остаточным аберрациям приемной апертуры, т.е. способен работать на телескопе с поврежденным первичным зеркалом.
8. Небольшая модификация метода обработки короткой серии привела к созданию нового метода для обработки объектов очень быстро меняющих свою ориентацию. За время много меньшее времени замороженности атмосферы. Для практической реализации метода необходимы очень быстрые фотоприемники примерно 500-1000 кадров в секунду. Проведено математическое обоснование, моделирование и проверка на реальных длинноэкспозиционных изображениях, что доказало работоспособность данного метода.
9. Разработан общий теоретический подход к созданию алгоритмов обработки одиночных кадров одна из компонент Фурье-спектра которых значительно искажена. Например, амплитуда спектра - задач устранения фазового смаза, фаза спектра — фазовая проблема (восстановление изображения только по модулю спектра). Устранение смаза и дефокусировки в спектре таких изображений можно выделить неискаженный тангенс фаза или неискаженное отношение спектров. На основе теории проекции на выпуклые .множества, построены соответствующие операторы проекции, проведено математическое моделирование и обработка реальных искаженных кадров. А также проведена оптимизация и переход к расширенным операторам проекции с целью ускорения сходимости. Обработка реальных изображений показала визуальное повышение разрешения примерно в два раза.
10. Рассмотрена задача обработки изображений искаженных неизвестными случайными фазовыми искажениями. На основе теории проекции решить эту задачу не удалось, и для обработки применялись итерационные алгоритмы устранения неравномерного фона и модификации Винеровского фильтра. Проведенная проверка на реальных изображениях полученных на горизонтальной трассе с помощью бытовой цифровой фотокамеры показала двукратный выигрыш по разрешению. Данные методы были применены к обработке цветных подводных изображений зарегистрированных через значительную толщу водной среды. Даже в таких условиях при наличии амплитудного поглощения методы дали положительные результаты.
11. Предложен новый метод итерационного типа для целенаправленного управления фазовым распределением от опорного изображения. Создание этого метода стимулировали высокие художественные качества и необычная красота фазовых распределений. Метод разработан в интересах текстильной промышленности для создания узоров нового типа для тканей и гобеленов, имеющих объемную форму. Сделана попытка создания пробных образцов цветных узоров и сконструированы цветные композиции готовые к практическому использованию в жаккардовых и обычных ткацких станках.
12. Кратко рассмотрена задача обработки стереопар с целью получения качественной информации о глубине изображения. Данную задачу с успехом решает человеческий мозг Имея в своем распоряжении только два двумерных изображения, наблюдаемые только правым и левым глазом. На основе корреляционной обработки двух изображений зарегистрированных двумя независимыми регистраторами и использованием пирамидального алгоритма восстановлена высота рельефа местности в районе озера Байкал.
13. Сделана предварительная попытка перейти к автоматическому распознаванию образов на основе выделения информационных признаков. Проведен анализ наиболее информативных признаков и выявлен устойчивый к шумам и развороту изображения признак, включающий в себя точки излома внешнего контура изображения. Тестирование показала, что вероятность правильного распознавания, даваемая только этим признаком при базе из 50 эталонов близка к 90 процентам.
В качестве перспективных направлений внедрения полученных результатов можно указать такие области народного хозяйства как транспорт, авиация, самолетостроение, космические системы, наземные локационные системы, система грузоперевозок. Положительный эффект от внедрения предлагаемых методов в эти отрасли хозяйства выразится в возможности безопасного передвижения в сложных метеорологических условиях и естественно для безопасных посадок самолетов в тумане и условиях плохой видимости. Интересным местом внедрения может оказаться внедрение обработки изображений в судовождение и систему грузоперевозок крупным наземным транспортом во избежание столкновения судов, например, с причалами или другими судами или предотвращения автокатастроф. Для оптических систем контроля космического пространства данная работа позволит проводить уверенное распознавание интересующего объекта или что эквивалентно существенно повышает дальность обнаружения. Возможно внедрение результатов работы для пограничных систем или систем безопасности обеспечения общественных мероприятии с целью заблаговременного обнаружения и-выявления нежелательных личностей. Первые результаты обработки изображений наблюдаемых через толщу воды позволяют надеяться, что созданные методы можно применять и для подводных работ при установке, например на батискафы для визуального улучшения качества изображений.
Библиография Пахомов, Андрей Анатольевич, диссертация по теме Математическое моделирование, численные методы и комплексы программ
1. Walker A. Reconstructing the image by two intensities in Fourier plane // Optika Acta. 1962. v. 10, № 2. p. 41-45.
2. Crimmins T.R., Fienup J.R. The behavior of zeroes of Fourier transform // Journal of the Optical Society of America. 1981. v. 71, № 3. p. 1026-1029.
3. Huiser A.M.J., Toorn. P. van. The decision the phase problem for the circular function // Optics Letters. 1980. v. 5, №4. p. 377-380.
4. Bruck Y.M., Sodin. L.G. Analysis of the ambiguous of phase problem in two dimensional cases // Optics Communications. 1979. v. 70, № 6. p. 304-310.
5. Crimmins T.R., Fienup J.R., Holsztyshi. W. Input-output algorithm for phase problem // Journal of the Optical Society of America. 1982. v. 72, № 1. p. 610-620.
6. Walker J.R. Iterative algorithm for phase problem decision in the presence exponential filtering // Optica Acta. 1981. v. 28, №3. p. 735-739.
7. Fiddy M.A., Ross. G. The behavior of zeroes of Fourier transform module in infinity // Optika Acta. 1980. v. 27, № 8. p. 439-444.
8. Fiddy M.A., Ross G., Moezzi. H. The behavior of zeroes of Fourier transform module // Optika Acta. 1980. v. 27. №7. p. 1433-1440.
9. Fiddy M.A., Ross. G. The behavior of zeroes of Fourier — transform in the region of the middle frequencies // Optika Acta. 1979. v. 26, № 7. p. 1139-1151.
10. Sault. RJ. Fourier spectrum and phase problem // Optics Letters. 1984. v. 9, № 11. p. 328-330.
11. Crimmins T.R., Fienup. J.R. Investigations iterative algorithm // Journal of the Optical Society of America. 1983. v. 73, № 2. p. 218-226.
12. Aiken G.R., Ross. G. Investigations iterative theoretical algorithm // Optika Acta. 1984. v. 31, № 11. p.7-23.
13. Fried D.L. Analysis of phase problem in two dimensional cases // Optika Acta.1980. v.l, № 10. p. 219228.
14. Kiedron P. Intensity in middle optical zone // Optik. 1981. v. 59, № 2ю p. 303-309
15. Taylor L. Iterative algorithm // Signal processing. IEEE Trans., Acoustic, Speech, Signal, Proc. 1981. v. 29, №9. p. 386-390.
16. Canterakis N. Theoretical method of phase problem decision // IEEE Trans., Acoustic, Speech, Signal, Proc. 1983. v. 31, №6. p. 1256-1271.
17. Hayes M.H., McClellan J.H. Reducible polynomials in more than one variable // Proc. IEEE. 1982. v. 70, № 3, p. 197-200.
18. Hayes M.H. Reconstructing multidimensional sequence only from amplitude or phase Fourier-spectrum // IEEE Trans., Acoustic. Speech, Signal, Proc., 1982, v. 30, № 3. p. 140-152.1920,21.
-
Похожие работы
- Система анализа и обработки медицинских изображений с малоконтрастными объектами
- Разработка методов и устройства контроля качества передачи видеоинформационных сигналов в системах цифрового телевидения
- Разработка методов и устройств сжатия с раздельным преобразованием составляющих спектра сигнала телевизионного изображения
- Исследование информационных возможностей оптико-электронных систем наблюдения
- Методы и устройства формирования информационных сигналов в системах телевизионного контроля удаленных объектов
-
- Системный анализ, управление и обработка информации (по отраслям)
- Теория систем, теория автоматического регулирования и управления, системный анализ
- Элементы и устройства вычислительной техники и систем управления
- Автоматизация и управление технологическими процессами и производствами (по отраслям)
- Автоматизация технологических процессов и производств (в том числе по отраслям)
- Управление в биологических и медицинских системах (включая применения вычислительной техники)
- Управление в социальных и экономических системах
- Математическое и программное обеспечение вычислительных машин, комплексов и компьютерных сетей
- Системы автоматизации проектирования (по отраслям)
- Телекоммуникационные системы и компьютерные сети
- Системы обработки информации и управления
- Вычислительные машины и системы
- Применение вычислительной техники, математического моделирования и математических методов в научных исследованиях (по отраслям наук)
- Теоретические основы информатики
- Математическое моделирование, численные методы и комплексы программ
- Методы и системы защиты информации, информационная безопасность