Устройство съемки изображений, способ управления им и программа

Изобретение относится к устройству автоматической фокусировки и способу управления им на основании преобразованного фотоэлектрическим способом сигнала. Устройство одновременно реализует фазоразностную и контрастную автофокусировку и определяет дальность на основании отношения соответствия между каждым пикселем элемента съемки изображения, который ограничивается средством деления зрачка, предусматривающим ограничение излучения от оптического изображения объекта, поступающего на каждый пиксель элемента съемки изображения, излучением от конкретного участка выходного зрачка фотографического объектива, и конкретным участком выходного зрачка фотографического объектива, и определяет оцениваемое значение фокуса объекта в соответствии с определенным диапазоном по контрастному положению фокуса или корреляционному положению фокуса. Технический результат - повышение скорости и точности фокусировки. 5 н. и 12 з.п. ф-лы, 19 ил.

 

ОБЛАСТЬ ТЕХНИКИ, К КОТОРОЙ ОТНОСИТСЯ ИЗОБРЕТЕНИЕ

Изобретение относится к устройству съемки изображений, содержащему элемент съемки изображения для фотоэлектрического преобразования изображения объекта, к способу управления таким устройством и, в частности, к устройству автоматической фокусировки (называемой далее АФ) и способу управления ей на основании преобразованного фотоэлектрическим способом сигнала, который выдается с элемента съемки изображения.

УРОВЕНЬ ТЕХНИКИ

В уровне техники в качестве управления автоматической фокусировкой для регулировки резкости, например, в цифровом фотоаппарате и т.п., главным образом применялось фазоразностное управление АФ, которое используется в однообъективном зеркальном фотоаппарате, и контрастное управление АФ, которое используется в компактном фотоаппарате и т.п. Особенность этих способов управления АФ состоит в том, что, например, при фазоразностной АФ может быть достигнута высокоскоростная регулировка резкости, а при контрастной АФ быть достигнута точная регулировка резкости.

Например, в PTL 1 описан способ проведения оценки контраста на основании датчика фазоразностной АФ. В PTL 2 описан способ, в котором используется элемент съемки изображения, который может индивидуально принимать излучение, проходящее сквозь различные участки зрачка, при этом формируется изображение, подвергающееся регулировке резкости с помощью сигнала съемки изображения, который выдается с элемента съемки изображения (то есть после обработки съемки изображения).

СПИСОК ЦИТИРОВАННЫХ ИСТОЧНИКОВ

ПАТЕНТНАЯ ЛИТЕРАТУРА

PTL 1: публикация заявки на патент Японии № HO7-199052.

PTL 2: публикация заявки на патент Японии № 2007-4471.

РАСКРЫТИЕ ИЗОБРЕТЕНИЯ

ТЕХНИЧЕСКАЯ ПРОБЛЕМА

Однако в соответствии с уровнем техники, описанным в вышеуказанной патентной литературе, возможен случай, в котором не обеспечивается достаточная точность фокусировки, а лишь формируется изображение, на котором предполагаемый объект не сфокусирован. То есть в соответствии с PTL 1 ввиду того, что датчик для выполнения вычисления контраста и датчик для выполнения съемки изображения различны, возможен случай, в котором точность фокусировки не всегда может быть улучшена. В соответствии с PTL 2 несмотря на то, что может быть получено изображение, на котором точка фокусировки изменилась после того, как могла быть выполнена съемка изображения, существует ограничение по диапазону, в котором фокус может быть изменен с высокой степенью точности, и когда такой диапазон превышает данное ограничение, сложно нормальным образом получить изображение.

РЕШЕНИЕ ПРОБЛЕМЫ

Настоящее изобретение сделано с учетом вышерассмотренной ситуации, и задача изобретения состоит в создании устройства съемки изображений, которое может выполнять АФ с высокой скоростью и высокой точностью фокусировки путем одновременной реализации фазоразностной АФ и контрастной АФ на основании информации об излучении, которое поступило на элемент съемки изображения и прошло через различные участки зрачка. В соответствии с настоящим изобретением устройство съемки изображений, включающее в себя фотографическую оптическую систему, которая включает в себя фотографический объектив и элемент съемки изображения для фотоэлектрического преобразования оптического изображения объекта, которое проходит через фотографический объектив, и выдачи сигнала изображения, содержит: средство деления зрачка для ограничения излучения от оптического изображения объекта, которое поступает на каждый пиксель элемента съемки изображения, излучением от конкретного участка выходного зрачка фотографического объектива; средство смещения изображения для определения величины смещения сигнала изображения, соответствующего заданному оцениваемому положению фокуса для каждого участка выходного зрачка, на основании отношения соответствия между каждым пикселем элемента съемки изображения и конкретным участком выходного зрачка фотографического объектива, которое ограничивается средством деления зрачка; средство формирования изображения для формирования изображения, соответствующего оцениваемому положению фокуса, путем выполнения обработки арифметической операции на основании величины смещения, определяемой средством смещения изображения, над сигналом изображения; средство оценки контраста для вычисления оцениваемого значения контраста изображения, формируемого средством формирования изображения, и определения контрастного положения фокуса на основании оцениваемого значения контраста; средство вычисления корреляции для вычисления оцениваемого значения корреляции между изображениями, соответствующими различным участкам выходного зрачка в сформированном изображении, и определения корреляционного положения фокуса на основании оцениваемого значения корреляции; средство определения оцениваемого диапазона фокусировки для определения диапазона оцениваемого положения фокуса, в котором средство смещения изображений может определять величину смещения, на основании конструкции элемента съемки изображения и средства деления зрачка; и средство оценки фокуса для сравнения абсолютного значения диапазона, определенного средством определения оцениваемого диапазона фокусировки, и абсолютного значения корреляционного положения фокуса, определенного средством вычисления корреляции, и определения оцениваемой величины фокуса объекта на основании определенного корреляционного положения фокуса и определенного контрастного положения фокуса, определенного в соответствии с результатом сравнения.

ПОЛЕЗНЫЕ ЭФФЕКТЫ ИЗОБРЕТЕНИЯ

В соответствии с настоящим изобретением ввиду того, что фазоразностная АФ и контрастная АФ избирательно используются в соответствии с положением съемки изображений, которое определяется в соответствии с конструкцией устройства съемки изображений, может быть создано устройство съемки изображений, способное выполнять АФ с высокой скоростью и высокой точностью.

Другие признаки настоящего изобретения будут ясны из нижеследующего описания примеров осуществления со ссылкой на прилагаемые чертежи.

КРАТКОЕ ОПИСАНИЕ ЧЕРТЕЖЕЙ

Фиг. 1 представляет собой блок-схему, иллюстрирующую построение системы устройства съемки изображений в соответствии с некоторым вариантом осуществления изобретения.

Фиг. 2А, 2В и 2С представляют собой схематические изображения, на которых показаны блок-схемы операции съемки изображения в соответствии с первым вариантом осуществления изобретения.

Фиг. 3А, 3В и 3С представляют собой принципиальные схемы оптической системы фотографического устройства в соответствии с первым вариантом осуществления изобретения.

Фиг. 4А и 4В представляют собой схематические изображения, на которых показаны блок-схемы управления АФ в соответствии с первым вариантом осуществления изобретения.

Фиг. 5А, 5В и 5С представляют собой схематические изображения, на которых показаны блок-схемы управления АФ в соответствии с первым вариантом осуществления изобретения.

Фиг. 6А, 6В, 6С и 6D представляют собой принципиальные схемы, на которых показана операция повторного формирования изображения.

Фиг. 7А, 7В и 7С представляют собой принципиальные схемы оптической системы, которая может применяться в настоящем изобретении.

ОСУЩЕСТВЛЕНИЕ ИЗОБРЕТЕНИЯ

Предпочтительные варианты осуществления настоящего изобретения подробно описаны ниже в соответствии с прилагаемыми чертежами.

ПРИМЕР 1

Ниже со ссылкой на фиг. 1-7С описано устройство съемки изображений в соответствии с первым вариантом осуществления изобретения.

Фиг. 1 представляет собой блок-схему, иллюстрирующую построение системы цифрового фотоаппарата, служащего в качестве устройства съемки изображений, в соответствии с настоящим изобретением. Настоящий фотоаппарат имеет в качестве режимов режим фотографирования неподвижных изображения и режим фотографирования динамических изображений и конструкцию, при которой в каждом режиме фотографирования в качестве задачи настоящего изобретения достигается управление АФ.

Устройство 100 съемки изображений выполнено из фотоаппарата 101 и объектива 102 и содержит систему съемки изображения, систему обработки изображения, систему записи и воспроизведения и систему управления. Система съемки изображения включает в себя фотографическую оптическую систему 103 и элемент 106 съемки изображения. Система обработки изображения включает в себя блок 107 обработки изображения. Система записи и воспроизведения включает в себя блок 108 памяти и блок 109 отображения. Система управления включает в себя блок 105 управления фотоаппаратом, блок 112 управления оптической системой и блок 113 привода объектива. Блок 113 привода объектива может осуществлять привод фокусирующей линзы, линзы коррекции размытия изображения, диафрагмы и т.п.

Система съемки изображения является системой оптической обработки для фокусирования излучения (оптического изображения) от объекта на плоскость съемки изображения элемента 106 съемки изображения, через фотографическую оптическую систему 103, содержащую фотографический объектив. На поверхности (фоточувствительной поверхности) элемента 106 съемки изображения в форме матрицы размещаются микролинзы, при этом формируется так называемый массив микролинз (далее называемый MLA). В настоящем варианте осуществления MLA составляет средство деления зрачка. Несмотря на то что детали назначения и размещения MLA будут описаны ниже с помощью фиг. 3А-3С, благодаря средству деления зрачка оцениваемое значение фокуса/надлежащая величина экспозиции может быть получена по выходному сигналу элемента 106 съемки изображения. Следовательно, фотографическая оптическая система 103 надлежащим образом регулируется на основании полученной таким образом информации. Таким образом, излучение от объекта с надлежащей величиной излучения может подвергаться воздействию элемента 106 съемки изображения, при этом объект может фокусироваться вблизи элемента 106 съемки изображения.

Блок 107 обработки изображения содержит аналого-цифровой (A/D) преобразователь, схему баланса белого, схему гамма-коррекции, схему операции интерполяции и т.п. и может формировать изображение для записи посредством обработки изображения. В состав также может входить средство смещения изображения, средство формирования изображения, средство оценки контраста, средство вычисления корреляции и т.п., служащие в качестве основного раздела изобретения. В настоящем варианте осуществления эти элементы выполнены в виде управляющей программы в системе управления фотоаппаратом.

Блок 108 памяти содержит не только запоминающий блок для фактического запоминания данных, но и блок обработки, необходимый для записи. Блок 108 памяти выдает данные в блок записи и формирует и запоминает изображение, которое выдается в блок 109 отображения. Блок 108 памяти также выполняет обработку со сжатием изображения, динамического изображения, звука и т.п. с помощью заданного способа.

Блок 105 управления фотоаппаратом формирует и выдает синхронизирующий сигнал и т.п. в момент съемки изображения и управляет каждой из системы съемки изображения, системы обработки изображения и системы записи и воспроизведения под действием внешней операции. Например, блок 110 обнаружения срабатывания обнаруживает нажатие спусковой кнопки фотографического затвора (не показана) и управляет приведением в действие (фотоэлектрическим преобразованием) элемента 106 съемки изображения, действием блока 107 обработки изображения, обработкой со сжатием блока 108 памяти и т.п. Кроме того, управление состоянием каждого звена устройства отображения информации для отображения информации на жидкокристаллическом мониторе и т.п. также осуществляется с помощью блока 105 управления фотоаппаратом и блоком 109 отображения.

Далее описана операция регулировки оптической системы с помощью системы управления. Блок 107 обработки изображения соединен с блоком 105 управления фотоаппаратом, при этом положение фокуса и положение диафрагмы, соответствующие условиям фотографирования, формируются на основании сигнала изображения с элемента 106 съемки изображения. Блок 105 управления фотоаппаратом передает команду в блок 112 управления оптической системой через электрическое соединение 111. В соответствии с этой командой блок 112 управления оптической системой управляет блоком 113 привода объектива. Кроме того, с блоком 112 управления оптической системой соединен датчик обнаружения вибраций (не показан). В режиме выполнения коррекции вибраций управление линзой коррекции вибраций осуществляется с помощью блока 113 привода объектива на основании сигнала с датчика обнаружения вибраций.

Далее со ссылкой на фиг. 2А-2С описано действие устройства 100 съемки изображений в целом. Фиг. 2А-2С представляют собой блок-схемы для описания основных принципов действия устройства съемки изображений настоящего изобретения. На фиг. 2А показано действие от включения питания до выключения питания, на фиг. 2В показано действие основного участка режима фотографирования неподвижных изображений, а на фиг. 2С показано действие основного участка режима фотографирования динамических изображений соответственно. Эти действия выполняются с помощью способа, в соответствии с которым блок 105 управления фотоаппаратом загружает управляющую программу, соответствующую каждому схематическому изображению, из запоминающего устройства (не показано) и исполняет ее.

Действие будет описано в порядке этапов, начиная с фиг. 2А. Этап S201 означает включение источника питания. Этап S202 представляет собой этап обнаружения, выключен ли источник питания или нет. Что касается такого обнаружения, то обстоятельство, что выключатель питания (не показан), иное исполнительное устройство (например, кнопка питания, отображаемая на экране отображения меню) и т.п. фотоаппарата сработало, обнаруживается блоком 110 обнаружения срабатывания в соответствии с управляющим воздействием блока 105 управления фотоаппаратом. При обнаружении выключения питания процедура обработки переходит к этапу S205. При необнаружении процедура обработки переходит к этапу S203. Этап S203 представляет собой этап обнаружения действия пользователя блоком 110 обнаружения срабатывания в соответствии с управляющим воздействием блока 105 управления фотоаппаратом. Если управление устройством 100 съемки изображений осуществляется пользователем, далее следует этап S204. В противном случае процедура обработки возвращается на этап S202, и повторяется обнаружение выключения питания или действия пользователя. На этапе S204 выполняется обработка, соответствующая обнаруженному действию пользователя. Например, в тех случаях, когда блоком 110 обнаружения срабатывания обнаруживается операция выбора режима фотографирования неподвижных изображений, блок 105 управления фотоаппаратом запускает действие режима фотографирования неподвижных изображений. Что касается других действий, то имеются осуществление режима фотографирования динамических изображений, воспроизведение данных, записанных в запоминающем средстве, действие для изменения настроек устройства 100 съемки изображений и т.п.

Далее со ссылкой на фиг. 2В и 2С описаны действия режима фотографирования неподвижных изображений и режима фотографирования динамических изображений как обработка, которая выполняется на этапе S204.

Фиг. 2В представляет собой блок-схему, на которой показано действие устройства 100 съемки изображений во время осуществления режима фотографирования неподвижных изображений. Этап S211 означает запуск режима фотографирования неподвижных изображений.

Этап S212 представляет собой этап, на котором в соответствии с управляющим воздействием блока 105 управления фотоаппаратом блок 110 обнаружения срабатывания распознает, включен ли переключатель первого нажатия (именуемый далее SW1). При фотографировании неподвижных изображений операция фотографирования или операция подготовки фотографирования выполняется в соответствии с нажатием спусковой кнопки. Как правило, спусковая кнопка является переключателем двух нажатий. Операция подготовки фотографирования выполняется включением переключателя первого нажатия, а операция фотографирования выполняется включением переключателя второго нажатия. Операция подготовки фотографирования означает операцию корректировки АФ фотографической оптической системы 103 и условий экспозиции элемента 106 съемки изображения путем выполнения фотометрии, измерения дальности и т.п.

Если на этапе S212 обнаруживается включение SW1, процедура обработки переходит на этап S214, а если не обнаруживается, процедура обработки переходит на этап S213. На этапе S213 выполняется обработка в соответствии с действием, отличным от SW1. Несмотря на то что таким действием может быть изменение установок фотографирования и т.п., например, ввиду того что они не связаны с признаками изобретения, их описание в данном случае не приводится.

На этапе S214 в качестве операции подготовки фотографирования выполняется измерение дальности. Хотя одновременно выполняются также другие операции подготовки фотографирования, ввиду того что они не являются признаками настоящего изобретения, для упрощения описания описана операция измерения дальности и лишь операции, связанные с ними.

На этапе S215 при необходимости выполняется привод объектива для коррекции фотографической оптической системы 103 на основании результата этапа S214. Если в результате этапа S214 устанавливается, что в настоящее время достигнуто состояние нахождения в фокусе, нет необходимости выполнять привод объектива для коррекции точки фокусировки.

На этапе S216 контролируется спуск SW1. Если устанавливается, что пользователь спускает SW1, процедура обработки возвращается на этап S212, а устройство возвращается в дежурное состояние обнаружения включения SW1. Если пользователь продолжает действие SW1, далее следует этап S217.

На этапе S217 блок 110 обнаружения срабатывания обнаруживает включение переключателя второго нажатия (именуемого далее SW2) спусковой кнопки в соответствии с управляющим воздействием блока 105 управления фотоаппаратом. Если обнаруживается включение SW2, процедура обработки возвращается на этап S218. Если оно не обнаруживается, процедура обработки возвращается на этап S216.

На этапе S218 выполняется операция фотографирования. Надлежащая экспозиция элемента 106 съемки изображения осуществляется в соответствии с результатом операции подготовки фотографирования. Оптическое изображение объекта формируется в виде электрического сигнала и обрабатывается блоком 107 обработки изображения. После этого оно записывается в блок 108 памяти.

Этап S219 означает прекращение фотографирования неподвижных изображений.

Как описано со ссылкой на фиг. 2В, в режиме фотографирования неподвижных изображений измерение дальности и операция коррекции оптической системы, соответствующие этапам S212, S214 и S215, выполняются в связи с включением SW1. Хотя операции подготовки не всегда ограничиваются описанными выше применительно к ним в способе измерения дальности и коррекции оптической системы, называемом следящим АФ или непрерывным АФ, основное действие при фотографировании неподвижных изображений в данном случае приведено в качестве примера.

Фиг. 2С представляет собой блок-схему, на которой показано действие устройства 100 съемки изображений в момент выполнения фотографирования неподвижных изображений. Этап S221 означает запуск режима фотографирования динамических изображений.

На этапе S222 блоком 110 обнаружения срабатывания обнаруживается включение кнопки записи (не показана) (кнопки, которая указывает на запуск фотографирования динамических изображений). Если на этапе S222 обнаруживается включение кнопки записи, далее следует этап S223.

На этапе S223 выполняется обработка, соответствующая действию, отличному от действия кнопки записи. Например, несмотря на то что можно упомянуть изменение установок фотографирования и т.п., ввиду того что оно не является признаками изобретения, его описание не приводится.

На этапе S224 выполняется измерение дальности в качестве операции подготовки фотографирования. Хотя одновременно выполняются также другие операции подготовки фотографирования, ввиду того что они не являются признаками настоящего изобретения, для упрощения описания описаны операция измерения дальности и лишь операции, связанные с ними.

На этапе S225 при необходимости выполняется привод объектива для коррекции фотографической оптической системы 103 на основании результата этапа S224. Если в результате этапа S224 устанавливается, что в данный момент достигнуто состояние нахождения в фокусе, нет необходимости выполнять привод объектива для коррекции точки фокусировки. Благодаря коррекции оптической системы до начала записи на этапах S224 и S255 непосредственно после начала записи надлежащим образом определяются состояние фокусировки и т.п. и улучшается качество формируемого видеоизображения.

На этапе S226 начинается запись. В частности, сигнал изображения считывается с элемента 106 съемки изображения в заданном интервале выборки и подвергается обработке кодов и т.п. с помощью блока 107 обработки изображения. После этого начинается операция записи в блок 108 памяти.

На этапе S227 блоком 110 обнаружения обнаруживается срабатывание кнопки остановки записи. Если на этапе S227 обнаруживается срабатывание кнопки остановки записи, далее следует этап S229. Если оно не обнаруживается, далее следует этап S228.

На этапе S228 определяется время измерения таймера для выполнения измерения дальности. Процедура обработки переходит на этап S224 в каждом заданном интервале в соответствии со временем измерения таймера. В противном случае процедура обработки возвращается на этап S227, и устройство ожидает срабатывания кнопки остановки записи. Благодаря определению времени измерения таймера на этапе S228 на этапе S224 выполняется операция измерения дальности в каждом заданном интервале, и во время записи также выполняются измерение дальности и коррекция оптической системы. Этап S229 означает прекращение фотографирования динамических изображений.

Как описано на фиг. 2С, при фотографировании динамических изображений измерение дальности и операция коррекции оптической системы, соответствующие этапам S122, S124, S125 и S128, выполняются в связи со срабатыванием кнопки записи и измерением времени измерения таймера.

Далее, фиг. 3А-3С представляют собой схемы для описания признаков фотографической оптической системы в настоящем варианте осуществления. На этих схемах по существу те же составные элементы, что и на фиг. 1, обозначены теми же ссылочными позициями. Чтобы применять данное изобретение, необходимо получать информацию об угле, а также положении лучей, которая называется информацией о световом поле и т.п. В данном варианте осуществления для того, чтобы получить угловую информацию, вблизи плоскости съемки изображения фотографической оптической системы 103 размещается MLA, при этом множество пикселей выполняется соответствующим одной из микролинз, составляющих MLA.

Фиг. 3А представляет собой схему, схематично иллюстрирующую отношение соответствия между элементом 106 съемки изображения и MLA 320. Фиг. 3В представляет собой принципиальную схему, иллюстрирующую соответствие между пикселями элемента 106 съемки изображения и MLA 320. Фиг. 3С представляет собой схему, иллюстрирующую, что пиксели, размещаемые под MLA с помощью MLA 320, выполняются соответствующими определенным участкам зрачка.

Как показано на фиг. 3А, MLA 320 размещается на элементе 106 съемки изображения таким образом, что передняя главная точка MLA 320 располагается вблизи плоскости фокусировки фотографической оптической системы 103. На фиг. 3А показан вертикальный вид MLA 320 сбоку. Линзы MLA 320 размещаются таким образом, чтобы перекрывать пиксели на элементе 106 съемки изображения. Хотя каждая из микролинз, составляющих MLA 320, показана в увеличенном виде на фиг. 3А с тем, чтобы ее хорошо было видно, в действительности каждая микролинза имеет размер, в несколько раз превышающий размер пикселя. Реальный размер будет описан с использованием фиг. 3В.

Фиг. 3В представляет собой частичную увеличенную схему вида MLA 320 спереди на фиг. 3А. Массив в виде матрицы, показанный на фиг. 3А, задает каждый пиксель элемента 106 съемки изображения. Микролинзы, составляющие MLA 320, изображены сплошными кругами 320a, 320b, 320c и 320d соответственно. Как будет понятно из фиг. 3В, на одну микролинзу выделяется множество пикселей. В приведенном на фиг. 3В примере 25 (= 5 строк × 5 столбцов) пикселей образуют одну группу, соответствующую одной микролинзе. То есть размер каждой микролинзы равен размеру, в (5 раз × 5 раз) превышающему размер пикселя.

Фиг. 3С представляет собой схему, иллюстрирующую поперечное сечение одной микролинзы в том случае, когда срез MLA осуществляется таким образом, что поперечное сечение включает в себя оптическую ось микролинзы, а продольное направление (направление Х) элемента съемки изображения параллельно поперечному направлению схемы. Ссылочные позиции 321, 322, 323, 324 и 325 на фиг. 3С означают пиксели (один блок фотоэлектрического преобразования) элемента 106 съемки изображения. На схеме, приведенной в верхней части фиг. 3С, показана плоскость выходного зрачка фотографической оптической системы 103. В действительности, несмотря на то что плоскость выходного зрачка (плоскость X-Y) параллельна вертикальному направлению (направлению y) поверхности бумаги фиг. 3С согласно соответствию направлений между плоскостью выходного зрачка и датчиком, изображенным в нижней части фиг. 3С, направление проектирования для описания изменено. Для упрощения описания фиг. 3С ниже описана одномерная проекция/обработка сигналов. То есть предполагается, что деление зрачка осуществляется в одном измерении лишь с 331 по 335, а соответствующее размещение пикселей также устанавливается в одном измерении, например, лишь с 321а по 325а на фиг. 3В. Это предположение также применимо к описанию фиг. 6А-6D. Это легко может быть распространено на двумерную проекцию/обработку сигналов в реальном устройстве.

Имеются пространственные отношения соответствия между пикселями 321, 322, 323, 324 и 325 на фиг. 3С и 321а, 322а, 323а, 324а и 325а на фиг. 3В соответственно. Как показано на фиг. 3С, каждый пиксель выполнен таким образом, что он сопрягается с определенным участком выходного зрачка в плоскости выходного зрачка фотографической оптической системы 103 с помощью MLA 320. В приведенном на фиг. 3С примере пиксель 321 и участок 331 соответствуют друг другу, пиксель 322 и участок 332 соответствуют друг другу, пиксель 323 и участок 333 соответствуют друг другу, пиксель 324 и участок 334 соответствуют друг другу и пиксель 325 и участок 335 соответствуют друг другу соответственно. То есть только излучение, которое проходит через участок 331 на плоскости выходного зрачка фотографической оптической системы 103, поступает на пиксель 321. Это имеет место и для остальных пикселей. В результате информация об угле падения излучения может быть получена по относительным положениям участков, через которые проходит излучение, в плоскости зрачка, и пикселей на элементе 106 съемки изображения.

Обозначения Δх и Δθ, показанные на фиг. 3С, означают шаг пикселей и угловое разрешение элемента 106 съемки изображения соответственно. Как описано ниже, вместе с числом N_θ делений угла (N_θ=5 в примере на фиг. 3А-3С) они обеспечивают диапазон d_max, в котором может выполняться контрастная АФ. Шаг Δх пикселей определяется формой элемента 106 съемки изображения. Угловое разрешение Δθ определяется диапазоном, в котором формируется угол световых лучей, и числом N_θ делений угла. Следовательно, эти параметры определяются только физической конструкцией (конструкцией элемента 106 съемки изображения и MLA 320).

Далее с помощью фиг. 7А-7С описано повторное формирование изображения в плоскости мнимого фокуса в фотографической оптической системе, изображенной на фиг. 3А-3С. На этих схемах по существу те же составные элементы, что и на фиг. 1 и 3А-3С, обозначены теми же ссылочными позициями. Фиг. 7А-7С представляют собой схемы, схематично иллюстрирующие состояние, в котором излучение от объекта (фотографируемого объекта) фокусируется на элементе 106 съемки изображения. Фиг. 7А соответствует оптической системе, описанной на фиг. 3А-3С, и является примером, в котором MLA 320 располагается вблизи плоскости съемки изображения фотографической оптической системы 103. Фиг. 7В является примером, в котором MLA 320 располагается ближе к объекту, чем плоскость съемки изображения фотографической оптической системы 103. Фиг. 7С является примером, в котором MLA 320 располагается дальше от объекта, чем плоскость съемки изображения фотографической оптической системы 103.

На фиг. 7А-7С ссылочной позицией 106 обозначен элемент съемки изображения; 320-MLA; 331-335 - участки зрачка, используемые на фиг. 3А-3С; 751 - плоскость изображения; 751а-751b - собственные точки на объекте; а 752 - плоскость зрачка фотографической оптической системы. Ссылочными позициями 761, 762, 771, 772, 773, 981, 782, 783 и 784 обозначены конкретные микролинзы в MLA соответственно. На фиг. 7В и 7С ссылочной позицией 106а обозначен элемент съемки изображения, расположенный в плоскости мнимого фокуса, а 320а обозначает MLA, расположенную в плоскости мнимого фокуса. Они изображены в виде ссылок для того, чтобы объяснить отношение соответствия с фиг. 7А. Излучение, выходящее из точки 751а на объекте и проходящее через участки 331 и 333 в плоскости зрачка, показано сплошными линиями, а излучение, выходящее из точки 751b на объекте и проходящее через участки 331 и 333 в плоскости зрачка, показано пунктирными линиями.

В примере на фиг. 7А, как описано также на фиг. 1, благодаря размещению MLA 320 вблизи плоскости съемки изображения фотографической оптической системы 103 элемент 106 съемки изображения и плоскость 752 зрачка имеют сопряженное отношение. Кроме того, плоскость 751 объекта и MLA 320 имеют сопряженное отношение. Поэтому излучение, выходящее из точки 751а на объекте, достигает микролинзы 761, излучение, выходящее из точки 751b на объекте, достигает микролинзы 762, а излучение, проходящее через участки 331-335, достигает соответствующих пикселей, предусмотренных под микролинзами соответственно.

В примере на фиг. 7В излучение от фотографической оптической системы 103 фокусируется с помощью MLA 320, при этом элемент 106 съемки изображения размещается в плоскости съемки изображения. Благодаря размещению микролинз, как описано выше, плоскость 751 объекта и элемент 106 съемки изображения имеют сопряженное отношение. Излучение, выходящее из точки 751а на объекте и проходящее через участок 331 в плоскости зрачка, достигает микролинзы 771. Излучение, выходящее из точки 751а на объекте и проходящее через участок 333 в плоскости зрачка, достигает микролинзы 772. Излучение, выходящее из точки 751b на объекте и проходящее через участок 331 в плоскости зрачка, достигает микролинзы 772, излучение, выходящее из точки 751b на объекте и проходящее через участок 333 в плоскости зрачка, достигает микролинзы 773. Излучение, проходящее через каждую микролинзу, достигает соответствующих пикселей, соответственно предусмотренных под микролинзами. Как указано выше, точки на объекте, соответственно, фокусируются в различных положениях элемента съемки изображения с помощью участков, через которые проходит излучение, в плоскости зрачка. Благодаря перемещению этих точек в положения на мнимом элементе 106а съемки изображения может быть получена информация (о повторном формировании изображения), аналогичная приведенной на фиг. 7А. То есть может быть получена информация об участках зрачка, через которые проходит излучение (об углах падения), и о положениях на элементе съемки изображения, при этом реализуется функция средства деления зрачка.

В примере на фиг. 7С излучение от фотографической оптической системы 103 повторно формируется с помощью MLA 320 (поскольку фокусируется излучение в состоянии, в котором излучение, которое фокусируется однократно, рассеивается, такая обработка называется «повторным формированием»), а элемент 106 съемки изображения размещается в плоскости съемки изображения. Благодаря размещению микролинз, как описано выше, плоскость 751 объекта и элемент 106 съемки изображения имеют сопряженное отношение. Излучение, выходящее из точки 751а на объекте и проходящее через участок 331 в плоскости зрачка, достигает микролинзы 782. Излучение, выходящее из точки 751а на объекте и проходящее через участок 333 в плоскости зрачка, достигает микролинзы 781. Излучение, выходящее из точки 751b на объекте и проходящее через участок 331 в плоскости зрачка, достигает микролинзы 784. Излучение, выходящее из точки 751b на объекте и проходящее через участок 333 в плоскости зрачка, достигает микролинзы 783. Излучение, проходящее через каждую микролинзу, достигает соответствующих пикселей, предусмотренных под микролинзами соответственно. Аналогично фиг. 7В, благодаря перемещению этих точек в положения на мнимом элементе 106а съемки изображения может быть получена информация (о повторном формировании изображения), аналогичная приведенной на фиг. 7А. То есть может быть получена информация об участках зрачка, через которые проходит излучение (об углах падения), и о положениях на элементе съемки изображения, при этом реализуется функция средства деления зрачка.

На фиг. 7А-7С изображен пример, в котором в качестве средства деления зрачка используется MLA (элемент фазовой модуляции), и может быть получена информация о положении и угловая информация. Однако может также использоваться иная оптическая система при условии, что она может получать информацию о положении и угловую информацию (которая эквивалентна информации, которой ограничены участки зрачка, через которые проходит излучение). Например, может также использоваться способ, с помощью которого в оптический путь фотографической оптической системы вводится маска (элемент модуляции коэффициента усиления), на которой формируется необходимая картина.

Обработка для получения оцениваемого значения фокуса по выходному сигналу элемента 106 съемки изображения с помощью фотографической оптической системы, изображенной в данном варианте осуществления, будет описана с помощью фиг. 4А-4В, 5А-5С и 6А-6D.

Операция измерения дальности в качестве признаков настоящего изобретения будет описана с помощью фиг. 4А-4В и фиг. 5А-5С.

Фиг. 4А-4В и фиг. 5А-5С представляют собой блок-схемы для описания операции измерения дальности устройства съемки изображений настоящего изобретения. Фиг. 4А представляет собой блок-схему, иллюстрирующую в целом действие операции измерения дальности, а фиг. 4В представляет собой блок-схему, иллюстрирующую действие средства вычисления корреляции соответственно. Фиг. 5А представляет собой блок-схему, иллюстрирующую действие средства смещения изображения. Фиг. 5В представляет собой блок-схему, иллюстрирующую действие средства формирования изображения. Фиг. 5С представляет собой блок-схему, иллюстрирующую действие средства оценки контраста. Операция измерения дальности настоящего изобретения будет описана в порядке этапов, начиная с фиг. 4А.

Этап S401 показывает начало операции измерения дальности. Например, это имеет место в том случае, когда в режиме фотографирования неподвижных изображений блок 110 обнаружения срабатывания, изображенный на фиг. 1, обнаруживает срабатывание переключателя первого нажатия SW1 спусковой кнопки фотографом (этап S212 на фиг. 2В) и т.п.

На этапе S402 под управлением блока 105 управления фотоаппаратом осуществляется экспозиция элемента 106 съемки изображения в соответствии с результатом операции подготовки фотографирования и считывание (аналого-цифровое преобразование), благодаря чему формируются данные (сигнал съемки изображения объекта). Хотя величина экспозиции в момент фотографирования в данном случае может также вычисляться по времени экспозиции и величине экспозиции, поскольку она не является признаками настоящего изобретения, ее описание не приводится.

На этапе S403 блок 105 управления фотоаппаратом приводит в действие средства вычисления корреляции и получает наилучшее корреляционное положение фокуса на основании корреляционного значения. Подробности действия средства вычисления корреляции описаны ниже с помощью блок-схемы на фиг. 4В.

На этапе S404 под управлением блока 105 управления фотоаппаратом осуществляется определение оценки контраста. На этапе S405 блок 105 управления фотоаппаратом действует в качестве средства определения оцениваемого диапазона фокусировки, которые описаны ниже. То есть на этапе S404 осуществляется сравнение абсолютного значения наилучшего положения фокуса (на схеме выраженного в виде «наилучшего корреляционного положения фокуса») на основании оценки величины корреляции, полученной на этапе S403, и абсолютного значения порогового значения d_max, которое вводится на этапе S405. В случае, если абсолютное значение наилучшего положения фокуса на основании оценки величины корреляции больше другого значения, далее следует этап S412. Если абсолютное значение наилучшего положения фокуса на основании оценки величины корреляции не больше абсолютного значения порогового значения d_max, далее следует этап S406.

Пороговое значение, которое определяется средством определения оцениваемого диапазона фокусировки на этапе S405, является пороговым значением в случае оценки фокуса по контрасту, которая выполняется на этапах S406-S411 (в том случае, когда может быть определена величина смещения изображения) и задается нижеследующим уравнением. В плоскости мнимого фокуса в положении, превышающем пороговое значение, возможен случай, в котором информация об объекте теряется при повторном формировании изображения, описанном с помощью фиг. 3А-3С и фиг. 7А-7С, и возможно, что точность контрастной АФ ухудшится.

d_max=N_θΔx/tanΔθ

Как описано на фиг. 3А-3С, N_θ, Δx и Δθ определяются конструкцией аппаратной части устройства 100 съемки изображений независимо от условий фотографирования и т.п. Поэтому достаточно, чтобы вычисленные ранее значения хранились в памяти, а затем считывались и использовались на этапе S405.

Этапы S406-S411 образуют обработку в цикле. На этапе S406 вычисление повторяется вплоть до заданного конечного значения при одновременном смещении оцениваемого положения фокуса (соответствующего плоскости мнимого фокуса, описанной с помощью фиг. 7А-7С) от заданного начального значения на заданное положение (шаг). Начальное значение и конечное значение могут определяться с помощью d_max. В примере на фиг. 4А и 4В оцениваемый диапазон устанавливается равным диапазону от -d_max до +d_max.

На этапе S407 блок 105 управления фотоаппаратом приводит в действие средства смещения изображения, посредством этого получая величину смещения изображения. Подробности действия средства смещения изображения описаны ниже с помощью блок-схемы по фиг. 5А.

На этапе S408 блок 105 управления фотоаппаратом приводит в действие средства формирования изображения, посредством этого выполняя формирование изображения. Подробности действия средства формирования изображения описаны ниже с помощью блок-схемы на фиг. 5В.

На этапе S409 блок 105 управления фотоаппаратом приводит в действие средства оценки контраста, посредством этого получая наилучшее контрастное положение фокуса на основании оцениваемого значения контраста. Подробности действия средства оценки контраста описаны ниже с помощью блок-схемы на фиг. 5С.

На этапе S411 наилучшее положение фокуса (на схеме выраженное в виде «наилучшего корреляционного положения фокуса») на основании оценки контраста, полученной на этапах S406-S410, используется в качестве оцениваемого значения контраста.

В результате считывание элемента 106 съемки изображения осуществляется лишь однажды на этапе S402, посредством этого позволяя получать оцениваемое значение фокуса, включая оцениваемое значение контраста, при этом может быть достигнута высокая скорость обработки.

На этапе S412 оценка фокуса на основании контраста не выполняется, и наилучшее корреляционное значение фокуса на основании оценки корреляции используется в качестве оцениваемого значения фокуса.

Средства вычисления корреляции будут описаны с помощью блок-схемы на фиг. 4В. Этап S421 означает запуск действия средства вычисления корреляции.

Этапы S422-S431 являются обработкой в цикле. На этапе S422 арифметическая операция выполняется повторно в соответствии с числом оцениваемых положений фокуса (так называемым числом видимых областей измерения дальности). Существует проблема, состоящая в том, что когда устанавливается большее число видимых областей измерения дальности, хотя при этом может быть охвачен весь экран дисплея, оценка занимает некоторое время. Оно надлежащим образом устанавливается с помощью параметров настройки пользователя и т.п.

На этапе S423 устанавливается число оцениваемых точек, подвергающихся оценке, и размер оцениваемого кадра (например, кадра с использованием оцениваемой точки в качестве центра). Число оцениваемых точек представляет собой число точек для получения значения корреляции, которое определяется на этапе S424, и надлежащим образом устанавливается в соответствии с условиями фотографирования, типом линзы 102 и т.п. Число оцениваемых точек также соответствует величине смещения в случае получения корреляции при одновременном смещении изображения. В устройстве 100 съемки изображения оно соответствует глубине резкости для выполнения фокусировки. Существует проблема, состоящая в том, что когда устанавливается большее число оцениваемых точек, хотя при этом может быть охвачен весь экран дисплея, для оценки требуется некоторое время. Поэтому оно надлежащим образом устанавливается с помощью параметров настройки пользователя и т.п. С другой стороны, если устанавливается больший оцениваемый кадр, даже в случае текстуры, в которой нет множества локальных картин, изображение может фокусироваться. Однако, если оцениваемый кадр слишком велик, возникает так называемый конфликт перспективы, при котором одновременно оцениваются изображения объекта, расположенные на различных расстояниях. Размер оцениваемого кадра устанавливается надлежащим образом, чтобы такие проблемы могли быть решены.

Этапы S424-S429 являются обработкой в цикле. На этапе S424 арифметическая операция выполняется циклически, чтобы получить оцениваемое значение, соответствующее оцениваемой точке, определенной на этапе S423.

Этапы S425-S427 являются обработкой в цикле. На этапе S425 выполняется вычисление корреляции в отношении пикселей в оцениваемом кадре, выбираемом на этапе S423. В качестве вычисления корреляции на этапе S426 вычисляется Σ|A_i-B_i|. A_i означает яркость i-го пикселя, соответствующего определенному участку зрачка, через который проходит излучение. B_i означает яркость i-го пикселя, соответствующего некоторому участку зрачка, через который проходит излучение, отличному от участка для A_i. Например, на фиг. 3А-3С достаточно, чтобы яркость, соответствующая матрице лишь из пикселей, соответствующих пикселю 322, была установлена равной A_i, а яркость, соответствующая матрице лишь из пикселей, соответствующих пикселю 324, была установлена равной B_i. Что касается выбора участка зрачка, в котором находится пиксель, достаточно определить его исходя из величины опорной длины, состояния виньетирования плоскости зрачка и т.п.

Благодаря описанным выше установкам может быть вычислена корреляция между изображениями, соответствующими различным участкам, через которые проходит излучение, и может быть получено оцениваемое значение на основании так называемой фазоразностной АФ. На этапе S428 полученное значение корреляции сохраняется в качестве оцениваемого значения в памяти 108.

В вышеупомянутом выражении оценки Σ|A_i-B_i| часть с небольшой величиной корреляции соответствует части наилучшего состояния фокуса (корреляционного положения фокуса). Хотя в данном случае вычисление корреляции выполняется способом суммирования абсолютных значений разностей, вычисление корреляции может выполняться другим способом вычислений, например способом суммирования максимальных значений, способом суммирования минимальных значений, способом суммирования дифференциальных величин квадратов и т.п.

На этапе S430 точка, в которой определено наилучшее оцениваемое значение вычисления, обновляется в качестве наилучшего положения фокуса на основании оценки величины корреляции. В вышеупомянутом уравнении на этапе S426 точка, в которой определено наилучшее оцениваемое значение вычисления, является положением, в котором величина корреляции невелика. Однако наилучшее положение может быть определено путем дополнительного использования еще одного показателя.

Вышеуказанная арифметическая операция выполняется для каждой видимой области. После того как окончательно определено наилучшее положение фокуса на основании оценки величины корреляции, следует этап S432. Процедура обработки возвращается на этап S403, на котором осуществляется обращение к настоящей процедуре.

Далее с помощью блок-схемы на фиг. 5А описано средство смещения изображения. Этап S501 означает запуск действия средства смещения изображения.

Этапы S502-S506 являются обработкой в цикле. На этапе S502 вычисление цикла выполняется число раз, соответствующее числу делений зрачка (число раз, равное числу пикселей элемента съемки изображения, соответствующего одной микролинзе). Например, поскольку в примере, изображенном на фиг. 3А-3С, микролинза делится на 25 участков (в двух измерениях), вычисляется величина смещения изображения, соответствующая положению зрачка каждого из 25 участков. Как описано ниже с помощью фиг. 6А-6D, даже в одной плоскости повторного формирования, если при повторном формировании изображения угол падения отличается, то отличается и величина смещения изображения. Такая обработка в цикле выполняется для отражения влияния данного обстоятельства на формирование изображения.

На этапе S503 величина смещения на каждом участке зрачка, соответствующем оцениваемому положению, вычисляется на основании данных по результатам этапа S504. На этапе S504 сохраняется отношение соответствия между каждым пикселем и MLA, при этом сохраняется информация, по которой можно узнать, от какого участка зрачка каждый пиксель принимает излучение.

На этапе S505 пиксели, принимающие излучение с одним и тем же углом падения (принимающие лучи от одного и того же участка зрачка), смещаются на основании информации на этапе S503. Например, 325a и 325b на фиг. 3В соответствуют пикселям, принимающим излучение с одним и тем же углом падения. Таких пикселей имеется столько же, сколько и микролинз, составляющих MLA.

На этапе S507 процедура обработки возвращается на этап S407, на котором осуществляется обращение к настоящей процедуре.

Подробности действия средства формирования изображения описаны ниже с помощью блок-схемы на фиг. 5В. Этап S551 означает запуск действия средства формирования изображения.

На этапе S512 инициализируются (заполняются 0) данные на некотором участке для суммирования на этапе S515. Достаточно, чтобы размер участка данных в этом случае был равен размеру, соответствующему числу микролинз, при этом удобно, если используется лишь та градация данных, которая может сохранять произведение градации исходных данных и числа делений зрачка. Например, если исходить из того, что исходные данные представляют собой 8-битовые данные, а число делений зрачка равно 25, нет необходимости учитывать переполнение данных при обработке арифметической операции в случае 13 битов (> 8 битов + log₂25).

Этапы S513-S517 являются обработкой в цикле. На этапе S513 вычисление цикла выполняется в соответствии с числом микролинз, составляющих MLA (то есть в отношении каждой микролинзы). Например, в примере, приведенном на фиг. 3А-3С, величина [(числа пикселей в исходном элементе съемки изображения) ÷25 (число делений зрачка)] равна числу микролинз.

Этапы S514-S516 являются обработкой в цикле. На этапе S514 вычисление цикла выполняется в соответствии с числом делений зрачка. Например, в примере, приведенном на фиг. 3А-3С, поскольку микролинза делится на 25 (=5×5) участков, излучение от положения зрачка каждого из 25 участков суммируется на этапе S515. В тех случаях, когда величина смещения не превышает пиксель в целое число раз на этапе S515 суммирования, излучение надлежащим образом делится для суммирования. Например, излучение надлежащим образом суммируется в соответствии с зоной перекрытия. Таким образом, изображение, сфокусированное в каждом оцениваемом положении, формируется повторно. Данные изображения для сформированного изображения сохраняются в блоке 108 памяти или ином запоминающем средстве (не показано) посредством управляющего воздействия блока 105 управления фотоаппаратом. Поэтому сформированное изображение может повторно формироваться и отображаться.

На этапе S518 процедура обработки возвращается на этап S408, на котором осуществляется обращение к настоящей процедуре.

Подробности действия средства оценки контраста описаны ниже с помощью блок-схемы на фиг. 5С. Этап S521 означает запуск действия средства оценки контраста.

На этапе S522 устанавливаются число оцениваемых видимых полей и размер оцениваемого кадра, которые подвергаются оценке контраста. Достаточно, чтобы установка числа оцениваемых видимых полей и размера осуществлялась в соответствии с содержимым, описанным в средстве вычисления корреляции.

Этапы S523-S531 являются обработкой в цикле. На этапе S523 арифметическая операция выполняется циклически, чтобы получить оцениваемое значение, соответствующее числу оцениваемых видимых полей, определенному на этапе S522.

Этапы S524-S526 являются обработкой в цикле. На этапе S524 арифметическая операция вычисления первичного контраста выполняется в отношении пикселей в каждом оцениваемом кадре, определяемом на этапе S522. Как показано на этапе S525, в качестве арифметической операции вычисления первичного контраста вычисляется Σ(S_i-S_i-1). S_i означает яркость, которая выдается с i-го средства формирования изображения. Благодаря вычислению, как описано выше, разность яркостей между смежными пикселями может суммироваться. Однако в описании этого этапа для внесения ясности в описание приведено выражение, соответствующее случаю, в котором изображения выстроены в одном измерении. В двумерных изображениях могут суммироваться разности яркостей и в вертикальном направлении, и в поперечном, либо надлежащим образом может суммироваться лишь разность яркостей в одном направлении.

Этапы S527-S529 являются обработкой в цикле. На этапе S527 арифметическая операция вычисления вторичного контраста выполняется в отношении пикселей в каждом оцениваемом кадре, определяемом на этапе S522. Как показано на этапе S528, в качестве арифметической операции вычисления вторичного контраста вычисляется Σ(S_i-S_i-1)². И в описании этого этапа для внесения ясности в описание приведено выражение, соответствующее случаю, в котором изображения выстроены в одном измерении.

В случае фотографирования объекта (например, неба и т.п.), яркость которого изменяется плавно, первичный контраст существенно не изменяется. С другой стороны, вторичный контраст изменяется преимущественно в соответствии с точкой фокусировки. (Сильнее влияние высокочастотной составляющей.) Поэтому на этапе S630 в качестве оцениваемого значения контраста устанавливается значение, полученное путем деления вторичного контраста на квадрат первичного контраста. Путем вышеупомянутой обработки оцениваемое значение контраста нормируется по яркости, при этом может быть получено оцениваемое значение контраста объекта в соответствии с точкой фокусировки.

Хотя оцениваемое значение контраста в настоящем варианте осуществления определяется с помощью вышеупомянутого способа, может также использоваться другой способ вычисления при условии, что определяется оцениваемое значение контраста, сопровождаемое флуктуацией фокуса.

На этапе S532 точка (контрастное положение фокуса), в которой определено наилучшее оцениваемое значение контраста, обновляется в качестве наилучшей точки фокусировки на основании оценки контраста.

На этапе S533 процедура обработки возвращается на этап S409, на котором осуществляется обращение к настоящей процедуре.

Далее схематически иллюстрируются смещение изображения и формирование изображения с помощью фиг. 6А-6D и описана проверка правильности вычисления контраста с помощью повторного формирования изображения.

Среди фиг. 6А-6D на фиг. 6В показана плоскость, в которой фактически имеется элемент 106 съемки изображения и формируется изображение. На фиг. 6А показана плоскость повторного формирования (плоскость 1 повторного формирования) на стороне объекта, отличной от изображенной на фиг. 6В. На фиг. 6С показана плоскость повторного формирования (плоскость 2 повторного формирования) на стороне объекта, удаленной от изображенной на фиг. 6В. Как указано выше, на этих схемах для внесения ясности в описание направление деления зрачка и расположение пикселей соответственно установлены в одном направлении.

На фиг. 6В X_1,i, X_2,i, X_3,i, X_4,i и X_5,i означают данные (данные изображения), полученные после того, как излучение прошло через участки 1, 2, 3, 4 и 5 зрачка и соответственно поступило на микролинзу X_i. То есть первая половина подстрочного индекса означает участок зрачка, через который проходит излучение, а вторая половина означает номер микролинзы. В отношении физического положения X_1,i означает данные, полученные от участка 321 на фиг. 3С, а X_2,i означает данные, полученные от участка 322 на фиг. 3С. Числа 3, 4 и 5 в подстрочных индексах указывают на то, что данные соответствуют участкам 323, 324 и 325 соответственно.

Для формирования изображения на плоскости получения достаточно суммировать данные (яркость), полученные после того, как излучение поступило на микролинзу X_i. В частности, суммарное значение в угловом направлении излучения, которое поступает на микролинзу X_i, может быть получено следующим образом: S_i=X_1,i+X_2,i+X_3,i+X_4,i+X_5,i. Путем выполнения вышеописанной обработки в отношении всех микролинз формируется изображение, аналогичное изображению обычного фотоаппарата.

Далее рассматривается способ формирования изображения на плоскости 1 повторного формирования. Как описано на фиг. 3А-3С, в фотографической оптической системе в настоящем варианте осуществления ввиду того, что излучение, поступающее на каждый пиксель, ограничено определенным участком зрачка, угол падения уже известен. Положение каждого пикселя на плоскости повторного формирования повторно формируется под таким углом. В частности, в случае таких данных, как X_1,i, в которых подстрочный индекс участка зрачка равен 1, предполагается, что излучение поступает под углом, показанным номером 641 на фиг. 6D. Числа 2, 3, 4 и 5 в подстрочных индексах участков зрачка указывают на то, что данные соответствуют углам 642, 643, 644 и 645 соответственно. В этом случае излучение, которое поступает на микролинзу X_i в плоскости 1 повторного формирования, поступает повсюду на X_i-2-X_i+2 (одно измерение) в плоскости получения. Точнее говоря, излучение распределяется на X_1,i-2, X_2,i-1, X_3,i, X_4,i+1 и X_5,i+2. Чтобы восстановить изображение на плоскости 1 повторного формирования, не ограничиваясь X_i, нетрудно понять, что требуется повторно сформировать изображение в плоскости 1 повторного формирования лишь для смещения и суммирования изображения в соответствии с углом падения. Для повторного формирования изображения в плоскости 1 повторного формирования данные, в которых подстрочный индекс участка зрачка равен 1, смещаются вправо на два пикселя, данные, в которых подстрочный индекс участка зрачка равен 2, смещаются вправо на один пиксель, а данные, в которых подстрочный индекс участка зрачка равен 3, не смещаются. Данные, в которых подстрочный индекс участка зрачка равен 4, смещаются влево на один пиксель, данные, в которых подстрочный индекс участка зрачка равен 5, смещаются влево на два пикселя. Таким образом, может применяться смещение в соответствии с углом падения. После этого данные в плоскости 1 повторного формирования могут быть получены путем суммирования в вертикальном направлении, изображенном на фиг. 6А. В частности, суммарное значение в угловом направлении излучения, которое поступает на микролинзу X_i, может быть получено следующим образом: S_i=X_1,i-2+X_2,i-1+X_3,i+X_4,i+1+X_5,i+2. Посредством этого в плоскости 1 повторного формирования может быть получено изображение.

Итак, если исходить из того, что в X_i в плоскости 1 повторного формирования имеется яркая точка, излучение распределяется на X_1,i-2, X_2,i-1, X_3,i, X_4,i+1 и X_5,i+2 и находится в плоскости получения в так называемом размытом состоянии. Однако благодаря формированию изображения в вышеупомянутой плоскости 1 повторного формирования яркая точка вновь образуется в X_i, при этом формируется высококонтрастное изображение. То есть благодаря повторному формированию изображения и вычислению контраста может быть выполнена так называемая контрастная АФ.

Как будет понятно из фиг. 6С, даже в плоскости 2 повторного формирования изображение может формироваться способом, по существу аналогичным способу в плоскости повторного формирования. Если направление размещения плоскости повторного формирования иное (это означает, что данное направление находится на стороне, противоположной объекту), достаточно лишь изменить направление смещения на обратное.

Как описано выше, в соответствии с вариантами осуществления может быть создано устройство съемки изображений, в котором избирательно используются фазоразностная АФ и контрастная АФ в соответствии с положением съемки изображения, которое определяется в соответствии с конструкцией устройства съемки изображений, и может быть сохранена высокая точность АФ. Кроме того, в устройстве съемки изображений настоящего изобретения только фазоразностная АФ выполняется в положении съемки изображения, в котором точность контрастной АФ не гарантируется. В результате может быть создано устройство съемки изображений, в котором АФ может выполняться с высокой скоростью и высокой точностью фокусирования. Поскольку достаточно, чтобы операция съемки изображения (сохранение и считывание в элементе съемки изображения), необходимая для получения информации об излучении для АФ, выполнялась лишь один раз, может быть достигнута более высокая скорость операции управления в фокусе.

В вышеизложенных вариантах осуществления функции обработки, изображенные на фиг. 2А-2С и фиг. 4А-5С, реализуются способом, с помощью которого центральный процессор (CPU) системы управления считывает из памяти программу для реализации функций обработки и исполняет ее.

Настоящее изобретение не ограничивается вышеизложенной конструкцией, во всяком случае, вся обработка или часть обработки, изображенной на фиг. 2А-2С и фиг. 4А-5С, может быть реализована специализированными аппаратными средствами. В качестве вышеупомянутой памяти может использоваться устройство на магнитооптических дисках, энергонезависимая память, такая как флэш-память и т.п., постоянный носитель записи, такой как CD-ROM и т.п., или энергозависимая память, такая как оперативное запоминающее устройство (ОЗУ). Память может быть выполнена в виде машиночитаемого и перезаписываемого носителя информации путем их объединения.

Конструкция может быть также выполнена таким образом, что программа для реализации функций обработки, изображенной на фиг. 2А-2С и фиг. 4А-5С, записывается на машиночитаемый носитель информации, причем программа, записанная на носитель информации, считывается и сохраняется в вычислительной системе и исполняется, посредством этого выполняя обработку. При этом предполагается, что упомянутая в данном случае «вычислительная система» включает в себя такие технические средства, как операционная система (ОС), периферийные устройства и т.п. В частности, возможен случай, в котором программа, считываемая из памяти, записывается в память, предусматриваемую в плате расширения функций, вставляемой в компьютер, или в блоке расширения функций, подключаемом к компьютеру. Настоящее изобретение также включает в себя случай, в котором CPU и т.п., предусматривающий плату расширения функций или блок расширения функций, исполняет всю реальную обработку или ее часть на основании команд программы, а функции вышеупомянутых вариантов осуществления реализуются с помощью указанной обработки.

ПРОЧИЕ ПРИМЕРЫ

Аспекты настоящего изобретения могут также быть реализованы с помощью компьютера системы или установки (или таких устройств, как CPU или микропроцессорный блок (MPU)), которая считывает и исполняет программу, записанную в запоминающем устройстве, для выполнения функций вышеописанного варианта (вариантов) осуществления, и с помощью способа, этапы которого выполняются компьютером, либо системой, либо установкой путем, например, считывания и исполнения программы, записанной в запоминающем устройстве, для выполнения функций вышеописанного варианта (вариантов) осуществления. С этой целью программа передается в компьютер, например, по сети или с носителя записи различных типов, служащего в качестве запоминающего устройства (например, машиночитаемого носителя).

При том что настоящее изобретение описано применительно к примерам осуществления, следует понимать, что данное изобретение не ограничивается описанными примерами осуществления. Объем нижеследующей формулы изобретения должен быть интерпретирован наиболее широко, охватывая все такие модификации и эквивалентные конструкции и функции.

По настоящей заявке испрашивается приоритет на основании заявки на патент Японии № 2011-162093, поданной 25 июля 2011 г., полное содержание которой настоящим включено в настоящий документ путем ссылки на нее.

1. Устройство съемки изображений, включающее в себя фотографическую оптическую систему, которая содержит фотографический объектив и элемент съемки изображения для фотоэлектрического преобразования оптического изображения объекта, которое проходит через фотографический объектив, и выдачи сигнала изображения, отличающееся тем, что оно содержит:
блок деления зрачка, ограничивающий излучение от оптического изображения объекта, которое поступает на каждый пиксель элемента съемки изображения, излучением от конкретного участка выходного зрачка фотографического объектива;
блок смещения изображения, определяющий величину смещения сигнала изображения, соответствующего заданному оцениваемому положению фокуса для каждого участка выходного зрачка, на основании отношения соответствия между каждым пикселем элемента съемки изображения и конкретным участком выходного зрачка фотографического объектива, которое ограничивается блоком деления зрачка;
блок формирования изображения, формирующий изображение, соответствующее оцениваемому положению фокуса, путем выполнения обработки арифметической операции на основании величины смещения, определяемой блоком смещения изображения, для сигнала изображения;
блок оценки контраста, вычисляющий оцениваемое значение контраста изображения, формируемого блоком формирования изображения, и определяющий контрастное положение фокуса на основании оцениваемого значения контраста;
блок вычисления корреляции, вычисляющий оцениваемое значение корреляции между изображениями, соответствующими различным участкам выходного зрачка в сформированном изображении, и определяющий корреляционное положение фокуса на основании оцениваемого значения корреляции;
блок определения оцениваемого диапазона фокусировки, определяющий диапазон оцениваемого положения фокуса, в котором блок смещения изображения может определять величину смещения на основании конструкции элемента съемки изображения и блока деления зрачка; и
блок оценки фокуса, сравнивающий абсолютное значение диапазона, определенное блоком определения оцениваемого диапазона фокусировки, и абсолютное значение корреляционного положения фокуса, определенное блоком вычисления корреляции,
при этом блок оценки фокуса определяет оцениваемую величину фокуса объекта на основании определенного корреляционного положения фокуса и определенного контрастного положения фокуса, определенного в соответствии с результатом сравнения.

2. Устройство съемки изображений по п. 1, в котором блок оценки фокуса выполнен таким образом, что в соответствии с результатом сравнения в том случае, когда абсолютное значение корреляционного положения фокуса, определенное блоком вычисления корреляции, больше абсолютного значения диапазона, определенного блоком определения оцениваемого диапазона фокусировки, определение блоком оценки контраста не осуществляется, и оцениваемое положение фокуса объекта определяется на основании корреляционного положения фокуса, определяемого блоком вычисления корреляции, а в том случае, когда абсолютное значение корреляционного положения фокуса, определенное блоком вычисления корреляции, равно или менее абсолютного значения диапазона, определенного блоком определения оцениваемого диапазона фокусировки, оцениваемое положение фокуса объекта определяется на основании контрастного положения фокуса, определяемого блоком оценки контраста.

3. Устройство съемки изображений по п. 1 или 2, в котором блок определения оцениваемого диапазона фокусировки определяет диапазон оцениваемого положения фокуса на основании шага пикселей элемента съемки изображения, а также углового разрешения и числа угловых делений блока деления зрачка.

4. Устройство съемки изображений по п. 3, при этом устройство съемки изображений имеет режим фотографирования для фотографирования объекта в соответствии с оцениваемым положением фокуса, определенным блоком оценки фокуса, при этом режим фотографирования имеет режим фотографирования неподвижных изображений и режим фотографирования подвижных изображений, при этом в режиме фотографирования подвижных изображений определение оцениваемого положения фокуса выполняется блоком оценки фокуса в каждый заданный момент времени.

5. Устройство съемки изображений по п. 4, в котором блок деления зрачка представляет собой массив микролинз, расположенный на фоточувствительной поверхности элемента съемки изображения, и при этом в массиве микролинз множество пикселей, образованных на фоточувствительной поверхности элемента съемки изображения, разделено на множество групп пикселей, соответствующих каждой микролинзе, при этом микролинза обеспечивает соответствие пикселей соответствующей группы пикселей излучению от различных участков выходного зрачка фотографического объектива.

6. Устройство съемки изображений по п. 1, в котором блок вычисления корреляции вычисляет различие между выбранными данными изображения, соответствующими различным участкам выходного зрачка, из данных изображения для сформированного изображения, посредством этого вычисляя разность фаз между изображениями, проходящими через различные участки выходного зрачка.

7. Устройство съемки изображений по любому из пп. 4-6, дополнительно содержащее: запоминающий блок для сохранения изображения, формируемого блоком формирования изображения, и блок отображения для отображения изображения, сохраненного в запоминающем блоке.

8. Способ управления устройством съемки изображений, включающим в себя фотографическую оптическую систему, содержащую фотографический объектив и элемент съемки изображения для фотоэлектрического преобразования оптического изображения объекта, которое проходит через фотографический объектив, и выдачи сигнала изображения, отличающийся тем, что он содержит:
этап съемки изображения, на котором ограничивают излучение от оптического изображения объекта, которое поступает на каждый пиксель элемента съемки изображения, излучением от конкретного участка выходного зрачка фотографического объектива посредством блока деления зрачка, и получают сигнал изображения;
этап смещения изображения, на котором определяют величину смещения сигнала изображения, соответствующего заданному оцениваемому положению фокуса, для каждого участка выходного зрачка, на основании отношения соответствия между каждым пикселем элемента съемки изображения и конкретным участком выходного зрачка фотографического объектива, причем отношение ограничивается блоком деления зрачка;
этап формирования изображения, на котором формируют изображение, соответствующее оцениваемому положению фокуса, путем выполнения обработки арифметической операции на основании величины смещения, определенной на этапе смещения изображения, для сигнала изображения;
этап оценки контраста, на котором вычисляют оцениваемое значение контраста изображения, сформированного на этапе формирования изображения, и определяют контрастное положение фокуса на основании оцениваемого значения контраста;
этап вычисления корреляции, на котором вычисляют оцениваемое значение корреляции между изображениями, соответствующими различным участкам выходного зрачка, в сформированном изображении, и определяют корреляционное положение фокуса на основании оцениваемого значения корреляции;
этап определения оцениваемого диапазона фокусировки, на котором определяют диапазон оцениваемого положения фокуса, в котором на этапе смещения изображения может быть определена величина смещения, на основании конструкции элемента съемки изображения и блока деления зрачка; и
этап оценки фокуса, на котором сравнивают абсолютное значение диапазона, определенного на этапе определения оцениваемого диапазона фокусировки, и абсолютное значение корреляционного положения фокуса, определенное на этапе вычисления корреляции, и определяют оцениваемую величину фокуса объекта на основании определенного корреляционного положения фокуса и определенного контрастного положения фокуса, определенного в соответствии с результатом сравнения.

9. Машиночитаемый носитель записи, на котором сохранена программа для способа управления устройством съемки изображений, включающим в себя фотографическую оптическую систему, которая содержит фотографический объектив и элемент съемки изображения для фотоэлектрического преобразования оптического изображения объекта, которое проходит через фотографический объектив, и выдачи сигнала изображения,
причем программа побуждает компьютер работать в качестве:
блока, получающего сигнал изображения путем приема оптического изображения объекта посредством элемента съемки изображения посредством использования блока деления зрачка, предусмотренного для ограничения излучения оптического изображения объекта, которое поступает на каждый пиксель элемента съемки изображения, излучением от конкретного участка выходного зрачка фотографического объектива;
блока деления зрачка, ограничивающего излучение от оптического изображения объекта, которое поступает на каждый пиксель элемента съемки изображения, излучением от конкретного участка выходного зрачка фотографического объектива;
блока смещения изображения, определяющего величину смещения сигнала изображения, соответствующего заданному оцениваемому положению фокуса для каждого участка выходного зрачка, на основании отношения соответствия между каждым пикселем элемента съемки изображения и конкретным участком выходного зрачка фотографического объектива, причем отношение ограничивается блоком деления зрачка;
блока формирования изображения, формирующего изображение, соответствующее оцениваемому положению фокуса, путем выполнения обработки арифметической операции на основании величины смещения, определяемой блоком смещения изображения, для сигнала изображения;
блока оценки контраста, вычисляющего оцениваемое значение контраста изображения, формируемого блоком формирования изображения, и определяющего контрастное положение фокуса на основании оцениваемого значения контраста;
блока вычисления корреляции, вычисляющего оцениваемое значение корреляции между изображениями, соответствующими различным участкам выходного зрачка в сформированном изображении, и определяющего корреляционное положение фокуса на основании оцениваемого значения корреляции;
блока определения оцениваемого диапазона фокусировки, определяющего диапазон оцениваемого положения фокуса, в котором блок смещения изображения может определять величину смещения, на основании конструкции элемента съемки изображения и блока деления зрачка; и
блока оценки фокуса, сравнивающего абсолютное значение диапазона, определенного блоком определения оцениваемого диапазона фокусировки, и абсолютное значение корреляционного положения фокуса, определенного блоком вычисления корреляции,
при этом блок оценки фокуса определяет оцениваемую величину фокуса объекта на основании определенного корреляционного положения фокуса и определенного контрастного положения фокуса, определенного в соответствии с результатом сравнения.

10. Устройство управления фокусом, содержащее:
блок приема, выполненный с возможностью приема изображений, которые соответственно соответствуют различным участкам выходного зрачка объектива;
первый блок обнаружения, выполненный с возможностью обнаружения оцениваемого значения на основании контраста изображения, сформированного блоком формирования изображения, объединяющего изображения, смещенные относительно друг друга, причем изображения, смещенные относительно друг друга, соответственно соответствуют изображениям различных участков выходного зрачка;
второй блок обнаружения, выполненный с возможностью обнаружения оцениваемого значения на основании корреляции между изображениями, причем изображения соответственно соответствуют изображениям различных участков выходного зрачка; и
блок управления, выполненный с возможностью управления положением фокуса на основании результатов первого и второго блоков обнаружения.

11. Устройство управления фокусом по п. 10, в котором блок управления выполнен с возможностью управления положением фокуса так, что контраст изображения становится больше за счет изменения положения фокуса.

12. Устройство управления фокусом по п. 10, в котором величина смещения изображений определена на основании углового разрешения и числа угловых делений.

13. Устройство управления фокусом по п. 10, при этом устройство способно функционировать в режиме фотографирования, который имеет режим фотографирования неподвижных изображений и режим фотографирования подвижных изображений, при этом в режиме фотографирования подвижных изображений определение положения фокуса выполняется по истечении каждого заданного момента времени.

14. Устройство управления фокусом по п. 10, дополнительно содержащее массив микролинз, расположенный на фоточувствительной поверхности элемента съемки изображения,
при этом в массиве микролинз множество пикселей, образованных на фоточувствительной поверхности элемента съемки изображения, разделено на множество групп пикселей, соответствующих каждой микролинзе, при этом микролинза обеспечивает соответствие пикселей соответствующей группы пикселей излучению от различных участков выходного зрачка объектива.

15. Устройство управления фокусом по п. 10, в котором второй блок обнаружения вычисляет различие между выбранными данными изображения, соответствующими различным участкам выходного зрачка, из данных изображения, посредством этого вычисляя разность фаз между изображениями, проходящими через различные участки выходного зрачка.

16. Устройство управления фокусом по п. 10, дополнительно содержащее запоминающий блок, выполненный с возможностью сохранения изображения, формируемого блоком формирования изображения, и блок отображения, выполненный с возможностью отображения изображения, сохраненного в запоминающем блоке.

17. Способ управления устройством управления фокусом, содержащий:
этап приема, на котором принимают изображения, которые соответственно соответствуют различным участкам выходного зрачка объектива;
первый этап обнаружения, на котором обнаруживают оцениваемое значение на основании контраста сформированного изображения, которое объединяет изображения, смещенные относительно друг друга, причем изображения, смещенные относительно друг друга, соответственно соответствуют изображениям различных участков выходного зрачка;
второй этап обнаружения, на котором обнаруживают оцениваемое значение на основании корреляции между изображениями, причем изображения соответственно соответствуют изображениям различных участков выходного зрачка; и
этап управления, на котором управляют положением фокуса на основании результатов первого и второго этапов обнаружения.