способ приведения в соответствие заполненной машиночитаемой формы и ее шаблона при наличии искажений (варианты)

Классы МПК:G06K9/68 с помощью последовательных сравнений сигналов изображения с множеством эталонов, например адресной памятью
Автор(ы):,
Патентообладатель(и):"Аби Софтвер Лтд." (CY)
Приоритеты:
подача заявки:
2003-01-28
публикация патента:

Изобретение относится к оптическому распознаванию символов. Его использование при распознавании текста, введённого в поля шаблона, обеспечивает технический результат в виде повышения возможности коррекции искажений в изображениях машиночитаемых форм. Этот результат достигается за счёт того, что назначают одну из форм шаблона или изображения в качестве изменяемой формы, а другую – неизменяемой; выделяют на форме изображения те области, которые содержат искажения; подразделяют все объекты на форме на несколько типов по надежности идентификации на изображении; назначают каждому объекту на форме изображения уровень надежности идентификации; для каждой области и для объектов каждого типа: устанавливают соответствие между тождественными объектами формы изображения и формы шаблона, вычисляют частные коэффициенты коррекции искажений пространственных параметров изменяемой формы, вычисляют единый обобщенный коэффициент коррекции пространственных параметров для изменяемой формы и корректируют пространственные параметры изменяемой формы с учетом этого единого коэффициента. 2 с. и 30 з.п.ф-лы, 5 ил.

способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738

способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738 способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738 способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738 способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738 способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738

Формула изобретения

1. Способ приведения в соответствие заполненной машиночитаемой формы в электронном виде, полученной путём оптического ввода с бумажного носителя при наличии искажений, и ее шаблона в электронном виде, описывающего пространственные соотношения и параметрические свойства объектов формы без искажений, причём указанная форма шаблона содержит по крайней мере информацию о пространственных характеристиках реперов, информацию о пространственно-параметрических характеристиках полей ввода данных, причём указанная форма изображения в виде растрового изображения содержит по крайней мере изображение реперов, изображения полей ввода, изображения введенной в поля ввода информации, искажения, вносимые аппаратными средствами при переводе формы из электронного в бумажный вид или наоборот; состоящий в выполнении следующей последовательности действий: назначение формы изображения или формы шаблона в качестве изменяемой формы, которая будет подвергаться коррекции, с одновременным назначением другой формы как неизменяемой, которая не будет подвергаться коррекции; выделение на неизменяемой форме одной или более не перекрывающихся областей, расположенных в пределах проявления искажения, причем размер области выбирают более предполагаемых пределов проявления искажения; обозначение на изменяемой форме областей, соответствующих областям, выделенным на неизменяемой форме; подразделение всех объектов, которые могут присутствовать на форме, на несколько типов, отличающихся уровнем надежности идентификации на изображении; назначение изображению каждого объекта, присутствующему на форме изображения, уровня надежности идентификации в зависимости от его типа; для каждой выбранной области, а также для объектов каждого типа, начиная с самого высокого уровня надежности идентификации, последовательно снижая уровень до самого нижнего, выполнение следующих действий: установление соответствия между тождественными объектами формы изображения и формы шаблона; вычисление коэффициентов коррекции искажений пространственных параметров для каждого объекта выбранного уровня, присутствующего на изменяемой форме; коррекцию пространственных параметров объектов изменяемой формы с учетом вычисленных коэффициентов, затрагивающую только объекты выбранного уровня надежности идентификации и ниже.

2. Способ по п. 1, отличающийся тем, что на каждом этапе вычисляют оценку качества сопоставления объектов.

3. Способ по п. 1, отличающийся тем, что дополнительно проводят оценку правильности ориентации изображения.

4. Способ по п. 3, отличающийся тем, что дополнительно при необходимости устанавливают правильную ориентацию изображения.

5. Способ по п. 1, отличающийся тем, что производят подтверждение соответствия формы изображения сравниваемой форме шаблона.

6. Способ по п. 5, отличающийся тем, что за один сеанс работы проверяют на соответствие несколько шаблонов.

7. Способ по п. 1, отличающийся тем, что применяют для компенсации искажений по одной оси.

8. Способ по п. 1, отличающийся тем, что применяют для компенсации искажений по двум осям.

9. Способ по п. 1, отличающийся тем, что применяют для компенсации нелинейных искажений.

10. Способ по п. 1, отличающийся тем, что применяют для компенсации линейных искажений.

11. Способ по п. 1, отличающийся тем, что применяют для компенсации сдвига изображения.

12. Способ по п. 1, отличающийся тем, что применяют для компенсации перекоса изображения.

13. Способ по п. 1, отличающийся тем, что применяют для компенсации масштаба изображения.

14. Способ по п. 1, отличающийся тем, что дальнейшая обработка включает в том числе распознавание символов в полях формы.

15. Способ по п. 1, отличающийся тем, что применяют для компенсации углов наклона изображения.

16. Способ по п. 15, отличающийся тем, что малые углы наклона изображения корректируют, как сдвиг.

17. Способ приведения в соответствие заполненной машиночитаемой формы в электронном виде, полученной путём оптического ввода с бумажного носителя при наличии искажений и ее шаблона в электронном виде, описывающего пространственные соотношения и параметрические свойства объектов формы без искажений, причём указанная форма шаблона содержит по крайней мере информацию о пространственных характеристиках реперов, информацию о пространственно-параметрических характеристиках полей ввода данных; причём указанная форма изображения в виде растрового изображения содержит по крайней мере изображение реперов, изображения полей ввода, изображения введенной в поля ввода информации, искажения, вносимые аппаратными средствами при переводе формы из электронного в бумажный вид или наоборот; состоящий в выполнении следующей последовательности операций: назначение формы изображения или формы шаблона в качестве изменяемой формы, которая будет подвергаться коррекции, с одновременным назначением другой формы как неизменяемой, которая не будет подвергаться коррекции; выделение на неизменяемой форме одной или более не перекрывающихся областей, расположенных в пределах проявления искажения, причем размер зоны выбирают более предполагаемых пределов проявления искажения; обозначение на изменяемой форме областей, соответствующих областям, выделенным на неизменяемой форме; подразделение всех объектов, которые могут присутствовать на форме, на несколько типов, отличающихся уровнем надежности идентификации на изображении; назначение изображению каждого объекта, присутствующему на форме изображения, уровня надежности идентификации в зависимости от его типа; последовательно для каждой выбранной области, а также для объектов каждого типа, выполнение следующих действий: установление соответствия между тождественными объектами формы изображения и формы шаблона, вычисление частных коэффициентов коррекции искажений пространственных параметров для каждого объекта, встречающегося на изменяемой форме, вычисление единого обобщенного коэффициента коррекции искажений пространственных параметров для всех объектов изменяемой формы, исходя из частных коэффициентов коррекции вычисляемых для отдельных объектов с учетом их уровней надежности идентификации, коррекцию пространственных параметров объектов изменяемой формы с учетом указанного единого обобщенного коэффициента.

18. Способ по п. 17, отличающийся тем, что на каждом этапе вычисляют оценку качества сопоставления объектов.

19. Способ по п. 17, отличающийся тем, что дополнительно проводят оценку правильности ориентации изображения.

20. Способ по п. 19, отличающийся тем, что дополнительно при необходимости устанавливают правильную ориентацию изображения.

21. Способ по п. 17, отличающийся тем, что производят подтверждение соответствия формы изображения сравниваемой форме шаблона.

22. Способ по п. 21, отличающийся тем, что за один сеанс работы проверяют на соответствие несколько шаблонов.

23. Способ по п. 17, отличающийся тем, что применяют для компенсации искажений по одной оси.

24. Способ по п. 17, отличающийся тем, что применяют для компенсации искажений по двум осям.

25. Способ по п. 17, отличающийся тем, что применяют для компенсации нелинейных искажений.

26. Способ по п. 17, отличающийся тем, что применяют для компенсации линейных искажений.

27. Способ по п. 17, отличающийся тем, что применяют для компенсации сдвига изображения.

28. Способ по п. 17, отличающийся тем, что применяют для компенсации перекоса изображения.

29. Способ по п. 17, отличающийся тем, что применяют для компенсации масштаба изображения.

30. Способ по п. 17, отличающийся тем, что дальнейшая обработка включает в том числе распознавание символов в полях формы.

31. Способ по п. 17, отличающийся тем, что применяют для компенсации углов наклона изображения.

32. Способ по п. 31, отличающийся тем, что малые углы наклона изображения корректируют, как сдвиг.

Описание изобретения к патенту

Изобретение относится к области оптического распознавания символов в полях форм ввода и, в частности, к способам подготовки изображения и/или шаблона к проведению операций распознавания текста из растрового изображения при наличии искажений изображения, вызванных обработкой внешними устройствами.

Известен способ распознавания текстовой информации, при котором растровое изображение разбивают на области, содержащие текст, и области, содержащие нетекстовые объекты.

Проводят предварительную обработку растрового изображения, позволяющую определить и скорректировать искажения, появившиеся в результате обработки внешними устройствами.

При этом в качестве ориентиров для оценки горизонтального и/или вертикального направления используют направление ориентации строк, предполагая их горизонтальными.

Известны способ и устройство для обнаружения углов наклона изображения, которые описываются в патенте США №5563403 (October 8, 1996). Вычисление угла наклона изображения осуществляется по набору точек-ориентиров, по координатам которых вычисляют регрессионный коэффициент. Регрессионный коэффициент используют для определения угла наклона изображения. В одном изображении выделяют несколько наборов точек для определения угла наклона. Это позволяет снизить вероятность ошибки.

Способ и устройство позволяют определять и исправлять незначительные углы наклона изображения и требуют для эффективной обработки больших блоков печатного текста.

Известны также способ и устройство для определения наклона изображения и искажения его размеров и формы - патенты №5818976 (October 6, 1998) и №6064778 (May 16, 2000). В предложенных реализациях способов и устройства искажения и наклон вначале определяют и частично компенсируют аппаратно, затем обрабатывают математически. Согласно предложенным способам, вычисляют ряд опорных точек, через которые проводят предположительно вертикальные или горизонтальные линии. По расстоянию между полученными горизонтальными линиями оценивают искажения формы и размеров, а по наклону вертикальных линий - угол наклона изображения.

Способы и устройства не приспособлены для обработки машиночитаемых форм, а также при больших искажениях размера и формы документа.

В патенте США №5828771 (October 27, 1998) предлагается способ определения по наличию специфических искажений является ли документ оригинальным или переданным с помощью факсимильного аппарата. Основными параметрами для оценки искажений являются специфические признаки изменения параметров разрешения до 100-200 точек на дюйм, характерных для факсимильных аппаратов.

Способ может применяться очень ограниченно и способен обрабатывать малые значения искажений.

Известен способ (патент США №6014470, January 11, 2000) определения и компенсации искажения изображения, вызванного искривлением поверхности страницы. Определение и исправление искажения полностью базируется на том, что искаженная строка символов принимает форму дуги окружности, и для компенсации такого искажения необходимо вычислить параметры окружности.

Способ имеет очень ограниченное применение, поскольку направлен на определение и исправление искажения только одного вида.

В патенте США №6470091 (October 22, 2002) предлагается способ поиска и распознавания адресной надписи на почтовом конверте. Основой способа является известное местоположение и известный формат адресной надписи, что позволяет распознавать ее элементы, слова и в конечном итоге - автоматизировать сортировку почтовой корреспонденции.

Способ позволяет обрабатывать документы единственного типа (адресная часть почтовых конвертов) и не предполагает обработку искажений, возникающих при сканировании изображения.

Известные способы не позволяют корректировать значительные искажения изображения (превышающие 10% исходного размера изображения).

Техническим результатом изобретения является повышение возможности коррекции искажений изображения машиночитаемых форм, возникающих при обработке его внешними устройствами, расширение возможности обработки линейных и нелинейных искажений.

Указанный технический результат достигается тем, что после сканирования изображение машиночитаемой формы разбивают на области, содержащие изображения полей ввода, специальных реперов линий и др. объектов. После этого все объекты, которые могут присутствовать на форме, подразделяют на ряд категорий по степени надежности идентификации. Затем обнаруженным на форме изображениям объектов присваивают коэффициенты надежности идентификации и проводят анализ соответствия положения и углов наклона объектов изображения координатам, заданным в форме шаблона, не имеющей искажений.

Согласно одному из вариантов способа вычисляют значения искажений относительно каждого объекта. Затем для каждой группы объектов одного уровня надежности идентификации вычисляют обобщенный поправочный коэффициент изменения (пространственных характеристик) размеров или координат. Этот коэффициент применяют для компенсации искажений всех объектов того же уровня надежности идентификации и ниже. После этого переходят к объектам следующего более низкого уровня надежности идентификации.

В соответствии с другим вариантом способа вычисляют значения искажений относительно каждого объекта. Затем все значения искажений вместе с типами (категорией) объектов как весовыми коэффициентами объединяют в один обобщенный показатель - поправочный коэффициент, который затем применяют к координатам и/или размерам каждого объекта для компенсации искажений.

Необходимые пояснения для предлагаемого способа следующие. Для уверенной компенсации искажений, в особенности нелинейных и значительных линейных, необходимо иметь в системе данные о шаблоне формы без искажений.

Шаблон формы

Информация о распознаваемой форме без искажений должна в том или ином виде присутствовать в системе. Описание формы задают с помощью шаблона. Шаблон содержит описание всех объектов формы. При этом для объекта задают:

- координаты объекта на бланке и его геометрическую форму,

- имя поля - с именем поля связывают тип заносимой в него информации, а также адрес передачи результатов распознавания,

- параметры распознавания - такие как тип текста (рукописный, печатный), допустимый интервал возможных значений набора символов, перечень словарей, применяемых для проверки содержимого поля,

- другую информацию для последующей обработки, верификации и сохранения результатов распознавания.

Координаты полей в шаблоне и на сканированном изображении могут не совпадать в виду наличия искажений, возникающих при печати бланков и при сканировании.

Виды искажений

При печати бланков форм на внешних устройствах (в типографии, на принтере) могут возникать следующие искажения изображения:

небольшие смещения по горизонтали и по вертикали,

небольшие растяжения/сжатия по горизонтали и по вертикали,

поворот на небольшой угол,

В процессе сканирования бумажных форм возникают более значительные искажения:

- смещения по горизонтали и по вертикали,

- поворот на большой угол,

- изменение разрешающей способности сканеров по горизонтали,

- изменение разрешающей способности по вертикали - определяется скоростью движения считывающего элемента, которая может быть непостоянной даже для одного сканера в зависимости от степени прогрева, уровня напряжения сети и других факторов,

- небольшие нелинейные растяжения/сжатия по вертикали - скорость сканирования может меняться в пределах одного изображения.

Все искажения за исключением нелинейных моделируются аффинным преобразованием.

Задача выделения полей на форме стандартного бланка, таким образом, сводится к подбору коэффициентов обратного аффинного преобразования.

Способ совмещения шаблона и изображения.

Для совмещения шаблона и изображения необходимо подобрать коэффициенты аффинного преобразования так, чтобы при применении этого преобразования к форме шаблона или к форме изображения указанные в шаблоне области полей совмещались бы с соответствующими областями на изображении заполненной формы.

Наиболее последовательный и хорошо зарекомендовавший себя при решении задач обработки сигналов способ основан на вычислении корреляционной функции:

(х, у, ...)=arg max RTI(x, у, ...),

где RTI (х, у, ...) - корреляционная функция между изображением (I) и шаблонным изображением (Т),

RTI(x, у, ...)= способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738 T (х,у, ...)I(х-х, у-у, ...) dx dy d...

Прямое вычисление корреляционной функции для изображения требует значительного объема вычислений - n2m, где n – размер изображения в пикселях (1000-2000), m=5 – количество параметров (смещения по вертикали и по горизонтали, угол поворота, растяжение/сжатие по вертикали и по горизонтали).

Для уменьшения объема вычислений применяют данный способ отдельно к различным группам параметров. Это допустимо, так как рассматриваемый диапазон параметров достаточно узок, вследствие чего весьма маловероятно наличие ложного максимума на проекции корреляционной функции на выбранные параметры. Поэтому можно вычислять отдельно по видам искажений следующим образом:

- вычисление смещений,

- вычисление угла поворота,

- вычисление коэффициента горизонтального растяжения/сжатия,

- вычисление коэффициента вертикального растяжения/сжатия.

Вычисление смещения не удается разбить на независимое вычисление смещений по горизонтали и по вертикали, так как из-за близости к периодической строчной структуре изображения на проекциях корреляционной функции появляются ложные максимумы.

Дальнейшую оптимизацию основывают на выборе адекватного представления изображения.

Представление изображения

В большинстве систем сегментации изображения печатных документов принято переходить к представлению изображения в виде списка прямоугольников, соответствующих связным областям изображения, как правило, буквам и разделительным линиям. Это представление оказывается достаточной аппроксимацией для работы алгоритмов сегментации.

Основой данного изобретения является способ вычисления корреляционной функции для изображения, представленного списком связных областей.

Аналогичное представление необходимо и для формы шаблона.

Оптимизация вычисления корреляционной функции для представления изображения в виде списка прямоугольников

Изображение, представляемое списком прямоугольников, может быть интерпретировано как суперпозиция нескольких изображений, каждое из которых содержит один из прямоугольников:

I=способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738I k, где Ik - это изображение одного прямоугольника аналогично для шаблона;

Т=способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738T k, где Tk - это изображение одного прямоугольника.

При этом фактом, что прямоугольники могут пересекаться, пренебрегают.

Тогда корреляционная функция RTI разлагается следующим образом:

RTI= способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738 T(x,y)I(x-х, у-у) dx dy= способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738 способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738T i(x,y)способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738I k(x-х, у-у) dx dy=способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738 ik способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738 Ti(x,y)Ik(x-х, у-у) dx dy,

т.е. на сумму корреляционных функций отдельных прямоугольников. Однако изображение прямоугольника представляется как произведение функций Хевисайда:

Ik(x, у)=способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738(х-x 1k)способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738(x 2k-х)способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738(у-y 1k)способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738(y 2k-у),

где х1k, x2k, y 1k, y2k - координаты прямоугольника;

Ik(x, у)=способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738(х-x 1k)способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738(x 2k-х)способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738(у-y 1k)способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738(y 2k-у)= способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738 (способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738(x-x 1k)способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738(y-y 1k)-способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738(x 2k-x)способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738(y-y 1k)-способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738(x 2k-х)способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738(у-y 1k)+способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738(x 2k-x)способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738(y 2k-y)) dx dy,

где способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738(x-x jk) - дельта-функция на границе прямоугольника.

Аналогично для Тi(х,у):

Ti(х, у)=способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738(х-х 1i)способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 22517382i-х)способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738(у-у 1i)способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 22517382i-у)= способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738 (способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738(x-x 1i)способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738(y-у 1i)-способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738(x 2i-х)способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738(у-у 1i)-способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 22517382i-х)способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738(у-у 1i)+способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738(x 2i-х)способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 22517382i-y))dx dy.

Тогда корреляционная функция двух прямоугольников может быть вычислена следующим способом:

способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738 Ti(x,y)Ik(x-х, у-у) dx dy= способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738 способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738 Fik(x, у) dx dy

Fik(x, y)=[способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738(x-(x 2i-x1k))-способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738(x-(x 2i-x2k))-способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738(x-(x 1i-x1k))+способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738(x-(x 1i-X2k))]

[способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738(y-(y 2i-y1k))-способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738(y-(y 2i-y2k))-способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738(y-(y 1i-y1k))+способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738(y-(y 1i-y2k)]

Корреляционная функция изображения и шаблона выражается через

Fik(x, y) следующим образом:

RTI=способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738 ik способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738 Ti(x,y)Ik(x-х, у-у) dx dy=способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738 ik способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738 способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738 Fik(x, у) dx dy= способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738 способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738 способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738 ikFik(x, у) dx dy

Если вернуться к дискретному представлению, то способ приведения в соответствие заполненной машиночитаемой формы   и ее шаблона при наличии искажений (варианты), патент № 2251738 ikFik(x, у) является двумерной гистограммой, заполняемой следующим алгоритмом:

Для каждой пары прямоугольников изображения и шаблона:

Добавить "1" в гистограмму в точках:

(x2i-x1k, y2i –y1k)

(x1i-x2k, y 2i-y1k)

(x2i-x2k , y2i-y2k)

(x1i-x 1k, y2i-y2k)

(x2i -x2k, y1i-y1k)

(x 1i-x1k, y1i-y1k)

(x2i-x1k, y1i-y2k )

(x1i-x2k, y1i-y 2k)

Добавить "-1" в гистограмму в точках

(x2i-x2k, y2i-y1k )

(x1i-x1k, y2i-y 1k)

(x2i-x1k, y2i -y2k)

(x1i-x2k, y2i-y2k)

(x2i-x1k , y1i-y1k)

(x1i-x 2k, y1i-y1k)

(x1i -x1k, y1i-y2k)

(x 2i-x2k, y1i-y2k)

После интегрирования двумерной гистограммы получают искомую корреляционную функцию. При этом интегрирование производят один раз, а не для каждого значения параметра корреляционной функции, т.е. объем вычислений понижается на порядок.

Дополнительный этап - накопление двумерной гистограммы, хотя и является квадратичным, работает быстро, так как количество прямоугольников значительно меньше, чем количество пикселей.

Данный способ описан на примере вычисления корреляционной функции для смещений. Вычисление коэффициентов остальных линейных преобразований выполняют аналогичным образом.

Для компенсации местных нелинейных искажений в одном или двух направлениях применяют выделение на изображении областей, подверженных нелинейным искажениям, и обработку указанных областей отдельно от остального изображения способами, применяемыми для линейных искажений. При этом размер области выбирают более размера искаженной части.

Сущность предложения иллюстрируется на фигурах 1-5.

Фиг.1. Пример изображения формы.

Фиг.2. Пример изображения формы с выделенными связными областями.

Фиг.3. Представление изображения в виде списка прямоугольников.

Фиг.4. Представление шаблона в виде списка прямоугольников.

Фиг.5. Выделение на изображении областей, имеющих искажения.

Предполагаются два варианта способа осуществления изобретения.

Согласно первому варианту выполняют следующие действия.

Назначают, какая из двух форм - форма изображения или форма шаблона - будет подвергаться коррекции для компенсации имеющихся искажений.

Отсканированное изображение машиночитаемой формы, содержащее искажения, разбивают на ряд непересекающихся областей с условием, что искажения в пределах каждой области могут обрабатываться как линейные и пределы распространения искажений менее размера области. При отсутствии значительных нелинейных искажений может быть выделена одна область, равная всему отсканированному изображению.

После этого весь перечень объектов, которые могут встретиться на форме, подразделяют на несколько типов, отличающихся уровнем надежности идентификации на изображении и степенью подверженности искажениям пространственных параметров.

На отсканированном изображении идентифицируют объекты, соотносят каждый из объектов с одним из типов. Для каждого объекта определяют уровень надежности идентификации по его типу.

Для каждой выбранной области и каждого типа объектов, начиная с самых надежно идентифицируемых, последовательно снижая уровень до самого нижнего, выполняют следующие действия:

- устанавливают соответствия между тождественными объектами формы изображения и формы шаблона,

- вычисляют коэффициенты коррекции пространственных параметров объектов выбранного уровня,

- корректируют пространственные параметры формы, принятой за изменяемую, с учетом вычисленных коэффициентов, затрагивая только объекты выбранного уровня надежности идентификации и ниже.

Переходят к дальнейшей обработке изображения формы.

Согласно второму варианту выполняют следующие операции (действия).

Выбирают какая из двух форм - форма изображения или форма шаблона - будет подвергаться коррекции для компенсации имеющихся искажений. Выбор делают произвольно, исходя, например, из имеющегося инструментария для дальнейшей обработки, выбранного технологического процесса обработки и др.

Отсканированное изображение машиночитаемой формы, содержащее искажения, разбивают на ряд непересекающихся областей с условием, что искажения в пределах каждой области могут обрабатываться как линейные и пределы распространения искажений менее размера области. При отсутствии значительных нелинейных искажений может быть выделена одна область, равная всему отсканированному изображению.

После этого весь перечень объектов, которые могут встретиться на форме, подразделяют на несколько типов, отличающихся уровнем надежности идентификации на изображении и степенью подверженности искажениям пространственных параметров (в том числе геометрической формы и размеров).

На отсканированном изображении идентифицируют объекты, соотносят каждый из объектов с одним из типов. Для каждого объекта определяют уровень надежности идентификации по его типу. Например, зачерненный квадратный объект имеет уровень надежности идентификации выше, чем незачерненный. Перекрещивающиеся отрезки прямых имеют уровень надежности идентификации выше, чем символ и т.д.

Для каждой выбранной зоны, а также для объектов каждого типа выполняют следующие действия:

устанавливают соответствия между тождественными объектами формы изображения и формы шаблона,

вычисляют частные коэффициенты коррекции пространственных параметров (в т.ч. положения, масштаба, сдвига, наклона и размеров) формы, принятой за изменяемую, для каждого объекта, встречающегося на форме,

вычисление единого обобщенного коэффициента коррекции пространственных параметров для формы, принятой за изменяемую, исходя из частных коэффициентов коррекции, вычисляемых для отдельных объектов с учетом их уровней надежности идентификации,

коррекция пространственных параметров (в т.ч. размеров, масштаба по одной или двум осям, наклона, сдвига, скоса) формы, принятой за изменяемую, с учетом указанного единого обобщенного коэффициента.

Переходят к дальнейшей обработке изображения формы. Обычно это распознавание текста в полях ввода формы.

За изменяемую принимают форму шаблона или форму изображения. На каждом этапе вычисляют оценку качества сопоставления объектов.

Производят оценку ориентации изображения и установление правильной ориентации. Оценку правильности ориентации проводят любым известным способом. Например, [5].

Производят подтверждение соответствия формы изображения сравниваемой форме шаблона.

За один сеанс работы может проверяться на соответствие несколько шаблонов.

Компенсация искажений может проводиться по одной или двум осям.

Возможно проводить компенсацию линейных, нелинейных искажений, а также сдвига, перекоса, масштаба, углов наклона.

Малые углы наклона изображения допускается корректировать как сдвиг.

Дальнейшая обработка включает в том числе распознавание символов в полях формы.

Библиография

1. J. Yuan, L. Xu, C.Y. Suen, "Form Items Extraction By Model Matching", ICDAR91, pp.210-218.

2. D. Wang, S. Srihari, "Analysis of form images", ICDAR91, pp. 181-191.

3. Y. Belaid, A. Belaid, E. Turolla, "Item Searching in Forms: Application to French Tax Form", ICDAR95, pp. 744-747.

4. A. Agarwal, L. Granowetter, К. Hussein, A. Gupta, "Detection of Curtesy Amount Block on Bank Checks", ICDAR95, pp.748-751.

5. J. Yuan, Y. Tang, C. Suen, "Four directional adjacency graphs and their application in locating fields in forms", ICDAR95, pp. 752-755.

6. D.Wang, S.N.Srihari "Analysis of Form Images" Series in Machine Perception and Artificial Intelligence. - Vol.16, 1996, p.p. 1031-1036.

7. E.Ardizzone, V. Di Gesu "Content-Based Indexing and Video Databases by Global and Shape Features." International Conference on Pattern Recognition, August 25-29, 1996, Vienna, Austria, p.p. 140-144.

Класс G06K9/68 с помощью последовательных сравнений сигналов изображения с множеством эталонов, например адресной памятью

способ автоматической идентификации объектов на изображениях -  патент 2514155 (27.04.2014)
способ преобразования цветового пространства -  патент 2494461 (27.09.2013)
способ распознавания изображений лиц и система для его осуществления -  патент 2490710 (20.08.2013)
способ и устройство инвариантной идентификации отпечатков пальцев по ключевым точкам -  патент 2486590 (27.06.2013)
способ обработки выходных данных оптического распознавания символов (ocr), где выходные данные содержат изображения дважды отпечатанных символов -  патент 2439700 (10.01.2012)
способ распознавания объектов -  патент 2438174 (27.12.2011)
способ анонимной биометрической регистрации человека -  патент 2371765 (27.10.2009)
способ определения толщины льда замерзающих акваторий -  патент 2319205 (10.03.2008)
система мгновенного компьютерного распознавания объектов и способ распознавания -  патент 2308081 (10.10.2007)
система идентификации изображений -  патент 2302656 (10.07.2007)
Наверх