Розглянуто підхід до організації планування рухів маніпуляційних роботів у середовищі з обмеженнями, який використовує асоціативну пам'ять, реалізовану на нейромережі Хеммінга. Зазначено, що простір допустимих станів маніпуляційного робота обчислюється один раз шляхом дискретизації простору узагальнених координат і розв'язання прямої задачі кінематики та заноситься до бази даних. За допомогою нейромережі зі створеної бази даних допустимих станів обирається необхідна конфігурація системи. Урахування обмежень здійснюється за допомогою методу динамічного відмічання конфігурацій системи, які потрапляють в обмеження, та перетворення їх на заборонені в разі планування рухів.

Розглянуто нову інформаційну технологію розпізнавання зображень облич людей у великих базах даних. Запропонована технологія з використанням досягнень комп'ютерних наук розширює наукові методи ототожнювання людини. Ці методи використовуються у криміналістичному вченні про зовнішній вигляд людини - габітоскопії.

Розглянуто модель міміки емоційних станів людини як опуклу комбінацію деяких базових станів. Запропоновано дану формальну модель використовувати як для синтезу мімічних образів емоційних станів, так і для їх розпізнавання. Введено та досліджено множину з двадцяти однієї емоції, які можна одержати в результаті розкладу по базису простору характеристичних ознак. Проаналізовано вплив кожної характеристичної ознаки під час розкладу на базові емоції у побудованому просторі.

Запропоновано новий підхід до побудови базового простору мімічних проявів емоційних станів людини. Для побудови використано метод гнучких моделей, які деформуються. Контурні моделі побудовано за допомогою нерівномірних раціональних базисних сплайнів (NURBS). Довільну емоцію конкретної людини зображено як опуклу комбінацію станів цього базового простору.

Запропоновано підхід для розподіленого комп'ютерного документування мовних фонограм засідань. Проведено аналіз предметної області та зроблено постановку задачі. Побудовано логічну модель інформаційної системи (ІС). Реалізовано прототип ІС та окреслено необхідні дослідження для створення промислової версії ІС.

Запропоновано концепцію комплексної інформаційної технології невербального спілкування українською мовою жестів людей із вадами слуху як між собою, так і з іншими людьми.

Наведено цілісну інформаційну технологію аналізу мімічних виразів емоцій на обличчі людини. Міміку емоційних станів людини описано у вигляді лінійної комбінації деяких базових станів. Параметри моделі одержано за допомогою методу гнучких шаблонів із використанням NURBS-кривих. Довільну емоцію конкретної людини розпізнано як опуклу комбінацію станів запропонованого базового простору.

Запропоновано метод передачі змодельованого процесу анімації мови жестів глухих у мережі Інтернет, який дозволяє ефективно передавати інтерактивні медіа-дані на клієнтський комп'ютер. Реалізовано принципи оптимізації передачі даних.

Удосконалено модель маніпуляційної системи (МС) довільної конфігурації у сердовищі з обмеженнями. Створено алгоритм та програмне забезпечення реалізації інформаційно-пошукового підходу для планування у середовищі з обмеженням рухів МС довільної конфігурації. Удосконалено технології анімації дво- та тривимірної віртуальної моделі людської голови під час промовляння фонетично розміченого тексту, виявлено принципові моменти ускладнення застосування у межах даних технологій візуалізації емоційного забарвлення у процесі промовляння. Запропоновано модель, алгоритм та програмне забезпечення для представлення та подальшого керування анімацією просторової моделі людської голови з допомогою NURBS-поверхні й автоматичної побудови конкретних моделей.

Розглянуто задачі синтезу, для моделювання яких використано нерівномірні раціональні базисні сплайни (NURBS). Для задач аналізу запропоновано в моделях, описаних за допомогою NURBS, використовувати апроксимацію на основі B-сплайнів.

Запропоновано інформаційну технологію для моделювання української мови жестів. Наведено інформаційну та математичну моделі для фіксації мінімально значимих одиниць жестової мови, дактильної абетки, мімічних проявів під час промовляння. Розроблено технологію та відповідне програмне забезпечення для одержання, збереження та відтворення жестів і міміки промовляння.

Запропоновано математичну модель та її комп'ютерну реалізацію для одержання та відтворення жестової мови за допомогою тривимірних моделей людей. Запропоновано технологію, яка досить реалістично відтворює рухи на тривимірній моделі, що одержані з відеозображення конкретної людини - носія жестової мови.

Запропоновано підхід для моделювання рухів жестової мови для подальшого просторового відтворення на 3D-моделі. Показано спроможність запропонованої технології досить реалістично відтворювати на тривимірній моделі рухи, що одержані з відеозображення конкретної людини - носія жестової мови.

Індекс рубрикатора НБУВ: З970.632.4

Рубрики:

Розпізнавання зображень

Шифр НБУВ: Ж15477 Пошук видання у каталогах НБУВ 

Розглянуто проблему побудови системи автоматизованого перекладу з української мови на українську жестову мову. Запропоновано інформаційну технологію, що дозволяє побудувати таку систему. Основна ідея полягає у створенні механізму узагальнених граматичних конструкцій простих речень української та жестової мов. Одержані узагальнені конструкції пов'язані між собою зв'язками, які дозволяють робити переклад, не гублячи при цьому сенс тексту. Проведено експериментальне дослідження на множині слів та жестів в об'ємі початкових класів спеціальних шкіл для дітей з вадами слуху.

Розглянуто задачу ідентифікації на зображенні конфігурації руки для української жестової мови. Запропоновано для розв'язку цієї задачі використовувати метод Speeded Up Robust Features (SURF), оскільки він є одним з найбільш ефективних і швидких сучасних алгоритмів. Одержані експериментальні результати показали досить високу ефективність методу для ідентифікації дактильних знаків.

Розглянуто підхід для моделювання емоційної та артикуляційної складових обличчя віртуальної моделі людини в процесі відтворення нею українського жестового мовлення. Запропонований підхід надає змогу використовувати одержанні під час моделювання параметри для аналізу зображень обличчя людини в процесі відтворення жестового мовлення.

Запропоновано алгоритмічну реалізацію інформаційної технології для перекладу з української мови на жестову мову. Побудовано інфологічні моделі словників української та жестової мов, пов'язані узагальнені граматичні конструкції для забезпечення автоматизованого перекладу. Наведено експериментальні результати для перевірки ефективності запропонованої інформаційної технології.

This work presents a computer technology for the emotion detection on human faces. The model is offered as a linear combination of some basic emotions. Parameters of the model are found with the help of the method of deformable templates using NURBS curves. An arbitrary emotion on a human face is detected as a convex combination of basic emotions.

Запропоновано метод розпізнавання міміки губ під час промовляння слів українською мовою на базі синтезованої математичної моделі станів губ конкретної людини. Новизна та практична цінність полягає у створенні систем навчання правильній артикуляції під час промовляння слів українською мовою.