LVA

Матеріал з Вікіпедії — вільної енциклопедії.
Перейти до навігації Перейти до пошуку
Багаторівневий Аналіз Голосу LVA
Тип сторінка значень у проєкті Вікімедіаd
Автор Амір Ліберман
Розробник Nemesysco LTD
Перший випуск 1997
Місце релізу Ізраїль Ізраїль, Нетанія
Платформа .NET
Операційна система Windows
Мова програмування C++
Доступні мови Багатомовна (10 мовних пакетів)
Українська мова так
Ліцензія Власницьке ПЗ
Вебсайт nemesysco.com

LVA (англ. Layered Voice Analysis, укр. Багаторівневий Аналіз Голосу) - комп'ютерна технологія (метод) аналізу голосу, розроблена ізраїльською компанією Nemesysco в 1997 році. Технологія базується на власному наборі голосових параметрів, знайдених у ході досліджень, та їх кореляції з ключовими людськими емоціями. LVA аналізує голос людини та визначає ступінь емоційного і когнітивного напруження, рівень стресу та різкі зміни емоційних реакцій впродовж розмови.

Дослідницька база LVA містить більше ніж 2 мільйонів аудіозаписів.


Історія створення LVA[ред. | ред. код]

Амір Ліберман замислив розробку LVA після теракту 1996 року в Ізраїлі. Його головною метою було створення "ідеального" детектора брехні, поєднуючи різні набори відомих технологій.[1] Нова технологія мала б виявляти брехню на відстані, тим самим убезпечивши правоохоронців від терористів.

Ліберман отримав доступ до аудіозаписів допитів поліції по закритих справах і почав аналізувати голоси злочинців. Заздалегідь знаючи місця, в яких злочинець брехав, Амір створив перші математичні параметри, що мали відображати обман. Спочатку він проводив тести на своїх знайомих та просив брехати, відповідаючи на банальні питання: колір неба, своє ім'я, професія тощо. Але алгоритм не виявляв жодної брехні. В певний момент Ліберман поставив другу відверте особисте запитання, і система раптово показала результат: екран почервонів, сигналізуючи про обман.[1] Це дало розуміння, що брехня має зв'язок з емоційним станом людини. Розпізнавши емоції, що лежать в основі обману, можна розпізнати й сам обман.[2]

В 1997 році Ліберман вдосконалює алгоритм, фокусуючись на виявленні емоцій. І створює перший прототип LVA.

У 2000 році Ліберман наймає команду розробників та засновує в Нетаньї компанію Nemesysco, ставши її керівником. Компанія починає розробку інструментів для правоохоронних структур і отримує новий матеріал для досліджень.[1] Згодом з'являється перша версія програми LVA на операційній системі Windows. Програма могла проаналізувати аудіозапис і вказати місця з високою імовірністю обману.

Принципи роботи LVA[ред. | ред. код]

Принцип роботи технології багаторівневого аналізу голосу LVA базується на дослідженні різних аспектів голосу з метою виявлення справжніх емоцій, психофізіологічних та когнітивних станів.Технологія обчислює рівні емоційного стресу, розумової напруги, концентрації респондента по заданій темі та ймовірність недостовірності інформації, що надається. LVA може виявити та виміряти такі емоції, як хвилювання, ентузіазм, самовпевненість, агресія, стрес, розчарування та втому.[3]

Завдяки штучному інтелекту технологія LVA транслює інформацію в режимі реального часу, а також забезпечує статистичний аналіз даних про емоції респондента, зберігаючи конфіденційність особистої інформації.[3]

Особливістю даного методу є оцінка неконтрольованих психофізичних змін голосу, недоступних для сприйняття  на слух навіть досвідченому експерту. За словами Аміра Лібермана, аналізуються лише справжні емоції, які неможливо зіграти.[4]

Технологія є унікальною у своїй здатності виявляти справжні емоції та когнітивні стани незалежно від мови респондента, вибору слів та інтонації.[3]

Математичний аналіз голосового сигналу[ред. | ред. код]

Технологія LVA аналізує структуру звукового сигналу та обчислює понад 150 неконтрольованих голосових параметрів. Отримані дані порівнюються з власною дослідницькою базою, зібраною за понад 20 років.

LVA аналізує математичну форму звукових частот і фактично ігнорує мову, вибір слів, тон. Вона працює лише з математичною складовою голосового сигналу.[5]

Технологію було створено, як статистичний інструмент із приблизно 90% точністю.

Дослідження аудіозаписів[ред. | ред. код]

Штучний інтелект Lionnet[ред. | ред. код]

Кореляція з людськими емоціями[ред. | ред. код]

Алгоритми LVA обчислюють кореляцію голосових параметрів з людськими емоціями. Таким чином, програма визначає ймовірність оманливих або шахрайських намірів, когнітивну активність, рівні стресу та загальний емоційний стан.

Параметри LVA[ред. | ред. код]

Технологія LVA вимірює психофізіологічні реакції, когнітивні процеси та рівні стресу, обчислюючи понад 150 неконтрольованих голосових параметрів, що можна виділити та пов’язати, загалом, із 16-тьма емоціями. «Їх унікальність полягає в тому, що всі вони неконтрольовані, усі непомітні». І всі вони стосуються справжніх емоцій, а не тих, що ми намагаємося транслювати» - Амір Ліберман.[4]

На основі цих даних програма визначає емоційний стан людини та вказує на проблемні для неї теми.

Emotional Diamond

Діамант емоцій[ред. | ред. код]

Концепція Nemesysco Emotional Diamond була розроблена у 2012 році для візуалізації емоційного стану та реакцій людини. Він відображає 8 емоційних характеристик із 14, що обчислюються LVA. Створений він для того, щоб виділити ключові емоційні реакції респондента загалом при відповіді на всі питання.

Emotional Diamond вбудовано в програмне забезпечення та дозволяє бачити емоції людини онлайн під час бесіди. Це може стати у пригоді у телефонних продажах, або для оцінки емоційного стану співробітників.

Наукові дослідження[ред. | ред. код]

Технологія багаторівневого аналізу голосу LVA викликає неабиякий інтерес дослідників. Спеціалісти по всьому світу постійно проводять наукові дослідження[6], вивчаючи технологію Nemesysco. За 20 років практичного використання LVA дослідники дійшли висновку, що з кожним роком технологія все більше вдосконалюється та показує максимально правдиві результати.[7]

Застосування LVA[ред. | ред. код]

Технологія LVA аналізу голосу має широке застосування.

Компанія Nemesysco, яка є розробником технології співпрацює зі страховими компаніями, агентствами рекрутингу, кредитними службами, банками, маркетинговими агентствами та іншими приватними та державними структурами.[8]

Частина матеріалів, щодо використання технології є засекреченими, але деякі відкриті кейси є доступними для огляду широкій аудиторії.

Силові структури та безпека[ред. | ред. код]

Файл:How Nemesysco's technology helps detecting insurance fraud?.webm
How Nemesysco's technology helps detecting insurance fraud?

Технологія аналізу голосу все частіше використовується в кримінальних дослідженнях і активним чином запобігає нещасним випадкам і злочинам. В одному з кейсів, Nemesysco допомогла  приватній компанії в Латинській Америці у боротьбі зі злочинністю, виявивши осіб із кримінальними нахилами. За допомогою автоматизованої програмної анкети було опитано близько 500 співробітників. Система вказала, що 25 співробітників були залучені до кримінальної діяльності, а близько 30% були схильні до неналежної поведінки на роботі. Потім ці ознаки були досліджені та підтверджені, що дозволило керівникам прийняти відповідні заходи для забезпечення безпеки колективу, одночасно підтвердивши довіру до решти персоналу.[9]

У 2013 році в одному з парків Індії було скоєно жахливе згвалтування молодої дівчини, яке було миттєво розкрите за допомогою LVA. В день злочину поліція прибула на місце та затримала всіх чоловіків, які були на той момент в парку. Після проведення опитування серед 180 чоловіків, 5 з них показали максимально високий рівень ризику і згодом самі підтвердити свій жахливий злочин. Кривдники були виявлені та покарані в той же день.[10]

Вбивство вагітної жінки в США набула широкого резонансу та досить довго розслідувалось. Тільки завдяки LVA злочинець був розпізнаний. Тоді ще технологія тільки запроваджувалася для розкриття злочинів, чому деякі поліцейські та слідчі були налаштовані достатньо скептично.[11]

Фінансовий сектор[ред. | ред. код]

У Лінкольні, США технологія була використана для виявлення шахраїв, які претендують на щомісячну виплату від центру по безробіттю. Таким чином місцева влада тільки під час пілотного проєкту змогла направити 120 000 фунтів стерлінгів безробітним, які дійсно цього потребують.[12]

Страхові компанії та банки Індії використовують LVA для запобігання страховому шахрайству та виявленню кредитних ризиків.[13] Це допомагає банкам при поданні заявок на фінансування та видачу кредитів клієнтам.[14]

LVA в Україні[ред. | ред. код]

Технологія багаторівневого аналізу голосу набула широкого використання в Україні з початком повномасштабного вторгнення росії в Україну.

На початку червня 2022 року Національна Поліція України була однією з перших офіційних державних структур в країні, хто почав запроваджувати технологія аналізу голосу для розкриття злочинів.[15] В кінці червня 2022 судові експерти Полтавського НДЕКЦ МВС пройшли тренінг з використання технології LVA для удосконалення  психологічних досліджень і впровадження технології в роботу. У серпні 2022 експерти криміналісти Міністерства Внутрішніх Справ України також почали використовують LVA при проведенні психологічної експертизи під час розслідувань.[16]

У грудні 2022 в Києві був відкритий офіс компанії VAS - офіційного дистриб'ютора ізраїльської технології.

LVA для боротьби з пропагандою[ред. | ред. код]

В червні 2022 року технологія була використана для боротьби з російською пропагандою. Інформаційний простір FakeOFF аналізував та публікував аналізи виступів російських пропагандистів та політиків за допомогою технології LVA.

Схожий проєкт для боротьби з пропагандою був створений одночасно у Японії. На телебаченні були опубліковані аналізи голосу путіна з результатами.

Правовий статус LVA[ред. | ред. код]

Звіти, створені за технологією LVA, приймаються як підтверджуючі докази в судах Азії.[17]

Критика LVA[ред. | ред. код]

У статті 2007 року в International Journal of Speech Language and the Law двоє шведських лінгвістів, Андерс Ерікссон і Франциско Ласерда, різко критикували LVA.[18]

«Наш огляд наукових досліджень покаже, що ці машини працюють на рівні випадковостей під час тестування надійності», — пишуть автори. «Враховуючи такі результати та відсутність наукової підтримки основних принципів, виправдано розглядати використання цих машин як шарлатанство».

У відповідь на цю статтю розробники технології випустили офіційну відповідь, в якій заявили, що автори статті ніколи не використовували технологію повною мірою, а висновки зробили, спираючись на 2 голосових патерни, представлених компанією Nemesysco 10 років тому.

Джерела[ред. | ред. код]

  1. а б в Houweling, Elles (30 червня 2021). Emotion-detection voice analysis tech CEO insists he is NOT using AI: "It's biased". Verdict (амер.). Процитовано 24 серпня 2023.
  2. Виявлення емоцій в голосі. Амір Ліберман про технологію LVA на TEDxAmsterdam (укр.), процитовано 24 серпня 2023
  3. а б в Voice analytics transforms municipal services in smart cities during Covid. The Smart City Journal (en-gb) . 21 серпня 2023. Процитовано 24 серпня 2023.
  4. а б https://www.facebook.com/luke.dormehl (26 квітня 2021). Emotion-Sensing A.I. is Here, For Better or Worse. Digital Trends (англ.). Процитовано 24 серпня 2023.
  5. Як працює технологія аналізу голос LVA. Асаф Бар Ілан - віцепрезидент Nemesysco. (укр.), процитовано 24 серпня 2023
  6. Наукові дослідження LVA. V.A.S. Україна (укр.). 7 серпня 2022. Процитовано 24 серпня 2023.
  7. Google Презентації: вхід. accounts.google.com. Процитовано 24 серпня 2023.
  8. Houweling, Elles (30 червня 2021). Emotion-detection voice analysis tech CEO insists he is NOT using AI: "It's biased". Verdict (амер.). Процитовано 31 серпня 2023.
  9. Voice analytics transforms municipal services in smart cities during Covid. The Smart City Journal (en-gb) . 18 вересня 2023. Процитовано 22 вересня 2023.
  10. Mumbai gang-rape case: Rapists assaulted 4 other women in past 6 months. The Times of India. 28 серпня 2013. ISSN 0971-8257. Процитовано 22 вересня 2023.
  11. DFS gets country's first layered voice analysis system. The Times of India. 4 березня 2012. ISSN 0971-8257. Процитовано 22 вересня 2023.
  12. Lie detector to target claimants (брит.). 20 листопада 2007. Процитовано 22 вересня 2023.
  13. Q&A: Behavioural Cues discuss what's next for voice analytics. IT Brief Asia (англ.). Процитовано 22 вересня 2023.
  14. Tan, Allan (7 липня 2022). PodChats for FutureCIO: Demystifying layered voice analytics. FutureCIO (амер.). Процитовано 22 вересня 2023.
  15. На базі ЛьвДУВС відбулись навчання для правоохоронців з використання унікальної технології аналізу голосу. Львівський державний університет внутрішніх справ (uk-ua) . 17 червня 2022. Процитовано 22 вересня 2023.
  16. В Закарпатський НДЕКЦ МВС пройшла презентація програмного продукту «Nemesysco LVA 6.50» компанії Nemesysco Ltd (Ізраїль), який дозволить ✅оптимізувати... | By Експертна служба МВС | Facebook. www.facebook.com (укр.). Процитовано 22 вересня 2023.
  17. Layered voice analysis: Using voice analysis to detect emotions. FE Tech Bytes (англ.). 1 грудня 2021. Процитовано 22 вересня 2023.
  18. Lacerda, Francisco de (12 березня 2009). LVA-technology and Nemesysco’s official statement. Phonetics at Stockholm University Blog (англ.). Процитовано 25 вересня 2023.