Lipreading robot proves MORE accurate than a human in deciphering speech

Lipreading robot proves MORE accurate than a human in deciphering speech
12:34 10 Noyabr 2016
Ölkə mətbuatı
A- A+

Machines have already surpassed humans when it comes to mundane tasks such as number crunching and filing, but now they can tell what you are saying just by watching you speak. A team of UK researchers has created a computer program which can lip read more accurately than experts.
 
Developed at the University of Oxford, the software, called LipNet is able to work out what people were saying more than nine times out of 10. While the average accuracy of an experienced lipreader is around 52 per cent, LipNet managed to hit levels of 93.4 per cent accuracy. LipNet works using a neural network to map mouth movements of people to a database of set sentences.
 
During the training phase, the AI software was presented with video footage of people giving a strange series of commands, with cryptic phrases such as ‘set blue by A four please’. By breaking down the video frames, LipNet was able to match the movements of people’s mouths with the known commands.
 
In tests, almost 29,000 videos of two men and two women were used to train the AI, with the results compared against the success rate of three hearing-impaired people who can lipread. The project received funding from Google’s DeepMind, among others, and surpassed the previous milestone for machine lipreading accuracy of 79.6 per cent.
 
But the team says its goal is to train with real world examples, with Yannis Assael, one of the researchers on the project, writing that ‘performance will only improve with more data’. In their paper, posted on online ArXiv server, the researchers say that the technology could have huge potential.
 
They explain: ‘Machine lipreaders have enormous practical potential, with applications in improved hearing aids, silent dictation in public spaces, covert conversations, speech recognition in noisy environments, biometric identification, and silent-movie processing.’
 
Allaying fears that the software could be used by 'Big Brother' to monitor conversations through the UK's extensive network of CCTV cameras, Mr Assael told The Mirror: 'LipNet has no application in the world of surveillance, simply because lipreading requires you to see the subject’s tongue - meaning that the video has to be straight on and well-lit to get a good result.'
 
Lipreading is an impressive feat, expanding the repertoire of 'vision'-based learning functions of machines. Machine learning - learning by example - can help computers to get a good idea of a what an image, situation or the like means, even if they are encountering it for the first time.
 
Researchers at Google's DeepMind recently boosted this capability by endowing machines with memory to develop 'one-shot learning'. In this way, systems were able to recognise an object after seeing it only once. Such steps seem small, but could lead to much faster training of AI systems, pushing the field forward at an even greater pace. 




RƏYLƏR

BU KATEQORİYADAN DİGƏR XƏBƏRLƏR

Ölkə mətbuatında bugün »

Fəal "Facebook" istifadəçilərinin sayı cari ilin II rübündə 2 milyardı ötüb

27 İyul 2017 02:37

Lənkəranda toyda dava düşdü - yaralananlar var

27 İyul 2017 02:34

Züheyr Muraddan yeni kolleksiya - FOTO

27 İyul 2017 02:32

“Stress çarxı”nın rəqibi peyda oldu

27 İyul 2017 02:20

"Neftçi" "Şalke"yə belə məğlub oldu - VİDEO

27 İyul 2017 02:03

Tablolardan paltarlar - FOTO

27 İyul 2017 01:32

Barmağı telefona çevirən “ağıllı” üzük

27 İyul 2017 01:30

Gürcüstan telekanalında yanğın oldu

27 İyul 2017 01:29

"Neftçi" Almaniyanın "Şalke" klubuna məğlub olub

27 İyul 2017 01:22

Çempionlar Liqasında gecənin NƏTİCƏLƏRİ

27 İyul 2017 01:14

Çempionlar Liqasında III təsnifat mərhələsinin daha 9 oyunu keçirilib

27 İyul 2017 01:02

Goranboyda maşın aşdı - Yaralananlar var - FOTO

27 İyul 2017 00:48

Hacıqabulda 4 otaqlı ev yandı

27 İyul 2017 00:34

ABŞ-da təyyarə avtomobil yoluna düşüb, ölənlər var

27 İyul 2017 00:32

Putin Ermənistanla birgə hərbi birləşmələr haqqında sazişi ratifikasiyası edib

27 İyul 2017 00:30

Tillerson istefa xəbərlərini təkzib etdi

27 İyul 2017 00:29

Astroloji proqnoz - 27 iyul

27 İyul 2017 00:13

17 yaşlı oğlan özünü asdı - Şəkidə

27 İyul 2017 00:09

"Leipzig" Keytanı satmaq barədə düşünə bilər

27 İyul 2017 00:05

Günün qoroskopu: diqqəti əldən verməyin

27 İyul 2017 00:05

Fatih Terim 3,5 milyon avro təzminat alacaq

27 İyul 2017 00:04

Tramp maaşından imtina etdi

27 İyul 2017 00:03

Kaxaber Sxadadzenin yerinə ispan mütəxəssis

26 İyul 2017 23:57

Bellanı bir də belə görün - FOTO

26 İyul 2017 23:57

Bürclər – 27 İYUL

26 İyul 2017 23:55

Mustafa Ceceli və yeni həyat yoldaşı bal ayından qayıtdı - FOTO

26 İyul 2017 23:52

ABŞ-da ev balığını öldürən şəxs 4 ay müddətinə həbs olunub

26 İyul 2017 23:47

"Bavariya" "Real" qədər böyük klubdur"

26 İyul 2017 23:47

Çəkilmədiyi film üçün Şarliz Terona kömək etdi

26 İyul 2017 23:42

Bakıda atasını itirən qızdan DƏHŞƏTLİ ƏMƏL

26 İyul 2017 23:37

"Sanki xalq düşməniyəm"

26 İyul 2017 23:37

Elmdə müdhiş sıçrayış

26 İyul 2017 23:37

Tramp maaşını ABŞ Təhsil nazirliyinin hesabına köçürüb

26 İyul 2017 23:32

Azərbaycan neftinin SON QİYMƏTİ

26 İyul 2017 23:27

Tramp maaşını təhsil nazirliyinə verdi

26 İyul 2017 23:24

Körpələrə verilən köməkçi qidanın həcmi nə qədər olmalıdır?

26 İyul 2017 23:22

Natavanın toydan sonra qayınatasıgildə ilk fotosu

26 İyul 2017 23:22

Federal Ehtiyatlar Sistemi uçot dərəcəsini olduğu kimi saxlayıb

26 İyul 2017 23:20

Sığorta şirkəti öhdəliyini yerinə yetirmir: Vətəndaş sığorta pulunu ala bilmir - VİDEO

26 İyul 2017 23:17

Putin Ermənistanla birgə hərbi birləşmələr haqqında sazişi ratifikasiya edib

26 İyul 2017 23:05

Salyan sakini avtomobili aşırdı - FOTOLAR

26 İyul 2017 23:03

Həbib Əlizadədən növbəti kreativ addım - VİDEO

26 İyul 2017 22:57

Dərinin yanmadan qorunması üsulları

26 İyul 2017 22:57

Daşkəsəndə qayın yeznəni döydü

26 İyul 2017 22:49

Bacısı ilə boşandığı üçün aralarında mübahisə düşdü - yeznəsi tərəfindən döyüldü

26 İyul 2017 22:47

Xəzərdə batan iki nəfər xilas edilib

26 İyul 2017 22:45

Cinsi zəifliyi aradan qaldıran cövhər

26 İyul 2017 22:42

Bakıda qardaş bacısına qısqanclıq zəminində 13 bıçaq zərbəsi vurub

26 İyul 2017 22:42

Yayda bu qidalara üstünlük verilməlidir

26 İyul 2017 22:37

Goranboyda "VAZ" aşdı - 3 yaralı

26 İyul 2017 22:29