Google DeepMind gives computer ‘dreams’ to improve learning

Google DeepMind gives computer ‘dreams’ to improve learning
15:34 23 Noyabr 2016
Ölkə mətbuatı
A- A+

Androids may not, as science fiction writer Philip Dick once posited, dream of electric sheep. But the newest artificial intelligence system from Google’s DeepMind division does indeed dream, metaphorically at least, about finding apples in a maze.
 
Researchers at DeepMind wrote in a paper published online that they had achieved a leap in the speed and performance of a machine learning system. It was accomplished by, among other things, imbuing technology with attributes that function in a way similar to how animals are thought to dream.
 
The paper explains how DeepMind’s new system -- named Unsupervised Reinforcement and Auxiliary Learning agent, or Unreal -- learned to master a three-dimensional maze game called Labyrinth 10 times faster than the existing best AI software. It can now play the game at 87 percent the performance of expert human players, the DeepMind researchers said.
 
"Our agent is far quicker to train, and requires a lot less experience from the world to train, making it much more data efficient," DeepMind researchers Max Jaderberg and Volodymyr Mnih jointly wrote via e-mail. They said Unreal would allow DeepMind’s researchers to experiment with new ideas much faster because of the reduced time it takes to train the system. DeepMind has already seen its AI products achieve highly respected results teaching itself to play video games, notably the retro Atari title Breakout.
 
Labyrinth is a game environment that DeepMind developed, loosely based on the design style used by the popular video game series Quake. It involves a machine having to navigate routes through a maze, scoring points by collecting apples.
 
This style of game is an important area for artificial intelligence research because the chance to score points in the game, and thus reinforce "positive" behaviors, occurs less frequently than in some other games. Additionally, the software has only partial knowledge of the maze’s layout at any one time.
 
One way the researchers achieved their results was by having Unreal replay its own past attempts at the game, focusing especially on situations in which it had scored points before. The researchers equated this in their paper to the way "animals dream about positively or negatively rewarding events more frequently."
 
The researchers also helped the system learn faster by asking it to maximize several different criteria at once, not simply its overall score in the game. One of these criterion had to do with how much it could make its visual environment change by performing various actions. "The emphasis is on learning how your actions affect what you will see," Jaderberg and Mnih said. They said this was also similar to the way newborn babies learn to control their environment to gain rewards -- like increased exposure to visual stimuli, such as a shiny or colorful object, they find pleasurable or interesting.
 
Jaderberg and Mnih, who are among seven scientists who worked on the paper, said it was "too early to talk about real-world applications" of Unreal or similar systems.
 
Mastering games, from Chess to trivia contests like the U.S. gameshow Jeopardy!, have long served as important milestones in artificial intelligence research. DeepMind achieved what is considered a major breakthrough in the field earlier this year when its AlphaGo software beat one of the world’s reigning champions in the ancient strategy game Go.
 
Earlier this month DeepMind announced the creation of an interface that will open Blizzard Entertainment Inc’s science fiction video game Starcraft II to machine learning software. Starcraft is considered one of the next milestones for AI researchers to conquer because many aspects of the game approximate "the messiness of the real world," according to DeepMind researcher Oriol Vinyals. Unreal is expected to help DeepMind master the mechanics of that game.
 
DeepMind’s Unreal system also mastered 57 vintage Atari games, such as Breakout, much faster -- and achieved higher scores -- than the company’s existing software. The researchers said Unreal could play these games on average 880 percent better than top human players, compared to 853 percent for DeepMind’s older AI agent.
 
But on the most complex Atari games, such as Montezuma’s Revenge, Jaderberg and Mnih said the new system made bigger leaps in performance. On this game, they said, the prior AI system scored zero points, while Unreal achieved 3,000 -- greater than 50 percent of an expert human’s best effort.


RƏYLƏR

BU KATEQORİYADAN DİGƏR XƏBƏRLƏR

Ölkə mətbuatında bugün »

Sevdiyim üçün dua edirəm

19 Sentyabr 2017 22:33

ABŞ müdafiə xərclərinə rekord məbləğdə vəsait ayıra bilər

19 Sentyabr 2017 22:33

Gənc Tamaşaçılar Teatrının aktrisası beynəlxalq diploma layiq görülüb

19 Sentyabr 2017 22:32

Göygöldə qəza: iki avtomobil toqquşdu

19 Sentyabr 2017 22:23

Ruhani ABŞ-ı hədələdi -

19 Sentyabr 2017 22:14

Külli miqdarda pul unitazlara atıldı -

19 Sentyabr 2017 21:55

Ağdamd ev kül oldu

19 Sentyabr 2017 21:49

Salyanda dəhşətli qəza: 4 qadın öldü

19 Sentyabr 2017 21:44

Azərbaycanda şagird müəllimə "Faşist salamı" verdi -

19 Sentyabr 2017 21:40

“Qızıl oğlan” mükafatına namizədlərin SİYAHISI

19 Sentyabr 2017 21:38

Yevlaxda xadimələri daşıyan avtobus qəzaya uğrayıb

19 Sentyabr 2017 21:32

BNA sürücülərin döyülməsindən narahatdır -

19 Sentyabr 2017 21:30

Rahibələrin rok qrupu dünya turnesində - VİDEO

19 Sentyabr 2017 21:28

"Deutsche Bank" maliyyə böhranına səbəb ola biləcək amilləri sadalayıb

19 Sentyabr 2017 21:17

Azərbaycanlı kənd təsərrüfatı mütəxəssisləri beynəlxalq təcrübəni öyrənirlər

19 Sentyabr 2017 21:17

İranın "Nəfəs" filminin Oskar mükafatına namizədliyi irəli sürülüb

19 Sentyabr 2017 21:12

Salyanda yol qəzası baş verib, 4 nəfər ölüb

19 Sentyabr 2017 21:12

Dembele əməliyyat olundu

19 Sentyabr 2017 21:12

Elmar Məmmədyarov: "Azərbaycan Fələstin münaqişəsinin Şərqi Qüdsün Fələstin Dövlətinin paytaxtı olmaqla, iki dövlət həllini dəstəkləyir"

19 Sentyabr 2017 21:07

Elmar Məmmədyarov -

19 Sentyabr 2017 21:04

İnterpol dələduzluqda təqsirləndirilən azərbaycanlını axtarır

19 Sentyabr 2017 21:03

İranın "Nəfəs" filmi 90-cı Oscar mükafatlarına namizəd olub

19 Sentyabr 2017 21:02

Prezident BMT-də müzakirələrin açılışına qatıldı

19 Sentyabr 2017 20:59

ABŞ BMT-də islahatlar aparılmasını istəyir -

19 Sentyabr 2017 20:58

"Sumqayıt" oyunçusu barəsində qərar - HƏBS

19 Sentyabr 2017 20:49

“Bu, böyük müharibənin başlanğıcı olacaq” - DƏHŞƏTLİ XƏBƏRDARLIQ

19 Sentyabr 2017 20:43

Prezident İlham Əliyev BMT-nin baş qərargahında ümumi müzakirələrin açılışında iştirak edib

19 Sentyabr 2017 20:42

Göygöldə qəza: xəsarət alan var

19 Sentyabr 2017 20:39

Paytaxtın bu ərazilərində qaz təchizatında məhdudiyyət olacaq -

19 Sentyabr 2017 20:38

Meksikalı heykəltəraş Xorxe Marinin sərgisi başa çatıb

19 Sentyabr 2017 20:32

Beynəlxalq Muğam Mərkəzində Milli Musiqi Günü qeyd olunub

19 Sentyabr 2017 20:30

Gürcüstanda polis azərbaycanlıların yığcam yaşadıqları qəsəbədə xüsusi əməliyyat keçirir

19 Sentyabr 2017 20:27

Rusiya əhalisinin 96%-i ölkənin iqtisadi siyasətinin dəyişdirilməsi zəruriyyətini bildirib

19 Sentyabr 2017 20:22

ABŞ prezidenti: “Bu, bizim üçün utanc mənbəyidir”

19 Sentyabr 2017 20:18

ABŞ prezidenti -

19 Sentyabr 2017 20:16

Prezident İlham Əliyev və xanımı müzakirələrin açılış mərasimində iştirak ediblər

19 Sentyabr 2017 20:14

Moldova hökuməti ölkə prezidentindən Konstitusiya Məhkəməsinə şikayət edəcək

19 Sentyabr 2017 20:12

Yeni silahın yaratdığı QORXU, müharibənin OLMAMASI ÜÇÜN... – GÜNÜN SİYASİ XÜLASƏSİ

19 Sentyabr 2017 20:03

Bakıda və bölgələrdə bal yarmarkası keçiriləcək

19 Sentyabr 2017 20:02

VİDEO: Günəş enerjisi ilə yaşayan uşaqlar -

19 Sentyabr 2017 20:00

Azərikimya İB-də Neftçilər gününə həsr olunmuş “Xəmsə” bilik yarışı keçirilib

19 Sentyabr 2017 19:57

"Gazelli" şirkətinin hüquqşünası: “Yanğın zamanı heç kim xəsarət almayıb”

19 Sentyabr 2017 19:53

Azərbaycanda arıçılıq məhsullarının sərgi-satış yarmarkası keçiriləcək

19 Sentyabr 2017 19:52

Bu azərbaycanlı bütün dünyada axtarılır

19 Sentyabr 2017 19:50

Yer kürəsinin tarixində ən yüksək temperatur müəyyən edildi

19 Sentyabr 2017 19:48

Təlimlərdə ərazinin maketi üzərində fəaliyyətlər icra olunub

19 Sentyabr 2017 19:39

VİDEO: Narkotik vasitə və spirtli içki verib Allaha qurban etdilər -

19 Sentyabr 2017 19:38

Biləsuvarda fəhlələri daşıyan mikroavtobus aşıb, yaralananlar var

19 Sentyabr 2017 19:37

Tramp: “Bu ölkəni məhv etməkdən başqa seçim yoxdur”

19 Sentyabr 2017 19:33

“Neft Daşları”nda yeni quyu istismara verilib

19 Sentyabr 2017 19:30