Google DeepMind gives computer ‘dreams’ to improve learning

Google DeepMind gives computer ‘dreams’ to improve learning
15:34 23 Noyabr 2016
Ölkə mətbuatı
A- A+

Androids may not, as science fiction writer Philip Dick once posited, dream of electric sheep. But the newest artificial intelligence system from Google’s DeepMind division does indeed dream, metaphorically at least, about finding apples in a maze.
 
Researchers at DeepMind wrote in a paper published online that they had achieved a leap in the speed and performance of a machine learning system. It was accomplished by, among other things, imbuing technology with attributes that function in a way similar to how animals are thought to dream.
 
The paper explains how DeepMind’s new system -- named Unsupervised Reinforcement and Auxiliary Learning agent, or Unreal -- learned to master a three-dimensional maze game called Labyrinth 10 times faster than the existing best AI software. It can now play the game at 87 percent the performance of expert human players, the DeepMind researchers said.
 
"Our agent is far quicker to train, and requires a lot less experience from the world to train, making it much more data efficient," DeepMind researchers Max Jaderberg and Volodymyr Mnih jointly wrote via e-mail. They said Unreal would allow DeepMind’s researchers to experiment with new ideas much faster because of the reduced time it takes to train the system. DeepMind has already seen its AI products achieve highly respected results teaching itself to play video games, notably the retro Atari title Breakout.
 
Labyrinth is a game environment that DeepMind developed, loosely based on the design style used by the popular video game series Quake. It involves a machine having to navigate routes through a maze, scoring points by collecting apples.
 
This style of game is an important area for artificial intelligence research because the chance to score points in the game, and thus reinforce "positive" behaviors, occurs less frequently than in some other games. Additionally, the software has only partial knowledge of the maze’s layout at any one time.
 
One way the researchers achieved their results was by having Unreal replay its own past attempts at the game, focusing especially on situations in which it had scored points before. The researchers equated this in their paper to the way "animals dream about positively or negatively rewarding events more frequently."
 
The researchers also helped the system learn faster by asking it to maximize several different criteria at once, not simply its overall score in the game. One of these criterion had to do with how much it could make its visual environment change by performing various actions. "The emphasis is on learning how your actions affect what you will see," Jaderberg and Mnih said. They said this was also similar to the way newborn babies learn to control their environment to gain rewards -- like increased exposure to visual stimuli, such as a shiny or colorful object, they find pleasurable or interesting.
 
Jaderberg and Mnih, who are among seven scientists who worked on the paper, said it was "too early to talk about real-world applications" of Unreal or similar systems.
 
Mastering games, from Chess to trivia contests like the U.S. gameshow Jeopardy!, have long served as important milestones in artificial intelligence research. DeepMind achieved what is considered a major breakthrough in the field earlier this year when its AlphaGo software beat one of the world’s reigning champions in the ancient strategy game Go.
 
Earlier this month DeepMind announced the creation of an interface that will open Blizzard Entertainment Inc’s science fiction video game Starcraft II to machine learning software. Starcraft is considered one of the next milestones for AI researchers to conquer because many aspects of the game approximate "the messiness of the real world," according to DeepMind researcher Oriol Vinyals. Unreal is expected to help DeepMind master the mechanics of that game.
 
DeepMind’s Unreal system also mastered 57 vintage Atari games, such as Breakout, much faster -- and achieved higher scores -- than the company’s existing software. The researchers said Unreal could play these games on average 880 percent better than top human players, compared to 853 percent for DeepMind’s older AI agent.
 
But on the most complex Atari games, such as Montezuma’s Revenge, Jaderberg and Mnih said the new system made bigger leaps in performance. On this game, they said, the prior AI system scored zero points, while Unreal achieved 3,000 -- greater than 50 percent of an expert human’s best effort.


RƏYLƏR

OXŞAR XƏBƏRLƏR

BU KATEQORİYADAN DİGƏR XƏBƏRLƏR

Ölkə mətbuatında bugün »

Ərəb ölkələrinin tələbi Qətərə təqdim olunub

23 İyun 2017 05:57

Ronaldu 14,7 mln. avro vergi ödəmək istəmir

23 İyun 2017 05:49

Bakıda qadın küçədə naməlum şəxslər tərəfindən döyüldü

23 İyun 2017 05:33

Ön planda qadın dodaqlarıdır - FOTO

23 İyun 2017 05:32

Ulduz futbolçuya 8 oyunluq cəza

23 İyun 2017 05:24

İspaniya sahillərində sutka ərzində 400-dən artıq miqrant xilas edilib

23 İyun 2017 05:22

Qaraçuxurda gənc qız bıçaqlandı

23 İyun 2017 05:08

​Tülkülər barəsində bildiklərimiz və bilmədiklərimiz

23 İyun 2017 05:05

Rusiya və Türkiyə hərbçiləri İdlibə nəzarət edəcək

23 İyun 2017 05:04

Bakıda intihara cəhd hadisəsi baş verib

23 İyun 2017 05:02

Pirallahıda yük maşını yaşlı qadını vurdu

23 İyun 2017 04:43

Məşhur brendlərin fərqli görüntüləri - FOTO

23 İyun 2017 04:32

Şimali Koreya yenə raket buraxdı

23 İyun 2017 04:23

Əri tərəfindən döyülən qadın kəllə-beyin travması alıb -

23 İyun 2017 04:15

Moskva və Vaşinqton yeni sanksiyaları müzakirə etdi

23 İyun 2017 04:14

Benzinin əvəzləyicisi tapıldı

23 İyun 2017 04:09

Polşaya məxsus hərbi vertolyot İtaliyada qəzaya uğrayıb

23 İyun 2017 04:07

BMT-dən qeyri-adi hesabat:

23 İyun 2017 03:53

QHT-lərə Dövlət Dəstəyi Şurası Balakən və Zaqatalada seminar keçirib (FOTO)

23 İyun 2017 03:50

Xaçmaz sakinlərinin su problemi - Heyvanlarla insanlar eyni yerdən su içir - FOTO/VİDEO

23 İyun 2017 03:48

Rəssam yumurtlayan toyuq oldu - FOTO

23 İyun 2017 03:32

Mayk Pens: Şimali Koreyaya qarşı "strateji səbr erası" başa çatıb

23 İyun 2017 03:29

Bakıda mənzilə basqın: 1 nəfər öldürülüb, 2 nəfər yaralanıb

23 İyun 2017 03:14

Qadını TIR vurdu

23 İyun 2017 02:39

Astroloji proqnoz -

23 İyun 2017 02:33

Gecənin kulrnar vəhşəti - FOTO

23 İyun 2017 02:32

Bakıda işdən evə qayıdan qadın küçədə naməlum şəxslər tərəfindən döyülüb

23 İyun 2017 02:22

ABŞ HHQ Yəməndə 3 "Əl-Qaidə" terrorçusunu məhv ediblər

23 İyun 2017 02:22

Pirallahıda yük maşını yaşlı qadını vurub

23 İyun 2017 02:12

Rusiyaya tərəvəz daşıyan yük maşını qəza törətdi - FOTO/VİDEO

23 İyun 2017 02:08

Bakının məşhur restoranında bıçaqlanma hadisəsi baş verib

23 İyun 2017 02:02

Bakıda ər arvadını xəstəxanalıq etdi

23 İyun 2017 01:59

Dərman alarkən diqqətli olun!

23 İyun 2017 01:57

Bakıda DƏHŞƏTLİ QƏTL: Məşuqəsini ürəyindən vurdu, ana və oğulu da bıçaqladı

23 İyun 2017 01:38

Şimali Koreya ballistik raket üçün yeni mühərriki test edib

23 İyun 2017 01:38

Daşkəsəndə marixuana satmaq istəyən müəllim saxlanıldı

23 İyun 2017 01:34

Qaraçuxurda gənc qız bıçaqlanıb

23 İyun 2017 01:32

Sidney çimərliyində ev - FOTO

23 İyun 2017 01:32

Azərbaycanın Çexiyadakı Səfirliyində İslam Əməkdaşlıq Təşkilatının Praqa Qrupunun toplantısı və iftar yeməyi təşkil edilib (FOTO)

23 İyun 2017 01:29

Yük maşını avtobusa çırpıldı: 21 ölü, 22 yaralı

23 İyun 2017 01:24

Bakıda məşuqəsini qətlə yetirən şəxs daha iki nəfəri ağır yaralayıb

23 İyun 2017 01:22

BMT Dağlıq Qarabağ münaqişəsi zonasında atəşkəs rejiminin pozulmasından narahatdır

23 İyun 2017 01:08

"İqtisadiyyatda kasıb insanları görmək istəmirəm" -

23 İyun 2017 01:07

KXDR qitələrarası raket mühərrikini sınaqdan keçirdi

23 İyun 2017 00:59

Azərbaycanda İLK DƏFƏ: Görmə əngəlli insanlarla gözlərini paylaşırlar

23 İyun 2017 00:53

Bakıda 4 otaqlı evdə yanğın olub

23 İyun 2017 00:50

Daşkəsəndə qarmon müəllimi marixuana satarkən saxlanılıb

23 İyun 2017 00:47

Suraxanıda ev yandı

23 İyun 2017 00:44

Bakıda 4 otaqlı evdə yanğın baş verib

23 İyun 2017 00:44

Məhkumlara pizza qonaqlığı

23 İyun 2017 00:33