Google DeepMind gives computer ‘dreams’ to improve learning

Google DeepMind gives computer ‘dreams’ to improve learning
15:34 23 Noyabr 2016
Ölkə mətbuatı
A- A+

Androids may not, as science fiction writer Philip Dick once posited, dream of electric sheep. But the newest artificial intelligence system from Google’s DeepMind division does indeed dream, metaphorically at least, about finding apples in a maze.
 
Researchers at DeepMind wrote in a paper published online that they had achieved a leap in the speed and performance of a machine learning system. It was accomplished by, among other things, imbuing technology with attributes that function in a way similar to how animals are thought to dream.
 
The paper explains how DeepMind’s new system -- named Unsupervised Reinforcement and Auxiliary Learning agent, or Unreal -- learned to master a three-dimensional maze game called Labyrinth 10 times faster than the existing best AI software. It can now play the game at 87 percent the performance of expert human players, the DeepMind researchers said.
 
"Our agent is far quicker to train, and requires a lot less experience from the world to train, making it much more data efficient," DeepMind researchers Max Jaderberg and Volodymyr Mnih jointly wrote via e-mail. They said Unreal would allow DeepMind’s researchers to experiment with new ideas much faster because of the reduced time it takes to train the system. DeepMind has already seen its AI products achieve highly respected results teaching itself to play video games, notably the retro Atari title Breakout.
 
Labyrinth is a game environment that DeepMind developed, loosely based on the design style used by the popular video game series Quake. It involves a machine having to navigate routes through a maze, scoring points by collecting apples.
 
This style of game is an important area for artificial intelligence research because the chance to score points in the game, and thus reinforce "positive" behaviors, occurs less frequently than in some other games. Additionally, the software has only partial knowledge of the maze’s layout at any one time.
 
One way the researchers achieved their results was by having Unreal replay its own past attempts at the game, focusing especially on situations in which it had scored points before. The researchers equated this in their paper to the way "animals dream about positively or negatively rewarding events more frequently."
 
The researchers also helped the system learn faster by asking it to maximize several different criteria at once, not simply its overall score in the game. One of these criterion had to do with how much it could make its visual environment change by performing various actions. "The emphasis is on learning how your actions affect what you will see," Jaderberg and Mnih said. They said this was also similar to the way newborn babies learn to control their environment to gain rewards -- like increased exposure to visual stimuli, such as a shiny or colorful object, they find pleasurable or interesting.
 
Jaderberg and Mnih, who are among seven scientists who worked on the paper, said it was "too early to talk about real-world applications" of Unreal or similar systems.
 
Mastering games, from Chess to trivia contests like the U.S. gameshow Jeopardy!, have long served as important milestones in artificial intelligence research. DeepMind achieved what is considered a major breakthrough in the field earlier this year when its AlphaGo software beat one of the world’s reigning champions in the ancient strategy game Go.
 
Earlier this month DeepMind announced the creation of an interface that will open Blizzard Entertainment Inc’s science fiction video game Starcraft II to machine learning software. Starcraft is considered one of the next milestones for AI researchers to conquer because many aspects of the game approximate "the messiness of the real world," according to DeepMind researcher Oriol Vinyals. Unreal is expected to help DeepMind master the mechanics of that game.
 
DeepMind’s Unreal system also mastered 57 vintage Atari games, such as Breakout, much faster -- and achieved higher scores -- than the company’s existing software. The researchers said Unreal could play these games on average 880 percent better than top human players, compared to 853 percent for DeepMind’s older AI agent.
 
But on the most complex Atari games, such as Montezuma’s Revenge, Jaderberg and Mnih said the new system made bigger leaps in performance. On this game, they said, the prior AI system scored zero points, while Unreal achieved 3,000 -- greater than 50 percent of an expert human’s best effort.


RƏYLƏR

OXŞAR XƏBƏRLƏR

BU KATEQORİYADAN DİGƏR XƏBƏRLƏR

Ölkə mətbuatında bugün

Məşhur aktrisa yarıçılpaq fotolarını paylaşdı - FOTO

29 Aprel 2017 23:32

Gəncədə 22 yaşlı gənc bıçaqlanıb

29 Aprel 2017 23:32

İŞİD silahlıları Taliban rəhbərlərindən birini öldürüblər

29 Aprel 2017 23:29

Gizlətdiyi sevgilisi ilə əl-ələ görüntüləndi - FOTO

29 Aprel 2017 23:27

Lincoln-dan yeni Navigator - FOTO

29 Aprel 2017 23:27

Göyərtəsində 39 sərnişin olan təyyarə qəzaya uğradı

29 Aprel 2017 23:23

Hind qızları palçığa batan avtobusu dartıb çıxardılar

29 Aprel 2017 23:22

Erməni Kardaşyan Meksika kurortunda - FOTO

29 Aprel 2017 23:22

Namazın vacib olmasının sirri

29 Aprel 2017 23:22

Shamkir Chess-2017: 8-ci tur bitdi

29 Aprel 2017 23:22

Acınacaqlı durumda idilər, sonra isə bu yolla varlandılar

29 Aprel 2017 23:22

iPhone-nu sıradan çıxarmağın yeni üsulu aşkarlanıb - VİDEO

29 Aprel 2017 23:17

Havada baş verənlər: Stüardessanın şok etirafları – FOTO

29 Aprel 2017 23:17

Sərnişin təyyarəsi radarlardan itdi

29 Aprel 2017 23:14

Evliliyin möhkəm olması üçün nəzərə alınmalı şərtlər

29 Aprel 2017 23:12

"Bavariya" Bundesliqanın qalibi oldu

29 Aprel 2017 23:06

Kubada təyyarə yoxa çıxdı: 39 nəfər itkin düşüb

29 Aprel 2017 23:05

"Qadın gözəl qoxumalıdır" - Adnan Oktarın "gediciyi" - FOTO

29 Aprel 2017 23:05

"Hamı heyrətlənəcək" - Aygün Kazımova

29 Aprel 2017 23:05

Ərə getmək çətin deyil…

29 Aprel 2017 23:05

İŞİD "Taliban" liderini öldürdü

29 Aprel 2017 23:03

Bakıda oteldə qalan turist pesonala görün nələr etdi - FOTOLAR

29 Aprel 2017 23:03

Milyonçu olmaq üçün neçə il lazımdır?

29 Aprel 2017 22:57

Kubada göyərtəsində 39 sərnişinin olduğu təyyarə radardan itib

29 Aprel 2017 22:57

İnsanın kökəlməyinə səbəb olan 10 vərdiş

29 Aprel 2017 22:52

Sərnişin təyyarəsi radarlardan itdi

29 Aprel 2017 22:51

Kubada sərnişin təyyarəsi radarlardan itib

29 Aprel 2017 22:50

“Bavariya” çempion! - YENİLƏNİR

29 Aprel 2017 22:47

Dişəti şişməsinə qarşı nə etmək olar?

29 Aprel 2017 22:47

Çempion səfərdə sevindi - YENİLƏNİR

29 Aprel 2017 22:47

Cəlilabadda 11 yaşlı yeniyetməni avtomobil vurub

29 Aprel 2017 22:47

İŞİD “Taliban” başçılarından birini öldürdü

29 Aprel 2017 22:44

"Bavariya" ardıcıl 5-ci dəfə Bundesliqanın qalibi oldu

29 Aprel 2017 22:43

Professor-müəllim heyətinin seçilmə şərtləri DƏYİŞİR

29 Aprel 2017 22:42

Həddindən çox tərləmənin 7 səbəbi

29 Aprel 2017 22:42

Evlilik proqramları qadağan edildi

29 Aprel 2017 22:39

Ürəyi qorumaq istəyənlər oxusun - yalnız 3 ŞƏRT

29 Aprel 2017 22:37

Futbol dünyasının ən erotik qadınları - FOTO

29 Aprel 2017 22:32

İŞİD terrorçuları Əfqanıstanda "Taliban" liderlərindən birini öldürüb

29 Aprel 2017 22:32

Professor-müəllimlərin vəzifələrə seçilməsi üçün şərtlər

29 Aprel 2017 22:28

Ən güclü Jeep - FOTO

29 Aprel 2017 22:27

Su festivalı Qusarda

29 Aprel 2017 22:23

Fotoda gözəl çıxmaq istəyirsinizsə, bunları edin

29 Aprel 2017 22:23

"Həmin həkim deyilən xanım məni təhqir edir, qadına yaraşmayan söyüşlər söyür" - Zeynəb Sadıqova - FOTO

29 Aprel 2017 22:22

Qəzetdən nə düzəltmək olar...

29 Aprel 2017 22:22

NATO-nun baş katibi: Türkiyə NATO-nun vacib üzvüdür

29 Aprel 2017 22:22

Məşhur aktyor intihar etdi - FOTO

29 Aprel 2017 22:17

"Bozbash pictures"in "Ağsaqqal"ı oğurluq ittihamına cavab verdi: "Sadəcə gülürəm..."

29 Aprel 2017 22:17

Professor-müəllimlərin vəzifələrə seçilməsi üçün yeni şərt nəzərə alınacaq

29 Aprel 2017 22:15

Qəm və qüssəni bu zikrlə aradan aparın

29 Aprel 2017 22:12