Jump to content
Forum Kopalni Wiedzy

Recommended Posts

Stany przypominające sen znoszą w sztucznych analogach mózgów niestabilność, będącą skutkiem okresów nieprzerywanego uczenia - donoszą naukowcy z amerykańskiego Los Alamos National Laboratory.

Badamy pulsujące [impulsowe] sieci neuronowe [ang. spiking neural networks], które są systemami uczącymi się w dużej mierze podobnie do żywych mózgów. Jesteśmy zafascynowani perspektywą trenowania neuromorficznego procesora w sposób analogiczny do tego, jak ludzie i inne systemy biologiczne uczą się na podstawie danych ze środowiska w dzieciństwie - opowiada Yijing Watkins.

Watkins i jej zespół odkryli, że symulacje sieciowe stają się niestabilne po okresach nienadzorowanego uczenia. Gdy uciekano się do stanów będących analogami fal doświadczanych przez żywe mózgi w czasie snu, udawało się przywrócić sieci stabilność. Było tak, jakbyśmy zapewniali sieciom neuronowym odpowiednik dobrego nocnego odpoczynku.

Do odkrycia doszło, gdy Amerykanie próbowali opracować sieci neuronowe najbardziej przybliżające się do tego, jak ludzie i inne systemy biologiczne uczą się widzieć. Początkowo grupa zmagała się ze stabilizacją symulatora sieci neuronowych podczas nienadzorowanego treningu słownictwa, który polega m.in. na klasyfikowaniu obiektów bez wcześniejszych przykładów, do których można by je porównywać.

Kwestia tego, jak zapobiec niestabilności układów uczących się, pojawia się dopiero wtedy, gdy próbuje się wykorzystać realistyczne biologicznie procesory neuromorficzne albo zrozumieć kwestie stricte biologiczne - opowiada Garrett Kenyon.

Naukowcy opisują swoją decyzję o wystawieniu sieci neuronowych na oddziaływanie sztucznego analogu snu jako rozwiązanie będące ostatnią deską ratunku. Próbując uzyskać stabilizację, eksperymentowali z różnymi rodzajami szumu. Najlepsze rezultaty dało wykorzystanie szumu gaussowskiego. Zespół podejrzewa, że szum ten naśladuje sygnał wejściowy docierający do neuronów w czasie snu wolnofalowego (SWS, od angielskiego slow wave sleep). Wyniki sugerują, że SWS może po części odpowiadać za upewnienie się, że neurony kory zachowają stabilność i nie będą podlegać halucynacjom.

Kolejnym celem badaczy jest implementacja algorytmu w neuromorficznym chipie Intela Loihi. Mają nadzieję, że gdy pozwoli mu się od czasu do czasu "przespać", będzie stabilnie przetwarzać w czasie rzeczywistym informacje z kamery - krzemowej siatkówki.
Czternastego czerwca Watkins zaprezentuje wyniki swojego zespołu na warsztatach Women in Computer Vision Workshop w Seattle.


« powrót do artykułu

Share this post


Link to post
Share on other sites

Create an account or sign in to comment

You need to be a member in order to leave a comment

Create an account

Sign up for a new account in our community. It's easy!

Register a new account

Sign in

Already have an account? Sign in here.

Sign In Now

  • Similar Content

    • By KopalniaWiedzy.pl
      Tak jak u ssaków czy ptaków, u jaszczurek występują fazy snu przypominające sen wolnofalowy (NREM) oraz sen paradoksalny (REM).
      W 2016 r. francuscy naukowcy badali Pogona vitticeps. Później analizowali wzorce snu innej jaszczurki - teju argentyńskiego (Salvator merianae).
      Biolodzy długo sądzili, że tylko lądowe ssaki i ptaki doświadczają 2 faz snu: NREM i REM. Studium, którego wyniki ukazały się w 2016 r. na łamach Science, pokazało jednak, że P. vitticeps także przechodzi przez 2 unikatowe fazy snu. Wtedy zaczęto dywagować, że fazy snu pochodzą od wspólnego przodka ssaków i gadów, który żył 350 mln lat temu.
      Mając to na uwadze, zespół z CNRS i Université Lyon I postanowił powtórzyć eksperyment sprzed 2 lat najpierw na tym samym gatunku, a później na teju argentyńskim. Dane potwierdziły, że obie jaszczurki przechodzą przez 2 fazy snu, które przypominają sen wolnofalowy i paradoksalny.
      Pogłębione analizy wykazały jednak behawioralne czy fizjologiczne różnice nie tylko między jaszczurkami a ssakami oraz ptakami, ale i między 2 badanymi gatunkami jaszczurek. Okazało się np., że o ile u ludzi podczas snu REM aktywność mózgu i oczu przypomina parametry typowe dla stanu czuwania, o tyle w odpowiadającej mu fazie snu jaszczurek występują wolniejsze ruchy gałek ocznych, a w przypadku teju aktywność mózgu bardzo różni się od tej na jawie.

      « powrót do artykułu
  • Recently Browsing   0 members

    No registered users viewing this page.

×
×
  • Create New...