Beste Lisa Verbunt ,
Wat leuk dat jullie zo'n originele onderzoeksvraag hebben! Dat is eens iets nieuws dat ik nog niet eerder heb gezien.
Ik vind het terrein dat jullie gaan onderzoeken super interessant. Ik denk vooral dat het waardevol is (na de onderzoeksvraag) duidelijk te hebben afgebakend wat je precies gaat onderzoeken, omdat zowel het veld van dromen, behavioral sciences, en reinforcement learning erg breed zijn.
Je zou kunnen inzoomen op experience replay [https://arxiv.org/abs/1712.01275]
Tijdens experience replay worden ervaringen opnieuw afgespeeld tijdens het leren, wat neurowetenschappers ook zien bij slaap.
"In hoeverre vervullen dromen een vergelijkbare functie als experience replay in reinforcement learning bij het verbeteren van toekomstig gedrag?"
Het is ook mogelijk om in te gaan op slaap in zijn geheel als verwerkingsperiode, niet enkel op bewust dromen. Ook dit kan behulpzaam zijn om in de onderzoeksvraag al afgebakend te hebben.
Hebben jullie al een set deelvragen? Het lijkt me bijvoorbeeld goed om een structuur te hebben die een beetje lijkt op de volgende:
- Hoe werkt reinforcement learning?
- Welke rol speelt experience replay binnen reinforcement learning?
- Wat weten over de functie van dromen volgens neurowetenschappen?
- Welke overeenkomsten bestaan tussen experience replay en dromen?
- Welke factoren karakteriseren het verschil tussen experience replay en dromen?
Het lijkt me super mooi als jullie uit de wetenschappelijke literatuur kunnen kijken naar studies met bijvoorbeeld fMRI of EEG beelden tijdens dromen. Zo kan je het neurowetenschappelijke deel linken aan echte hersenactiviteit en til je het onderzoek een beetje uit het zweverige domein, waar men wel eens verloren in raakt bij psychologisch droomonderzoek.
Richard Sutton en Andrew Barto hebben reinforcement learning ontwikkeld en hebben hierover een boek geschreven. Hierin zit een hoofdstuk genaamd Neuroscience. Het boek heet "Reinforcement Learning: An Introduction". Zo krijg je direct het technische perspectief van de auteurs en hun mening over de neurowetenschappelijke koppeling. [https://web.stanford.edu/class/psych209/Readings/SuttonBartoIPRLBook2ndEd.pdf]
David Silver van UCL heeft trouwens videolectures op youtube over reinforcement learning die ook waardevol zijn.
Matthew Walker is een belangrijke onderzoeker over dromen en heeft hier ook een boek over geschreven, maar heeft ook wetenschappelijke publicaties. Het boek heet "Why We Sleep" en zijn publicaties zijn vaak te vinden in samenwerking met Stickgold. Hierin kan je specifiek zoeken op Sleep replay. Voor zover ik begrijp gebeurt deze replay voornamelijk in de hippocampus en heet hierom ook hippocampal replay. Tijdens de slaap vuurt dezelfde reeks hippocampusneuronen als tijdens de daadwerkelijke ervaring.
[https://pubmed.ncbi.nlm.nih.gov/?term=hippocampal+replay]
Laat me graag weten als je er niet helemaal uitkomt met bronnen die niet beschikbaar zijn, dan kan ik via het TU Delft domein (of Erasmus MC domein) nog helpen.
Aarzel niet als je nog ergens een vraag over hebt!
Tadjiro Velzel
Lisa Verbunt said:
Hoi, voor ons PWS willen wij onderzoeken hoeverre reinforcement learning en dromen op elkaar lijken met als onderzoeksvraag: Welke overeenkomsten en verschillen bestaan er tussen de manier waarop dromen en reinforcement learning eerdere ervaringen verwerken om toekomstig gedrag te beïnvloeden?
Wat vinden jullie van dit als onderzoeksvraag? Welke bronnen zouden handig zijn om dit te onderzoeken? En voor het reinforcement learning specifiek zijn handig om dit echt te kunnen onderzoeken en/of dit goed te vergelijken met dromen
