[2023-3] 습관의 알고리즘

러셀 폴드렉 - 습관의 알고리즘

습관의 알고리즘 

 

신경망 과학자가 생각 습관이란?

책의 저자는 스탠포드 대학의 교수이다.

https://profiles.stanford.edu/russell-poldrack

Russell Poldrack's Profile | Stanford Profiles

뇌 과학을 주로 다루며 우리가 어떤 식으로 상황을 판단하고 행동을 하는지 실험을 통해 입증한다.

단순한 습관 이라는 주제의 자기 개발 서적이 아님에 정말 유익한 책이다.

실험을 통한 근거를 기반으로 설명을 하며 비판과 논리를 입증하는데 이해가 쏙쏙된다. 

1)

또한 최근 강화학습을 학습 중인데 이 책에서 자주 언급되어 반가웠다. 

짧게 언급하자면 Model-based는 우리가 경험한 상황을 기반으로 행동을 하고

Model-free는 경험이 아닌 주어진 상황의 정보로만 행동을 하는 것이다. 

강화학습 Replay Buffer = 실제 경험

 

2)

우리의 신체와 비슷한 생쥐를 통해 실험을 자주하는 내용이 사례에 있다.

생쥐에게 도파민 억제 약물 / 증폭 약물 등 헤로인, 코카인을 통해 중독에 대해 설명을 한다.

 우리가 중독에 빠지는 이유는 약물에 대한 우리의 의지가 약한 것이 아니라 반대로 약물을 차지하려는

목표 달성에 대한 의지가 더 강한 것이 약물을 끊기 어려운 이유라고 한다.

이 실험을 위해서 생쥐에게 전기 충격을 가하면서 중독성 약물을 받는 트리거인 버튼을 누르게하는 행위를 관찰하는데 약물이 나오지 않음에도 생쥐는 목표 달성을 위해 전기 충격을 버티는 모습이 실험에 있다.

https://www.jneurosci.org/content/38/35/7649

Reward Learning over Weeks Versus Minutes Increases the Neural Representation of Value in the Human Brain