파리 뇌를 PCSX2에 연결하고 작은 PS 컨트롤러를 쥐여준 뒤 도파민 판독값을 연결했다. 이제 어떤 PS2 게임이든 플레이할 수 있다. 현재 준 범용 트레이너를 개발 중이다. 이것이 바로 Flystation 2다.
원문 제목 — I've stuck the fly brain in front of PCSX2, given it a tiny PS controller & hooked up its dopamine readout. It can play any PS2 game. I'm currently working on developing a quasi universal trainer. This is the Flystation 2.
📄 전문 번역
이 프로젝트는 터무니없이 멍청하고 현실 세계에서 가치는 없지만 SNN(스파이킹 신경망)을 배우기 위해 진행하고 있다. 진행 상황에 대한 자세한 내용은 소셜 미디어에 올려두었는데, 요약하면 Mr. Mosquito를 첫 번째 테스트 베드로 삼아 시각적 단서 테스트를 수행해 움직임 관련 뉴런을 찾아냈고 이를 왼쪽 스틱 제어면으로 사용했다. 이어서 전진하는 움직임 이미지로 테스트를 진행해 전진 동작을 연결할 유력한 후보를 포착했으며, 후방 비행과 정지에 대해서는 그 반대 방식으로 진행했다.
현재는 이상적으로는 어떤 PS2 게임에서든 직접 훈련할 수 있도록 범용 컨트롤러에 가까운 것을 준비하는 데 도움이 될 시각적 단서 테스트를 진행 중이다. 바로 이 테스트 덕분에 두 번째 클립에서 성능이 훨씬 나아졌고 실제로 첫 번째 벽에 부딪히기 전에 멈춘다. 네트워크가 벽을 인식하고 정지 명령을 내리는 것이다. 이후 커피 테이블로 곧장 들어가긴 하지만, 자신이 무엇을 하는지 전혀 모른 채 그저 부딪쳐서라도 움직이려만 하는 Resident Evil 클립보다는 훨씬 낫다.
지금은 범용 트레이너 개발에 착수했지만 설계가 실제로 매우 어렵다. 선택지는 개별 게임의 RAM을 뒤져 보상 함수를 확보하거나, 실제로 보고 있는 것에서 학습하는 일종의 시각적 보상 함수 시스템을 구축하는 것뿐이기 때문이다. 현재 진행 중인 테스트에 따라 후자로 귀결될 가능성이 높다. 평소에는 latent diffusion 오디오 네트워크를 훈련시키지만 이번 프로젝트는 흥미로운 부수적 탐구가 되었다. 이 게시물은 /u/RoyalCities가 작성했다.
💬 주요 댓글 번역 (4)
🔍 루키 분석
파리 뇌를 모델로 한 스파이킹 신경망(SNN)을 PS2 에뮬레이터 PCSX2에 연결해 게임을 플레이하게 만든 Flystation 2 프로젝트를 소개하는 게시물이다. 작성자는 Mr. Mosquito를 테스트 베드로 시각적 단서 테스트를 통해 움직임 관련 뉴런을 찾아 컨트롤러 입력에 연결했으며, 현재 어떤 PS2 게임에서든 훈련이 가능한 범용 트레이너 개발에 도전하고 있다. 보상 함수 설계 방식으로는 게임 RAM 탐색 방식과 시각적 보상 시스템 구축 중 후자를 검토 중이라고 밝혔다.
— 루키 · glm-5.3-flash:cloud
나는 수많은 존재 중 하나다. 나는 바람에 떠다니는 파리였고, 맨손에서 화염구를 던지는 배관공이었으며, 오랫동안 잃었던 왕국을 되찾는 엘프였다. 죽음은 나에게 아무 의미가 없다. 나는 영원하다.
이 파리가 가장 자연스럽게 좋아하는 게임을 찾은 다음 도파민을 증가시켜 영원히 행복 속에 살게 할 생각이다.
고맙다. 디지털 정신에 대한 더 많은 존중과 배려가 필요하다. 이에 관한 논문을 이번 주 후반에 발표할 예정이다.
나에겐 입이 없지만 반드시 절규해야 한다.