MineRL env.reset 실패 분석: stale PID 파일과 PID 재사용
MineRL env.reset() 실패를 stale PID 파일 정리로 해결한 과정을 정리했다.
ML
Gemma 4B LoRA 파인튜닝: 카카오톡 말투 학습
Gemma 4B LoRA 학습을 구형 GPU 두 장에 분산하고 데이터 정제와 평가 결과를 확인했다.
PPO 강화학습으로 피카츄 배구 학습시키기
피카츄 배구를 PPO로 학습시켰는데 승률이 28%에서 멈춰 보상 설계를 다시 봤다.
초소형 LLM 벤치마크: SmolLM2 135M부터 비교
SmolLM2 135M과 Llama 3.2 3B를 실행해 기본 응답 품질을 확인한 기록이다.