데이터 탐험노트

· Statistics
들어가며통계학과를 졸업했지만 참으로 부끄럽게도 베이즈 통계를 제대로 공부하지 않아 어쩔 수 없이 역량의 부족으로 빈도주의자(frequentist)로 살아왔다. 빈도주의자든, 베이지안이든 어찌 됐든 결과만 나오면 어떻게든 괜찮다고 생각했는데 인과추론을 공부하든, 머신러닝을 공부하든 알음알음 베이지안 개념이 나오고, 그걸 대충 넘어가야만 하는 일들이 반복되면서 이대로는 안 되겠다는 생각이 들었다.   1분기에는 베이즈 통계학을 공부하며, (매우 얕고도 얕은) 통계 저변을 조금이나마 확장해보려고 한다. First Course in Bayesian Statistical Methods 라는 베이즈 통계학 기초 책을 보며 공부 중인데, 수식을 최소화하여 나만의 언어로 풀어서 글쓰기를 해 보는 것이 목표다!  통계학..
들어가며 요즘 내가 가장 열심히 하는 게임을 말하자면, 뭐니 뭐니 해도 피크민 블룸(Pikmin Bloom)이다. 간단히 게임에 대해 소개하자면, 나이앤틱(Niantic)과 닌텐도가 협업해서 만든 위치 기반 모바일 게임이다. 나이앤틱의 전작인 포켓몬고와 비슷하게 "걷기"에 게이미피케이션을 입힌 그런 게임이라 할 수 있는데, 유저는 걷기라는 행위를 통해 피크민을 수집하고, 피크민과 함께 꽃을 심으며 여러 가지 성장에 필요한 혜택을 얻을 수 있다. 이렇게 시간이 지나면 피크민과의 친밀도가 높아지면서 다양한 장식을 가진 피크민을 얻으며 수집의 즐거움을 누릴 수 있다. 처음에는 이 게임을 반신반의하며 시작했다. 포켓몬 고가 출시되었을 때 게임을 해 본 경험이 있는데, 약 1,000 시간의 포켓몬 플레이 경..
· Statistics
불과 얼마 전까지만 해도 regression을 가볍게 생각하고 있었습니다. R 콘솔창에 lm(data = data, y ~ X+Z) 만 입력해도 모델링 결과는 쉽게 얻을 수 있었기 때문이지요. 그러나 최근 선형대수학, 회귀분석, 인과분석을 공부하면서 '굉장히 얕은 수준만을 맛보고 안다고 착각하고 있었구나' 하고 깨닫는 순간이 있었고, 기초를 다진다는 느낌으로 관련 내용을 정리해보는 시간을 갖기로 마음먹었습니다. 그리고 이를 위한 첫번째 스텝으로 선형대수에서 꼭 알아야 하는 기초 개념 (자세한 내용은 맨 하단 참고링크를 따라가시는 것을 추천드려요! 😃) 기초 개념이 어떻게 회귀분석과 연결되는지 를 나름의 견해를 담아 정리해보았습니다. linearly independent 해당 개념은 선형대수학 책을 펼치면..
· Statistics
들어가며 요즘 부쩍 데이터 분석가들 사이에서 인과추론이 핫하다는 느낌을 받는다. 내가 공부를 하고 있기 때문에 더 눈에 잘 보이는 것일 수 있지 않을까 싶기도 하지만.. 처음으로 인과추론 공부를 시작한 2022년과 비교해 보자면, 그때에 비해 인과추론을 학습하는 글들이 많이 늘어난 것을 체감한다.   인과추론이란 어떤 처치가 이루어졌을 때, 그것이 효과를 만들어냈는지, 효과를 만들어냈다면 어느 정도의 영향력이 있었는지를 분석을 통해 추정하는 방법론이다. 만일 AB 테스트 등 실험 설계가 가능한 환경에 있다면, 실험을 통해 처치의 효과를 파악할 수 있겠지만(실험설계를 잘 해내야 하는 상황은 차치하고..), 만일 실험이 불가능한 환경에 속해 있다면 어떻게든 동아줄이라도 붙잡는 마음으로 다른 방법을 찾아내야 ..
· Statistics
배경 최근 매칭을 업무에 오랜만에 써보는 일이 있었다. 오랜만에 써봐서 잊고 있었는데 매칭은 은근 분석에 도움이 되어, 가끔씩이라도 쓰게 되는 일이 있는 것 같다는 생각이 들었다. 향후 다시 매칭을 써먹을 나를 위해, 그리고 매칭을 적용해보고 싶은 사람들을 위해 정리할 겸 글을 남기게 되었다. 글은 매칭의 개념, 매칭의 한계, 매칭 방법에 대한 간단한 소개, 매칭에 사용하는 코드(R 위주) 순으로 진행하려 한다.     매칭의 개념 및 목적 매칭은 간단히 말하면 Treatment 그룹(처치군 ; 처치를 받은 대상)과 Control 그룹(대조군 ; 처치를 받지 않은 대상) 간 특성이 비슷한 사람을 짝지어주는 것을 의미한다. 이러한 짝짓기가 필요한 이유는 Selection Bias(선택 편향) 때문인데, 선..
오리duck
데이터 탐험 노트