초간단 무료 spark 개발 환경 구축 ( 구글 colab + spark 활용 )

금일은 spark 개발환경을 구축해보겠다. 매번 개인 PC에서 Spark개발 환경을 구성했다. 그때마다 환경 변수 잡는게 너무 귀찮았다. 그리고 꼭 한번에 되지 않는다. ( windows 어려워.. ) 심지어 spark 개발자를 키우기도 해야하는 입장에서 개발환경을 잡는것은 참으로 귀찮은 일이다. 그러다가 갑자기 구글이 제공하는 colab에서 구축할 수있지 않을까 라는 생각을 했다. colab이란 구글이 제공해주는 python개발 환경이다. 구글 아이디만 있으면, python 개발 환경을 무료로 사용할 수 있다. 분석팀 대리가 알려준 환경인데, 꽤 쓸만하다. 그럼 한번 초간단 spark 개발화경을 구축해보겠다. 0. colab를 시작한다. python 개발자라면 알것이다. 딱 jupyter noteboo..

2021.07.22