pizzaplanet

데이터 전처리때 pyspark를 잠깐 써본적이 있었고 속도에 환희를 질렀었다.pyspark를 좀 더 제대로 배워보고자 Learning PySpark를 구매하였고 배우기 위해 실습환경 구축이 필요했다.원하는 실습환경은 원격으로 서버의 Jupyter로 접속하고 pyspark로 실행되는 것. 자 해보자. Server OS: Ubuntu 18.04 JAVA설치, $JAVA_HOME 셋팅, Anaconda or (Python + Jupyter) 설치는 생략한다. Jupyter 외부접속시 사용할 패스워드 생성 1$ pythoncs 여기서 암호화 된 비밀번호를 복사해놓자.123456from notebook.auth import passwdpasswd() Enter password: [pw입력]Verify passwo..