pizzaplanet

이번엔 혼자서 무리 없이 쓸만한 정도의 Zeppelin의 환경설정과 실행에 대해 포스팅한다. conf/shiro.ini - 보안관리 Apache Shiro authentication for Apache Zeppelin Shiro는 인증, 권한 부여, 암호화 및 세션관리를 수행하는 Java 보안 프레임 워크다. Zeppelin에서는 Shiro를 이용하여 보안을 관리하고 있다. Shiro를 이용하여 보안을 관리해보자. 1. Shiro 활성화 $ cp conf/shiro.ini.template conf/shiro.ini 2. Shiro 편집을 통한 보안 설정 $ vim conf/shiro.ini {id} = {password}, {role} 포맷으로 Zeppelin login 계정을 관리할 수 있다. 자신의 ..

Ubuntu 18.04에 Apache Zeppelin을 설치 해보자 install 전에 zeppelin의 requirements를 확인하자 Name Value Oracle JDK 1.7 (set JAVA_HOME) OS Mac OSX Ubuntu 14.X CentOS 6.X Windows 7 Pro SP1 사실 OS는 대부분의 User가 신경 쓰지 않아도 될 부분이고 신경 써야 할 부분은 JDK다. 공식적으로는 Oracle JDK를 권하고 있지만 라이센스가 걸린다면 OpenJDK를 사용하셔도 무방하다. 경험상으로 동작상에는 아무런 에러가 나지 않았다.(성능 비교는 해보지 않았다) 설치를 시작해보자 1. JDK 설치 Oracle JDK는 라이센스 때문에 걸쩍지근하므로 OpenJDK를 설치한다 $ apt-g..

ETL(Extraction, Transformation, Loading) ETL이란 데이터 웨어하우스(DW, Data Warehouse) 구축 시 데이터를 운영 시스템에서 추출하여 가공(변환, 정제)한 후 데이터 웨어하우스에 적재하는 모든 과정을 말한다. 일반적으로 발생하는 데이터 변환에는 필터링, 정렬, 집계, 데이터 조인, 데이터 정리, 중복 제거 및 데이터 유효성 검사 등의 다양한 작업이 포함된다. 데이터웨어하우스(DW, Data Warehouse) Raw Data를 통한 분석자료를 제공하여 조직내 의사결정을 지원하는 정보관리 시스템 DW 4가지 특성주제지향(Subject Oriented): data를 categorizing하여 End User에게 이해하기 쉬운 형태 제공통합(Integrated):..