본문 바로가기
728x90
반응형

Tool & Setting14

[Spark] Docker로 jupyter에서 spark 환경 만들기 도커확인 docker --version 참고로, 윈도우에서 docker Desktop을 이용했습니다. 주피터 이미지 가져오기 주피터의 이미지는 라이브러리에 따라서 여러개 있다. >> 도커이미지 라인업 확인 jupyter/base-notebook jupyter/minimal-notebook jupyter/r-notebook jupyter/scipy-notebook jupyter/tensorflow-notebook jupyter/datascience-notebook jupyter/pyspark-notebook jupyter/all-spark-notebook 나는 혹시 몰라서 all-spark-notebook 이미지를 사용하기로 했다 docker run -p 8888:8888 -e JUPYTER_ENABLE_.. 2021. 7. 26.
주피터 노트북 (Jupyter Notebook) 아나콘다 없이 설치 주피터란? python기반의 데이터분석에 필요한 오픈소스를 모아둔 플랫폼을 웹에서 사용할 수 있는 웹서비스 사실 오픈소스를 모아둔 개발플랫폼을 사용하려면 아나콘다를 설치한다. 아나콘다가 가상환경관리자와 패키지관리자까지 제공해주는 가상 환경을 만들어서 사용할 수 있지만, 나는 혹오옥시나 모를 경로충돌 때문에 아나콘다 없이 그냥 주피터 라이브러리를 설치했다. 주피터를 사용하는 목적이 dataframe, numpy 등 라이브러리를 쉽게 사용하고, 그 결과를 라인별로 확인하는 것이기 때문이다. 설치방법 설치방법은 그냥 pip으로 패키지를 설치하는 것과 같다. 파이썬실행경로에 들어가서 pip3 install jupyter를 하면 된다. 실행방법 실행방법도 cmd에서 진행할 수 있다. 파이썬실행경로에 들어가서 ju.. 2021. 7. 7.
[Setting] [VScode] git 터미널 연결하기 (기본 터미널 변경) 1. 터미널에서 Select Default Profile 선택 2. 기본터미널을 GIT bash로 변경 (원래 기존 디폴트는 powershell) 3. 터미널 변경 확인 2021. 6. 24.
[Tool] Typora: 마크다운(markdown)편집기 typora(타이포라) 무료 마크다운 편집기 프로그램 마크다운 문법에 맞춰 작성하면 바로 서식이 적용되서 표시할 수 있음 설치 https://typora.io/ Typora — a markdown editor, markdown reader. Readable & Writable Typora gives you a seamless experience as both a reader and a writer. It removes the preview window, mode switcher, syntax symbols of markdown source code, and all other unnecessary distractions. Instead, it provides a real live preview typora.. 2021. 6. 24.
728x90
반응형