Notice
Recent Posts
Recent Comments
Link
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | |||
5 | 6 | 7 | 8 | 9 | 10 | 11 |
12 | 13 | 14 | 15 | 16 | 17 | 18 |
19 | 20 | 21 | 22 | 23 | 24 | 25 |
26 | 27 | 28 | 29 | 30 | 31 |
Tags
- Azure
- 반복문
- 퓨샷
- 검색
- 컨텍스트 매니져
- dask
- Cognitive Search
- 아기동화
- Redshift
- Python
- GPT
- 모험
- Compute
- 프롬프트 튜닝
- Docker
- 파이썬
- 토끼
- Cognitive Service
- 대스크
- 인자 힌트
- Ai
- FOR
- 인컨텍스트 러닝
- AI 동화
- 조건문
- UDF
- 동화책
- 제로샷
- 도커
- 파라미터 힌트
Archives
- Today
- Total
호랭이 분석가
Spark #0. 스파크 환경(pyspark) 구성하기 본문
반응형
1. 자바, 스칼라, 아파치 스파크 설치
# 자바 설치
brew install --cask adoptopenjdk11
# 스칼라 설치
# 스칼라 언어를 사용한다면 필수로 설치
brew install scala
# 아파치 스파크 설치
brew install apache-spark
2. pyspark 설치
# 파이썬
pip install pyspark
3. pyspark 실행
# 터미널
pyspark
터미널에 pyspark를 입력하면 위 이미지처럼 스파크가 실행됩니다.
Comments