inflearn logo
강의

Course

Instructor

Spark Machine Learning Complete Guide - Part 1

Precautions when learning Spark DataFrame API and adding new columns, updating columns, and changing column types with withColumn() - 01

현업에서는 scala-spark를 사용하나요? py-spark를 사용하나요?

506

kjh1997

38 asked

0

현업에서는 scala-spark를 사용하나요? py-spark를 사용하나요?

bigdata 머신러닝 배워볼래요? apache-spark 데이터 엔지니어링

Answer 1

0

dooleyz3525

안녕하십니까,

예전에 기존 구축된 시스템은 scala를 많이 사용했는데, 이제는 py-spark으로 많이 전환하고 있으며, 새로 구축하는 경우는 대부분 py-spark을 사용합니다.

요즘은 scala는 신규로는 잘 만들지 않고 예전 시스템 유지 보수에만 활용되는 경우가 대부분인것 같습니다.

감사합니다.

데이터 브릭스 이슈

0

88

2

데이터 브릭스 가입

0

83

2

pyspark local 설치

0

78

2

community edition 가입 문의

0

88

2

데이터 로드 및 로딩 된 파일 데이터 목록 조회 방

0

159

2

클러스터 버전 설정

0

122

3

instacart market basket analysis

0

169

3

spark 추가 학습 관련 질문

0

221

2

MLOps 관련 MLFLow 및 Databricks 모델 서빙

0

374

1

train파일 업로드 중에 해당 경로가 없다고 뜹니다

0

366

2

강의가 재생되지 않음

0

255

2

후속 강의 계획 질문드립니다.

0

363

1

spark_xgboost_lightgbm 강의부분 관련

0

463

1

spark환경에서 데이터 수정에 관하여 질문이 있습니다.

1

311

1

Spark를 이용하여 binary file -> parquet, csv 변환 가능여부

0

559

1

SPARK 2 강의 오픈

0

488

1

Spark ML 모델 서빙

0

559

1

mac os ) zip 파일 dataframe 오류

0

659

1

ModuleNotFoundError : No module named 'mmlspark' - 20230218

0

616

1

TrainValidationSplit과 randomSplit 사용 질문

0

393

1

cluster 생성 Database runtime version 질문

0

267

1

Pandas vs Spark: 비용, 처리시간 비교

0

1225

1

sparkdl library 설치 관련 질문

0

384

1

선생님 실습환경 질문드립니다.

0

251

1