현업에서는 scala-spark를 사용하나요? py-spark를 사용하나요?
562
38 asked
현업에서는 scala-spark를 사용하나요? py-spark를 사용하나요?
Answer 1
0
안녕하십니까,
예전에 기존 구축된 시스템은 scala를 많이 사용했는데, 이제는 py-spark으로 많이 전환하고 있으며, 새로 구축하는 경우는 대부분 py-spark을 사용합니다.
요즘은 scala는 신규로는 잘 만들지 않고 예전 시스템 유지 보수에만 활용되는 경우가 대부분인것 같습니다.
감사합니다.
Spark 3.5에서 pandas의 NaN이 NULL로 바뀌지 않을 때
0
44
1
강사님 안녕하세요 ㅎdatabricks환경에 대한 설
0
121
3
데이터 브릭스 이슈
0
158
2
데이터 브릭스 가입
0
139
2
pyspark local 설치
0
153
2
community edition 가입 문의
0
169
2
데이터 로드 및 로딩 된 파일 데이터 목록 조회 방
0
222
2
클러스터 버전 설정
0
185
3
instacart market basket analysis
0
238
3
spark 추가 학습 관련 질문
0
281
2
MLOps 관련 MLFLow 및 Databricks 모델 서빙
0
441
1
train파일 업로드 중에 해당 경로가 없다고 뜹니다
0
402
2
강의가 재생되지 않음
0
306
2
후속 강의 계획 질문드립니다.
0
399
1
spark_xgboost_lightgbm 강의부분 관련
0
499
1
spark환경에서 데이터 수정에 관하여 질문이 있습니다.
1
371
1
Spark를 이용하여 binary file -> parquet, csv 변환 가능여부
0
610
1
SPARK 2 강의 오픈
0
527
1
Spark ML 모델 서빙
0
607
1
mac os ) zip 파일 dataframe 오류
0
711
1
ModuleNotFoundError : No module named 'mmlspark' - 20230218
0
664
1
TrainValidationSplit과 randomSplit 사용 질문
0
440
1
cluster 생성 Database runtime version 질문
0
299
1
Pandas vs Spark: 비용, 처리시간 비교
0
1273
1