강의

멘토링

커뮤니티

인프런 커뮤니티 질문&답변

nathan님의 프로필 이미지
nathan

작성한 질문수

스파크 머신러닝 완벽 가이드 - Part 1

databricks에 폴더 생성 및 신규 데이터 업로드

작성

·

355

0

databricks에 new_folder_1를 만들고 그 아래 new_folder_2 라는 하위 폴더를 만들어서 그 안에 데이터를 업로드하고 싶습니다. 즉, 파일 경로가 최종적으로 

new_df= spark.read.csv('/FileStore/new_folder_1/new_folder_2/file_name.csv', header=True, inferSchema=True)

 

가 되게 해서 import 하고 싶은데, 혹시 방법을 안내해주실 수 있으실까요? 

 

답변 1

1

권 철민님의 프로필 이미지
권 철민
지식공유자

안녕하십니까, 

spark dbfs에 파일 디렉토리를 새롭게 만들 수는 없습니다만, upload 시 단일 파일이 아니라 디렉토리를 만들어서 그안에 파일을 넣고 upload하시면 됩니다. 

가령 new_folder1/new_folder2/filename.csv 와 같이 윈도우즈에서 디렉토리구조를 만든 후 이 디렉토리를 upload하면 됩니다. 

감사합니다. 

nathan님의 프로필 이미지
nathan
질문자

감사합니다 :)

nathan님의 프로필 이미지
nathan

작성한 질문수

질문하기