파케이파일로 데이터프레임이 저장되면, 스키마 정보를 유지한 채로 데이터를 저장할 수 있다.
위의 코드 예시를 보면, 데이터프레임을 파케이로 저장한 후 => 해당 파케이파일을 읽어들이면 스키마를 유지하고 있어 TempVIew를 생성할 수 있다.
'소프트웨어-이야기 > 데이터 저장소 + 시각화 ' 카테고리의 다른 글
| [Spark] 여러개의 로그 파일 한번에 읽어오기 (0) | 2017.02.21 |
|---|---|
| [Spark] S3에 파일이 존재하는지 확인하기 (0) | 2017.02.21 |
| [couchbase]카우치 베이스에서 테이블이란? (0) | 2016.08.21 |
| [카우치베이스]Insert와 Select의 시간차 (2) | 2016.05.31 |
| [SPARK]SQLContext / 데이터 프레임에 SQL 날리기 ! (0) | 2016.03.01 |
