반응형
SparkSession 이란?
- 모든 Spark 연산과 데이터에 통합 연결이 되어 있습니다.
- 연결 채널을 통해 JVM 실행 파라미터들을 만들고 데이터 프레임 또는 데이터 세트를 정의하고, 데이터 소스에서 데이터를 읽어오고, 메타 데이터에 접근하고, 스파크 SQL 질의를 실행할 수 있습니다.
- SparkSession 은 모든 Spark 기능을 한 군데에서 접근할 수 있는 시작점을 제공합니다.
반응형
'Data engineer > Apache Spark' 카테고리의 다른 글
| [Spark]Spark executor 이란? (0) | 2024.01.07 |
|---|---|
| [Spark]Spark Cluster Manager 이란? (0) | 2024.01.07 |
| [Spark]Spark 드라이버란? (0) | 2024.01.07 |
| [Spark]Spark 애플리케이션 이란? (0) | 2024.01.07 |
| [Spark]GraphX (0) | 2024.01.07 |