Apache Spark 3.0 릴리즈
(spark.apache.org)- v2.4 대비 2배이상의 속도 개선
- ANSI SQL 준수
- Pandas API 개선 (UDF 와 Type Hints)
- Structured Streaming을 위한 새로운 UI
- R 사용자 정의 함수 호출시 40배 까지 속도 개선
- 3400개 이상의 JIRA 티켓을 처리했음
- v2.4 대비 2배이상의 속도 개선
- ANSI SQL 준수
- Pandas API 개선 (UDF 와 Type Hints)
- Structured Streaming을 위한 새로운 UI
- R 사용자 정의 함수 호출시 40배 까지 속도 개선
- 3400개 이상의 JIRA 티켓을 처리했음