PySpark - 2023년 한 해를 돌아보며April 9, 2024 작성자: Hyukjin Kwon, Takuya Ueshin, Allison Wang, Ruifeng Zheng, Xinrong Meng, Haejoon Lee, Amanda Liu in 산업 (번역: Youngkyong Ko) Original Post 2023년에 출시된 Apache Spark 3.4와 3.5에서는 PySpark의 성능, 유연성, 사용 편의성을 개선하는 데 중점을 두었습니다. 이 블로그 게시물에서는...
DataFrame 동일성 테스트 함수를 이용하여 PySpark 테스트 간소화March 14, 2024 작성자: Haejoon Lee, Allison Wang, Amanda Liu in 엔지니어링 블로그 (번역: Youngkyong Ko) Original Post DataFrame 동일성 테스트 함수 는 PySpark 단위 테스트를 간소화하기 위해 Apache Spark 3.5와 Databricks Runtime 14.2에 도입되었습니다. 이...
Apache Spark의 새로운 프로그래밍 언어인 영어를 소개합니다July 7, 2023 작성자: Gengliang Wang, 샹루이 멍, Reynold Xin, Allison Wang, Amanda Liu, Denny Lee in 오픈 소스 개요 우리는 Spark 환경을 더욱 풍부하게 만들어주는 혁신적인 도구인 Apache Spark용 영문 SDK를 공개하게 되어 기쁘게 생각합니다. 208개 국가 및 지역에서 연간 10억...