PySpark 튜토리얼

Apache Spark는 Scala 프로그래밍 언어로 작성되었습니다. Spark로 Python을 지원하기 위해 Apache Spark 커뮤니티는 PySpark라는 도구를 출시했습니다. PySpark를 사용하면 Python 프로그래밍 언어에서도 RDD로 작업 할 수 있습니다. Py4j라는 라이브러리 덕분에이를 달성 할 수 있습니다. 이 튜토리얼은 데이터 기반 문서의 기본 사항을 다루고 다양한 구성 요소 및 하위 구성 요소를 다루는 방법을 설명하는 입문 자습서입니다.

이 튜토리얼은 프로그래밍 언어 및 실시간 처리 프레임 워크 분야에서 경력을 쌓고 자하는 전문가를 위해 준비되었습니다. 이 자습서는 독자가 다양한 모듈 및 하위 모듈과 함께 PySpark를 편안하게 시작할 수 있도록하기위한 것입니다.

이 튜토리얼에 제공된 다양한 개념을 진행하기 전에 독자가 프로그래밍 언어와 프레임 워크가 무엇인지 이미 알고 있다고 가정합니다. 또한 독자가 Apache Spark, Apache Hadoop, Scala 프로그래밍 언어, Hadoop 분산 파일 시스템 (HDFS) 및 Python에 대한 충분한 지식을 가지고 있다면 매우 유용 할 것입니다.