Pyspark size 함수 정보

555 단어 sparkpysparktech

모티프


Pyspark의 size 함수에 관해서는 어떤 사이즈의 함수인지 금방 잊어버리기 위해 실제 샘플을 기재하면 바로 생각납니다.
https://spark.apache.org/docs/latest/api/python/reference/api/pyspark.sql.functions.size.html

결실


또한, 크기 함수의 매개 변수에 aray나 맵이 지정되지 않은 경우 다음 Exception이 됩니다.
AnalysisException: cannot resolve 'size(name)' due to data type mismatch: argument 1 requires (array or map) type

좋은 웹페이지 즐겨찾기