Spark DataFrame에 상수 열을 어떻게 추가합니까?

Spark DataFrame에 상수 열 추가

withColumn과 상수 값을 사용하여 DataFrame에 새 열을 추가하려고 하면 사용자는 데이터 유형이 일치하지 않아 오류가 발생할 수 있습니다.

해결책:

Spark 2.2:

typedLit을 사용하여 직접 할당 다양한 유형의 상수 값:

Spark 1.3:

lit를 사용하여 리터럴 값 생성:

Spark 1.4:

복잡한 열의 경우 array, struct, create_map과 같은 함수 블록을 사용하세요.

Scala의 경우:

struct의 경우 , 각 필드에 별칭을 사용하거나 전체 개체에 캐스팅하여 이름을 제공합니다.

참고:

이러한 구성은 상수 인수를 전달하는 데 사용할 수도 있습니다. UDF 또는 SQL 함수.

위 내용은 Spark DataFrame에 상수 열을 어떻게 추가합니까?의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!