Spark / scala를 사용하여 문자열을 DataFrame으로 변환

HBoulmi

문자열 열을 타임 스탬프 열로 변환하고 싶지만 항상 null 값을 반환합니다.

  val t = unix_timestamp(col("tracking_time"),"MM/dd/yyyy").cast("timestamp")
   val df=   df2.withColumn("ts", t)

어떤 생각?

감사합니다 .

String column지정된 형식과 일치 하는지 확인하십시오 MM/dd/yyyy.

  • 일치하지 않으면 null반환됩니다.

Example:

val df2=Seq(("12/12/2020")).toDF("tracking_time")
val t = unix_timestamp(col("tracking_time"),"MM/dd/yyyy").cast("timestamp")

df2.withColumn("ts", t).show()
//+-------------+-------------------+
//|tracking_time|                 ts|
//+-------------+-------------------+
//|   12/12/2020|2020-12-12 00:00:00|
//+-------------+-------------------+

df2.withColumn("ts",unix_timestamp(col("tracking_time"),"MM/dd/yyyy").cast("timestamp")).show()
//+-------------+-------------------+
//|tracking_time|                 ts|
//+-------------+-------------------+
//|   12/12/2020|2020-12-12 00:00:00|
//+-------------+-------------------+
//(or)  by using to_timestamp function.

df2.withColumn("ts",to_timestamp(col("tracking_time"),"MM/dd/yyyy")).show()
//+-------------+-------------------+
//|tracking_time|                 ts|
//+-------------+-------------------+
//|   12/12/2020|2020-12-12 00:00:00|
//+-------------+-------------------+

이 기사는 인터넷에서 수집됩니다. 재 인쇄 할 때 출처를 알려주십시오.

침해가 발생한 경우 연락 주시기 바랍니다[email protected] 삭제

에서 수정
0

몇 마디 만하겠습니다

0리뷰
로그인참여 후 검토

관련 기사

분류에서Dev

Spark SQL을 사용하여 Json WrappedArray를 문자열로 변환

분류에서Dev

Scala를 사용하여 DataSet을 Json Array Spark로 변환

분류에서Dev

Scala를 사용하여 Spark의 모든 새 행을 새 열로 변환

분류에서Dev

중첩 된 json 문자열을 평면화하고 Spark Scala를 사용하여 데이터 프레임으로 변환

분류에서Dev

Javascript를 사용하여 문자열을 JSON으로 변환

분류에서Dev

switch 문을 사용하여 난수를 문자열로 변환

분류에서Dev

jq를 사용하여 배열을 문자열로 변환

분류에서Dev

키를 사용하여 문자열을 배열로 변환

분류에서Dev

Java를 사용하여 문자열을 json 객체로 변환

분류에서Dev

함수를 사용하여 문자열을 튜플로 변환

분류에서Dev

함수를 사용하여 문자열을 튜플로 변환

분류에서Dev

태그를 사용하여 xml을 문자열 PHP로 변환

분류에서Dev

태그를 사용하여 xml을 문자열 PHP로 변환

분류에서Dev

Java를 사용하여 문자열을 JSONArray로 변환

분류에서Dev

iOS Swift-$를 사용하여 문자열을 Double로 변환

분류에서Dev

sapply를 사용하여 열을 문자로 변환

분류에서Dev

preg_replace를 사용하여 URL을 문자열로 변환

분류에서Dev

Spark Scala를 사용하여 하나의 열 데이터를 벡터로 변환하는 방법

분류에서Dev

Regex : dict comprehension 및 regex를 사용하여 문자열을 사전으로 변환

분류에서Dev

Scala 열의 16 진수 하위 문자열을 10 진수로 변환-Dataframe org.apache.spark.sql.catalyst.parser.ParseException :

분류에서Dev

.join ()을 사용하여 문자를 문자열로 변환하는 방법

분류에서Dev

toString을 사용하여 숫자를 문자열로 변환하여 반전

분류에서Dev

Linq를 사용하여 데이터 문자열을 시간으로 변환

분류에서Dev

Javascript를 사용하여 문자열 (날짜 형식)을 datetime으로 변환

분류에서Dev

Stream Lambda를 사용하여 CSV 문자열 값을 Hashmap으로 변환

분류에서Dev

시간대를 사용하여 문자열을 datetime으로 변환

분류에서Dev

특수 문자를 사용하여 문자열을 유니 코드로 변환

분류에서Dev

내부 쉼표를 사용하여 문자열을 문자열 사전으로 변환

분류에서Dev

자동 단축키를 사용하여 문자열을 숫자로 변환

Related 관련 기사

  1. 1

    Spark SQL을 사용하여 Json WrappedArray를 문자열로 변환

  2. 2

    Scala를 사용하여 DataSet을 Json Array Spark로 변환

  3. 3

    Scala를 사용하여 Spark의 모든 새 행을 새 열로 변환

  4. 4

    중첩 된 json 문자열을 평면화하고 Spark Scala를 사용하여 데이터 프레임으로 변환

  5. 5

    Javascript를 사용하여 문자열을 JSON으로 변환

  6. 6

    switch 문을 사용하여 난수를 문자열로 변환

  7. 7

    jq를 사용하여 배열을 문자열로 변환

  8. 8

    키를 사용하여 문자열을 배열로 변환

  9. 9

    Java를 사용하여 문자열을 json 객체로 변환

  10. 10

    함수를 사용하여 문자열을 튜플로 변환

  11. 11

    함수를 사용하여 문자열을 튜플로 변환

  12. 12

    태그를 사용하여 xml을 문자열 PHP로 변환

  13. 13

    태그를 사용하여 xml을 문자열 PHP로 변환

  14. 14

    Java를 사용하여 문자열을 JSONArray로 변환

  15. 15

    iOS Swift-$를 사용하여 문자열을 Double로 변환

  16. 16

    sapply를 사용하여 열을 문자로 변환

  17. 17

    preg_replace를 사용하여 URL을 문자열로 변환

  18. 18

    Spark Scala를 사용하여 하나의 열 데이터를 벡터로 변환하는 방법

  19. 19

    Regex : dict comprehension 및 regex를 사용하여 문자열을 사전으로 변환

  20. 20

    Scala 열의 16 진수 하위 문자열을 10 진수로 변환-Dataframe org.apache.spark.sql.catalyst.parser.ParseException :

  21. 21

    .join ()을 사용하여 문자를 문자열로 변환하는 방법

  22. 22

    toString을 사용하여 숫자를 문자열로 변환하여 반전

  23. 23

    Linq를 사용하여 데이터 문자열을 시간으로 변환

  24. 24

    Javascript를 사용하여 문자열 (날짜 형식)을 datetime으로 변환

  25. 25

    Stream Lambda를 사용하여 CSV 문자열 값을 Hashmap으로 변환

  26. 26

    시간대를 사용하여 문자열을 datetime으로 변환

  27. 27

    특수 문자를 사용하여 문자열을 유니 코드로 변환

  28. 28

    내부 쉼표를 사용하여 문자열을 문자열 사전으로 변환

  29. 29

    자동 단축키를 사용하여 문자열을 숫자로 변환

뜨겁다태그

보관