2020-05-20から1日間の記事一覧

【分散処理】PySpark ～ ユーザ定義関数 UDF 編 ～

Spark / PySpark

■ はじめに PySpark の UDF (User Defined Function) っての学ぶ。 目次 【１】UDF とは 【２】UDF定義方法 １）udf関数から取り込む ２）デコレータを利用する方法 ３）spark.udf.register() で登録する 【３】使用上の注意 【４】サンプル なお、以下の関…