regexp\u替换spark.sql()

ws51t4hk 于 2021-07-12 发布在 Spark

关注(0)|答案(1)|浏览(498)

我需要为spark.sql（）作业编写一个regexp\u replace查询。如果值遵循下面的模式，则仅提取第一个连字符之前的单词并将其分配给目标列“name”，但如果模式不匹配，则应报告整个“name”。
图案：
值应以连字符分隔。任何值都可以出现在第一个连字符之前（可以是数字、字母、特殊字符甚至空格）
第一个连字符后面应紧跟两个单词，用连字符隔开（只能是数字、字母或字母数字）（注：不允许使用特殊字符和空格）
两个单词后面应该跟一个或多个数字，后面应该跟连字符。
最后一部分只能是一个或多个数字。
例如：
如果name=45-dsg5-gfdvh6-9890-7685，regexp\u replace的输出=45
如果name=，则regexp\u replace=的输出
如果name=-gf5-dfg5-asd5-98-00，则regexp\u的输出replace=-gf5-dfg5-asd5-98-00
我有

spark.sql("SELECT REGEXP_REPLACE(name , '-[^-]+-\\w{2}-\\d+-\\d+$','',1,1,'i')  AS name").show();

但它不起作用。

sql apache-spark apache-spark-sql regex regexp-replace

来源：https://stackoverflow.com/questions/66545917/regexp-replace-for-spark-sql

1条答案

按热度按时间

cwdobuhd1#

使用

^([^-]*)(-[a-zA-Z0-9]+){2}-[0-9]+-[0-9]+$

见证据。替换为 $1 . 如果 $1 不起作用，使用 \1 . 如果 \1 不工作使用 \\1 .
解释

--------------------------------------------------------------------------------
  ^                        the beginning of the string
--------------------------------------------------------------------------------
  (                        group and capture to \1:
--------------------------------------------------------------------------------
    [^-]*                    any character except: '-' (0 or more
                             times (matching the most amount
                             possible))
--------------------------------------------------------------------------------
  )                        end of \1
--------------------------------------------------------------------------------
  (                        group and capture to \2 (2 times):
--------------------------------------------------------------------------------
    -                        '-'
--------------------------------------------------------------------------------
    [a-zA-Z0-9]+             any character of: 'a' to 'z', 'A' to
                             'Z', '0' to '9' (1 or more times
                             (matching the most amount possible))
--------------------------------------------------------------------------------
  ){2}                     end of \2 (NOTE: because you are using a
                           quantifier on this capture, only the LAST
                           repetition of the captured pattern will be
                           stored in \2)
--------------------------------------------------------------------------------
  -                        '-'
--------------------------------------------------------------------------------
  [0-9]+                   any character of: '0' to '9' (1 or more
                           times (matching the most amount possible))
--------------------------------------------------------------------------------
  -                        '-'
--------------------------------------------------------------------------------
  [0-9]+                   any character of: '0' to '9' (1 or more
                           times (matching the most amount possible))
--------------------------------------------------------------------------------
  $                        before an optional \n, and the end of the
                           string

赞(0）回复(0）举报 2021-07-12

我来回答

regexp\u替换spark.sql()

1条答案

相关问题

热门标签

最新问答