spark.sql() 的 REGEXP_REPLACE

Question

我需要为 spark.sql() 作业编写 REGEXP_REPLACE 查询。 如果值遵循以下模式，则仅提取第一个连字符之前的单词并将其分配给目标列“名称”，但如果模式不匹配，则应报告整个“名称”。

图案：

1. 值应该用连字符分隔。 任何值都可以出现在第一个连字符之前（无论是数字、字母、特殊字符甚至空格）
2. 第一个连字符后应紧跟 2 个单词，用连字符分隔（只能是数字、字母或字母数字）（注意：不允许使用特殊字符和空格）
3. 两个单词后面应该跟一个或多个数字，然后是连字符。
4. 最后一部分应该只有一位或多位数字。

例如：

如果名称 = abc45-dsg5-gfdvh6-9890-7685 , output 的REGEXP_REPLACE = abc45

如果名称 = abc , output 的REGEXP_REPLACE = abc

如果名称 = abc-gf5-dfg5-asd5-98-00 , output 的REGEXP_REPLACE = abc-gf5-dfg5-asd5-98-00

我有

spark.sql("SELECT REGEXP_REPLACE(name , '-[^-]+-\\w{2}-\\d+-\\d+$','',1,1,'i')  AS name").show();

但它不起作用。

Answer 1

利用

^([^-]*)(-[a-zA-Z0-9]+){2}-[0-9]+-[0-9]+$

见证明。 替换为$1 。 如果$1不起作用，请使用\1 。 如果\1不起作用，请使用\\1 。

解释

--------------------------------------------------------------------------------
  ^                        the beginning of the string
--------------------------------------------------------------------------------
  (                        group and capture to \1:
--------------------------------------------------------------------------------
    [^-]*                    any character except: '-' (0 or more
                             times (matching the most amount
                             possible))
--------------------------------------------------------------------------------
  )                        end of \1
--------------------------------------------------------------------------------
  (                        group and capture to \2 (2 times):
--------------------------------------------------------------------------------
    -                        '-'
--------------------------------------------------------------------------------
    [a-zA-Z0-9]+             any character of: 'a' to 'z', 'A' to
                             'Z', '0' to '9' (1 or more times
                             (matching the most amount possible))
--------------------------------------------------------------------------------
  ){2}                     end of \2 (NOTE: because you are using a
                           quantifier on this capture, only the LAST
                           repetition of the captured pattern will be
                           stored in \2)
--------------------------------------------------------------------------------
  -                        '-'
--------------------------------------------------------------------------------
  [0-9]+                   any character of: '0' to '9' (1 or more
                           times (matching the most amount possible))
--------------------------------------------------------------------------------
  -                        '-'
--------------------------------------------------------------------------------
  [0-9]+                   any character of: '0' to '9' (1 or more
                           times (matching the most amount possible))
--------------------------------------------------------------------------------
  $                        before an optional \n, and the end of the
                           string