Java Regex：基于除撇号之外的非单词字符进行拆分

Question

我试图基于空格和非单词字符进行拆分和包含，除了撇号。

我已经能够将它拆分并包含空格和非单词字符，但我似乎无法弄清楚如何从非单词字符中排除撇号。

这是我目前的Regex ......

str.split("\\s|(?=\\W)");

...在此代码示例上运行时：

program p;
begin
    write('x');
end.

...产生这个结果：

program
p
;
begin

write
(
'x   <!-- This is the problem.
'
)
;
end
.

这几乎是正确的，但我的目标是跳过撇号，这是结果：

program
p
;
begin

write
(
'x'   <!-- This is the wanted result.
)
;
end
.

UPDATE

正如我所建议的那样：

str.split("\\s|(?=\\W)(?<=\\W)");

这几乎可以工作，但不能正确拆分所有特殊字符：

program
p;
begin
write(
'x'
)
;
end.

Answer 1

你有没有尝试过...

[^\w']

这将匹配任何既不是单词字符也不是撇号的字符。 可能很简单，根据您的输入工作。

如果你使用[^\\w']作为你的正则表达式来运行替换操作而使用\\n\\1\\n作为替换字符串，它应该让你接近你想要的位置。

Answer 2

你可以分开这个。

\s|('[^']*')|(?=\W)

见演示。

https://regex101.com/r/mL7eL6/1

Answer 3

单独处理撇号并要求前面的非单词：

str.split("\\s+|(?=[^\\w'])|(?<=\\W)(?=')");

查看现场演示 。

Answer 4

作为替代方案，可以扫描\\ b [\\ w'] + \\ b的字符串