使用正则表达式重新字符串匹配提取URL链接-Python

Question

我一直在尝试使用re api从文本文件中提取URL。 以http：//，https：//和www开头的任何链接。

该文件包含文本以及html源代码，html部分很容易，因为我可以使用BeautifulSoup提取它们，但是普通文本似乎更具挑战性。 我在网上发现了这似乎是URL提取的最佳实现，但是它在某些标签上失败了，特别是它无法处理标签并将其包含在URL中。 感谢您提供任何帮助，因为我自己对字符串匹配一点都不熟悉

这是签名

sp1=re.findall("http[s]?://(?:[a-zA-Z]|[0-9]|[$-_@.&+]|[!*\(\),]|(?:%[0-9a-fA-F][0-9a-fA-F]))+", str(STRING))
sp2=re.findall('www.(?:[a-zA-Z]|[0-9]|[$-_@.&+]|[!*\(\),]|(?:%[0-9a-fA-F][0-9a-fA-F]))+', str(STRING))

例子：

http://www.website.com/science/</span></a><o:p></o:p></span></div><div
www.website.com/library/</span></a></span></i><span
http://awebsite.com/Groups</a><div>

Answer 1

re.findall(r'https?://[^\s<>"]+|www\.[^\s<>"]+', str(STRING))

[^\\s<>"]+部分与任何非空格，非引号，非尖括号字符匹配，以避免与以下字符串匹配：

<a href="http://www.example.com/stuff">
http://www.example.com/stuff</br>