從論壇中提取數據

Question

İ要根據我輸入的關鍵字從php論壇中提取數據。 是否有准備好的東西可以做到這一點？ 僅舉示例Kadinlarkulubu.com/forum.php關鍵字ios，android

由於此信息，我想獲取日期，時間，消息，消息的URL，消息中的關鍵字，編寫此消息的成員的昵稱。

我需要在不同的論壇上工作，因此我需要一個或多個在諸如vBulletin之類的主要大型平台上都可以使用的工具。

Answer 1

您需要創建自己的網絡搜尋器 。 如果您希望它在各種不同的平台上運行，則必須在該搜尋器上創建變體。

首先，選擇您喜歡的論壇，並為其提供種子頁面（開始爬網的頁面）。 謹慎行事，因為您可能需要登錄才能看到帖子，並且在這種情況下，可能不容易做到（例如，制作可以登錄並破壞驗證碼的抓取工具）。 您還可以使用搜索功能（由於許多論壇的搜索URL類似於?q=your_tag&p=1 ，這可以使事情變得簡單?q=your_tag&p=1 。

只需檢查您是否在同一個域中，並且沒有陷入無限循環，否則就可以了。

期望這是一個長期的項目：）

如果論壇提供API，則可以使用API​​，但我懷疑您會很幸運。

Answer 2

2種方法只有在論壇所有者為您提供訪問論壇API（如果有）或數據庫的訪問權限時，才可能使用簡單的方法

極端困難的方法是使抓取器逐頁讀取論壇並將您喜歡的信息解析為可以使用的內容。