首頁 後端開發 php教程 phpcms v9自備擷取模組功能體驗

phpcms v9自備擷取模組功能體驗

Apr 18, 2018 pm 02:37 PM
php phpcms 功能

主流CMS系統之一Phpcms v9自備的採集模組功能如何呢?Phpcms v9預設內建有文章、圖片、下載3個內容模型,先來看最普通的文章採集,有興趣的你可不要錯過了哈,希望可以幫助到你哈

Phpcms網站管理系統目前最新版本為Phpcms v9,作為國內主流CMS系統之一,目前已有數萬網站的應用規模。那麼其自備的採集模組功能如何呢,來看看吧。

文章採集

Phpcms v9預設內建有文章、圖片、下載3個內容模型,先來看最普通的文章採集。以採集新浪互聯網頻道,國內滾動新聞專欄為例http://roll.tech.sina.com.cn/internet_chinalist/index_1.shtml

1、進入後台,內容-內容發佈管理——採集管理-新增採集點。 (不同於Phpcms以往版本,採集管理在模組選單內)

PHPCMS V9自带采集体验 三联

#2、網址規則。採集項目名稱隨便填,採集頁面編碼預設GBK,具體採集頁面的時候可以透過查看其網頁原始碼。

網址採集,沒有大的特色,透過查看所要採集頁面的網址規則填寫。分析目標頁面得出是序列網址,且所要取得內容的網址都在兩個標籤之間。無其他幹擾鏈接,所以就無需定義網址中必須包含和不得包含的字符了。如果目標網站配置了Base,那麼也要配置好。

網址擷取設定結束,但是如果目標網站清單頁用js實作上一頁,或是要取得網址深度超過2級,用此自帶擷取就很難實現了。

3、內容規則。 phpcms是用「[內容]」作為通配符,然後設定好開始結束的字符,再過濾不要的程式碼來實現內容的採集。分析目標頁的title標籤比較有規律,可以直接如圖設定。

過濾格式為“要過濾的內容[|]替換值”,如果是刪除的話就替換值留空。過濾規則是支援正規表示式,系統自帶了幾種比較常見的標籤過濾正則,要比較靈活過濾的話對於新手來說有點難度,所以新手需要先熟悉下正則表達式。

作者規則,來源規則,時間規則依照規則去取得。小編嘗試了一下固定值發現無法實現,就是把某一標籤設為固定值,如把「來源」設定為http://www.sina.com.cn,可是採集結果來源標籤為空。

 內容規則,填好開始和結束標籤,我們測試的目標頁比較乾淨,所以只需過濾掉裡面的超連結和一些無用標籤。

內容分頁規則,如果內容頁有分頁必須填寫,此處文章都沒有分頁,小編會在後面的圖片收集來介紹這個標籤。

4、自訂規則,除了系統預設的幾個標籤外,你還可以自訂各種標籤,規則是一樣的,只是有一點要注意:規則英文名一定要填寫,否則自定義標籤無法儲存。

5、進階配置,此次可設定下載圖片、圖片浮水印、內容分頁和匯入順序。其中註意,如果需要水印記得修改好自己網站的水印圖片,水印存放路徑:statics/images/water

6、規則設定好了,提交回到採集管理首頁,可以先透過測試來看看各標籤是否準確。

7、發佈內容。如果都準確,先點選採集網址,會自動採集文章地址,並過濾重複url。然後會彈出採集網址完成的訊息,點選其中的「採集文章內容」

#採集自動進行,並顯示採集進度。

採集完成後自動回到採集管理首頁,點擊內容發布,進入到已採集文章列表,勾選要發布的文章,或直接點擊底部的全部導入。

   進入到發布方案選擇介面,新發布方案,選擇一個發布欄目,本測試選擇的是文章模組的欄目“國內”,在方案新建頁面可以設置自動擷取摘要、自動擷取縮圖、匯入文章狀態、標籤與資料庫對應關係。其中,導入文章狀態只有一個“發布”,如果站長需要狀態為待審核,則要先修改對應欄目的工作流程為一級審核。

標籤與資料庫對應關係中,把採集標籤和資料庫字段一一對應,如果有自訂標籤找不到對應字段,則需要修改模型增加字段,然後透過修改模板來顯示,對技術要求比較高,不適合新手。另外系統自備幾個處理函數,也挺實用的。

發布方案設定完成,自動開始匯入剛才選擇的文章,並且下次匯入時就無需再建方案了,直接選擇已建置好的方案即可。

文章採集、發佈完成。看看效果:

後台內容管理頁

#內容頁

下面我們來看看圖片採集

圖片收集

phpcms v9自備圖片模型,對圖片處理也有個組圖模式,方便一些站長做圖片網站或設定圖片展示方式。以下來體驗下用自帶擷取程式擷取圖片,以擷取http://www.4493.com/mingxingxiezhen/頁面的圖片為例:

網站取得規則以及內容取得規則等都與文章採集一樣,最重要的一點,phpcms v9的圖片採集不能只採集圖片地址,而是應該採集整個標籤,這樣才能處理為組圖。如本例:內容標籤設定為

收集到的內容應該是這樣的

## 還有個分頁問題,目標站的分頁如圖所示:

網頁程式碼為:

##所以只要在內容分頁規則處選擇全部列出模式,然後填寫分頁標籤開始和結束字符,系統就自動採集分頁的內容了。

設定完規則後,採集網址,採集內容,發佈內容。發布方案處要注意,小編幾經嘗試發現,要實現組圖模式,必須內容字段和組圖字段都要用上“處理為組圖”函數。但是這樣就無法取得第內容圖片做縮圖了,所以最好自訂一個縮圖標籤,直接取得一張內容圖位址做縮圖。

設定好後發布。請參閱採集效果:

欄位頁

#內容頁

總結:細細體驗下來,phpcms v9自帶的採集功能還是比較全面的,滿足基本的文章和圖片收集。但不夠靈活,對一些高要求的站長來說還明顯不足,而且門檻較高,官方對採集模組的說明和幫助文件又非常有限,不利於新手上手。

#

以上是phpcms v9自備擷取模組功能體驗的詳細內容。更多資訊請關注PHP中文網其他相關文章!

本網站聲明
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn

熱AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover

AI Clothes Remover

用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool

Undress AI Tool

免費脫衣圖片

Clothoff.io

Clothoff.io

AI脫衣器

Video Face Swap

Video Face Swap

使用我們完全免費的人工智慧換臉工具,輕鬆在任何影片中換臉!

熱工具

記事本++7.3.1

記事本++7.3.1

好用且免費的程式碼編輯器

SublimeText3漢化版

SublimeText3漢化版

中文版,非常好用

禪工作室 13.0.1

禪工作室 13.0.1

強大的PHP整合開發環境

Dreamweaver CS6

Dreamweaver CS6

視覺化網頁開發工具

SublimeText3 Mac版

SublimeText3 Mac版

神級程式碼編輯軟體(SublimeText3)

適用於 Ubuntu 和 Debian 的 PHP 8.4 安裝和升級指南 適用於 Ubuntu 和 Debian 的 PHP 8.4 安裝和升級指南 Dec 24, 2024 pm 04:42 PM

PHP 8.4 帶來了多項新功能、安全性改進和效能改進,同時棄用和刪除了大量功能。 本指南介紹如何在 Ubuntu、Debian 或其衍生版本上安裝 PHP 8.4 或升級到 PHP 8.4

如何設定 Visual Studio Code (VS Code) 進行 PHP 開發 如何設定 Visual Studio Code (VS Code) 進行 PHP 開發 Dec 20, 2024 am 11:31 AM

Visual Studio Code,也稱為 VS Code,是一個免費的原始碼編輯器 - 或整合開發環境 (IDE) - 可用於所有主要作業系統。 VS Code 擁有大量針對多種程式語言的擴展,可以輕鬆編寫

在PHP API中說明JSON Web令牌(JWT)及其用例。 在PHP API中說明JSON Web令牌(JWT)及其用例。 Apr 05, 2025 am 12:04 AM

JWT是一種基於JSON的開放標準,用於在各方之間安全地傳輸信息,主要用於身份驗證和信息交換。 1.JWT由Header、Payload和Signature三部分組成。 2.JWT的工作原理包括生成JWT、驗證JWT和解析Payload三個步驟。 3.在PHP中使用JWT進行身份驗證時,可以生成和驗證JWT,並在高級用法中包含用戶角色和權限信息。 4.常見錯誤包括簽名驗證失敗、令牌過期和Payload過大,調試技巧包括使用調試工具和日誌記錄。 5.性能優化和最佳實踐包括使用合適的簽名算法、合理設置有效期、

php程序在字符串中計數元音 php程序在字符串中計數元音 Feb 07, 2025 pm 12:12 PM

字符串是由字符組成的序列,包括字母、數字和符號。本教程將學習如何使用不同的方法在PHP中計算給定字符串中元音的數量。英語中的元音是a、e、i、o、u,它們可以是大寫或小寫。 什麼是元音? 元音是代表特定語音的字母字符。英語中共有五個元音,包括大寫和小寫: a, e, i, o, u 示例 1 輸入:字符串 = "Tutorialspoint" 輸出:6 解釋 字符串 "Tutorialspoint" 中的元音是 u、o、i、a、o、i。總共有 6 個元

解釋PHP中的晚期靜態綁定(靜態::)。 解釋PHP中的晚期靜態綁定(靜態::)。 Apr 03, 2025 am 12:04 AM

靜態綁定(static::)在PHP中實現晚期靜態綁定(LSB),允許在靜態上下文中引用調用類而非定義類。 1)解析過程在運行時進行,2)在繼承關係中向上查找調用類,3)可能帶來性能開銷。

您如何在PHP中解析和處理HTML/XML? 您如何在PHP中解析和處理HTML/XML? Feb 07, 2025 am 11:57 AM

本教程演示瞭如何使用PHP有效地處理XML文檔。 XML(可擴展的標記語言)是一種用於人類可讀性和機器解析的多功能文本標記語言。它通常用於數據存儲

什麼是PHP魔術方法(__ -construct,__destruct,__call,__get,__ set等)並提供用例? 什麼是PHP魔術方法(__ -construct,__destruct,__call,__get,__ set等)並提供用例? Apr 03, 2025 am 12:03 AM

PHP的魔法方法有哪些? PHP的魔法方法包括:1.\_\_construct,用於初始化對象;2.\_\_destruct,用於清理資源;3.\_\_call,處理不存在的方法調用;4.\_\_get,實現動態屬性訪問;5.\_\_set,實現動態屬性設置。這些方法在特定情況下自動調用,提升代碼的靈活性和效率。

PHP和Python:比較兩種流行的編程語言 PHP和Python:比較兩種流行的編程語言 Apr 14, 2025 am 12:13 AM

PHP和Python各有優勢,選擇依據項目需求。 1.PHP適合web開發,尤其快速開發和維護網站。 2.Python適用於數據科學、機器學習和人工智能,語法簡潔,適合初學者。

See all articles