|
要實現(xiàn)自動獲取關(guān)鍵詞的功能,大概可以分成三步
1,通過分詞算法將標(biāo)題和內(nèi)容分別進(jìn)行分割,提取出關(guān)鍵詞和頻度。當(dāng)前主要的兩個算法是中科院的ICTCLAS和隱馬爾可夫模型。但這兩個都太高端,有一定的門檻,且都是只支持C++/Java。基于php的當(dāng)前有兩個是值得推薦的PSCWS和HTTPCWS。 SCWS于2008-03-08發(fā)布1.0.0 正式版,到現(xiàn)在最新版本已經(jīng)到了1.0.4。PSCWS是它的php版。而HTTPCWS是張宴開發(fā)的,之前叫phpCWS。phpCWS 先使用“ICTCLAS 3.0 共享版中文分詞算法”的API進(jìn)行初次分詞處理,再使用自行編寫的“逆向最大匹配算法”對分詞和進(jìn)行詞語合并處理,并增加標(biāo)點符號過濾功能,得出分詞結(jié)果。不過很遺憾目前僅支持Linux系統(tǒng),尚未移植到win平臺上。
2,將提取結(jié)果與現(xiàn)有詞庫進(jìn)行比較,處理,去除無用的詞得到最符合規(guī)則的關(guān)鍵詞。這里主要就是要看詞庫了,我們可以自己定義詞庫,也可以使用現(xiàn)有的成熟詞庫。比如新浪和網(wǎng)易博客都有這個功能,。他們分詞應(yīng)該有不錯的詞庫,因為他們都是大網(wǎng)站,而我呢,區(qū)區(qū)一個小程序員,不可能搞到什么權(quán)威的詞庫,所以只能從現(xiàn)有的開源程序上入手,看看他們的詞庫。
3,在處理后的提取結(jié)果中選擇適當(dāng)?shù)淖鳛樽罱K的關(guān)鍵詞,得到最符合當(dāng)前內(nèi)容的關(guān)鍵詞,在這個階段就是具體情況具體分析了,無論如何也不可能達(dá)到人的那種智能化。最多是。當(dāng)前php類CMS都自有自己的提取關(guān)鍵詞系統(tǒng)。
目前在網(wǎng)絡(luò)上流傳最廣的是DEDECMS的分詞源碼,我做了測試,發(fā)現(xiàn)相當(dāng)?shù)拇簦Ч懿缓谩K仍O(shè)置一個關(guān)鍵詞長度,確定獲取關(guān)鍵詞的數(shù)量,然后取詞,它認(rèn)為標(biāo)題分好的詞就是所需關(guān)鍵詞,在加上從正文中讀取關(guān)鍵詞只到達(dá)到這個所設(shè)置的長度,就是最終關(guān)鍵詞了。另外類似“我們”等無意義的詞也沒有去除掉提取并被列為關(guān)鍵詞的頻率太高,甚至有時候還會把空格的HTML提出來做為關(guān)鍵詞,亟待改進(jìn)。不過如果作為輔助功能,它已經(jīng)很好了。而discuz的稍微好一些,但是discuz并沒有提供源碼,只是提供了一個在線api。
而dede的分詞也有好幾個版本,最好的應(yīng)該是最新版的吧,出現(xiàn)頻率什么都有了,下面就以dede5.7的分詞和discuz的api的結(jié)果對比下
測試?yán)樱?BR>$title="THINKphp官方即將停止對2.0版本的支持";
$body="了更好地做好Thinkphp框架的開發(fā)、維護(hù)和支持工作,官方宣布從2012年5月1日起s對2.0及之前版本的維護(hù)和支持,為了節(jié)能低碳考慮,同時也取消官網(wǎng)的相應(yīng)版本和文檔下載。
就此緬懷那些年,曾經(jīng)一起開發(fā)的Thinkphp版本吧!
關(guān)于Thinkphp 2.0版本
Thinkphp誕生于2006年,致力于WEB應(yīng)用的快速開發(fā),其2.0版本發(fā)布于2009年10月1日 ,在之前的1.*版本上完成新的重構(gòu)和飛躍,當(dāng)時是一次劃時代的版本,為新版奠定了基礎(chǔ),同時也積累了較多的用戶群和網(wǎng)站,隨著框架的快速更新,和新版2.1、2.2和3.0版本的陸續(xù)發(fā)布,預(yù)示著Thinkphp的3.0時代到來了,2.0的生命周期宣告結(jié)束。但基本上2.0的很多功能都延續(xù)或者完善到2.1版本中了,從2.0版本升級到2.1和2.2版本也相對輕松。2.2版本是2.*版本的最終版本,不再更新功能,僅做BUG修復(fù)。";
一、dede分詞
將結(jié)果排序后如下
主站蜘蛛池模板: 国产成人精品一区二三区在线观看 | 久久er这里都是精品23 | 亚洲国产一区在线 | 国产一区二区高清在线 | 国产99视频精品免费视频7 | 精品日本久久久久久久久久 | 久久久久亚洲 | 丁香激情六月 | 二区三区视频 | 春色激情站 | 91精品一区二区三区久久久久 | 最新国产成人综合在线观看 | 亚洲第一成人在线 | 91婷婷| 四虎影视亚洲精品 | 国产精品自在线拍国产 | 久久成年片色大黄全免费网站 | 色呦呦网页 | 国产极品麻豆91在线 | 亚洲精品在线播放 | 99在线视频免费观看 | 国产全黄三级三级 | 亚洲一区日韩一区欧美一区a | 国产毛片在线看 | 色婷婷精品大全在线视频 | 成人免费福利 | 伊人网综合网 | 精品伊人久久久大香线蕉欧美 | 亚洲免费视频一区二区三区 | 日本网址在线观看 | 99pao在线视频成精品 | 日本美女视频韩国视频网站免费 | 在线观看91精品国产不卡免费 | 中文字幕一区二区三区四区五区 | 91视频综合网 | 国产一级特黄全黄毛片 | 夜色亚洲 | 亚洲欧洲日韩国产一区二区三区 | 韩国一级永久免费观看网址 | 国产乱码精品一区二区 | 岛国不卡 |