wordpress做的採集站怎麼解決文章重複？

有的標題重複，有的標題內容均重複，試了好幾個插件和sql都不行！數據量大了的關係 ，非常慢的。

這個需要技術支持，沒技術還是不要做採集站
7 b! O( m( ?7 T* T! S' s: s% lsql使用模糊搜索語句like%%
7 n1 F8 r8 X! W1 h

月光飛燕 發表於 2013-6-19 19:58
這個需要技術支持，沒技術還是不要做採集站
sql使用模糊搜索語句like%%

主要這個站是架設在雲上的，本身有很多限制，現在數據量大了操作數據庫很容易到上限。。。這就是為什麼現有的插件和sql查詢刪除語句行不通的原因。
: H9 x& [8 q+ L! S! |  ]換個思路，如果不好去除重複，如何做優化利於seo呢？ 我是在google站長工具裡看到重複數據的提示才發現問題的！


7 n. A( v6 v2 A6 Y' L

有插件，你百度找下。
# `& f+ `2 T3 ?( h% R0 ^

通常採集回來的內容，我都是通過SQL分拆、拼接、變換內容、變換標題等等，還有去標題、關鍵詞、標籤重複，自己寫存儲過程和函數，最後插入wordpress的相關表裡面。還有定時發佈，我沒有使用任何定時發佈的插件，直接生成所需的發佈時間。

cyrich 發表於 2013-6-19 21:28
通常採集回來的內容，我都是通過SQL分拆、拼接、變換內容、變換標題等等，還有去標題、關鍵詞、標籤重複， ...

都通過sql啊, 這個也太麻煩了吧......
2 o7 t' {1 z0 O$ T8 A為什麼不使用php啊? 你要是有些變量需要修改,不就得修改存儲過程了?


+ H. ]' I# t3 R8 n

cyrich 發表於 2013-6-19 21:28
通常採集回來的內容，我都是通過SQL分拆、拼接、變換內容、變換標題等等，還有去標題、關鍵詞、標籤重複， ...

請教如何用sql分拆？

# |% w5 C5 R! u8 d7 B/ l% P2 z1 `我是select數據後用php進行處理的，用sql會效率高些？

求指點
( b1 C5 p* B3 q+ n

風吹不動 發表於 2013-6-20 06:54
請教如何用sql分拆？
. _% r- n, _  o( N$ P2 {* H
: G  F) E( O4 k我是select數據後用php進行處理的，用sql會效率高些？

只會SQL語言，沒學過PHP，所以一般使用SQL來編緝數據，必要時就寫個存儲過程和函數
* e4 y1 S( C; z& V; g
) @. j3 z" S6 y

http://blog.csdn.net/dengwen168/article/details/8832775
& g# x  e* e( `, k! {, m5 u6 U0 |用火車頭採集和發佈比較簡單.

如果要防止完全重複，給title字段加上Unique索引，不過這樣wordpress使用的時候會有一些問題 比如無法自動保存。 或者你另建一個key-value索引表只留ID和TITLE兩個字段 然後用它對應wp_posts去重
* m0 J7 O! u  _