香蕉成人伊视频在线观看|学生小视频国产区|yy女主播啪啪啪视频|麻豆传播媒体APP大全免费版官网|瑜伽牲交AV|国产欧美日韩在线天堂区|白浆精品国产91

Discuz! 官方交流社區

標題: 求助!關于分類信息修改變量名后蜘蛛抓取鏈接問題 [打印本頁]

作者: dm360    時間: 2022-8-7 00:21
標題: 求助!關于分類信息修改變量名后蜘蛛抓取鏈接問題
求助!關于分類信息修改變量名后蜘蛛抓取鏈接問題
域名/66-sortid-4-a0-2-b3-24-b4-7.html 精簡變量名稱后的鏈接
域名/66-sortid-4-a0-2-b3-24-b4-7-fenlei-41-geshi-8-render-2-xingzhi-2-page-7.html  蜘蛛抓取的鏈接:在上方真是鏈接后增加了一部分以前沒修改變量名時候的舊的變量名。
蜘蛛一直爬這種新變量+已經不存在的舊變量的組合鏈接,怎么讓他抓取正確的鏈接呢(第一個鏈接)?



疑問:是discuz的數據庫啥的  在分類信息的變量名修改過后還會殘留舊變量名在庫里?導致蜘蛛抓取錯誤的鏈接? 還是其他的什么原因啊?
求大神來解答一下 ,萬分感激!

作者: 天外飄仙    時間: 2022-8-7 08:51
建議做一下 301重定向呢; 批量將舊鏈接  301跳轉到 新鏈接 就可以了

作者: dm360    時間: 2022-8-7 21:32
天外飄仙 發表于 2022-8-7 08:51
建議做一下 301重定向呢; 批量將舊鏈接  301跳轉到 新鏈接 就可以了

這個不太好做的,分類信息里有好幾層參數,每一層都有好多個變量,組合起來少則幾千多則幾萬條鏈接。畢竟分類信息篩選是可以自由組合篩選的么。
這幾千上萬的鏈接 ,做301規則太難了,因為規則本身就不好寫。組合方式太復雜了。
作者: 天外飄仙    時間: 2022-8-8 07:25
dm360 發表于 2022-8-7 21:32
這個不太好做的,分類信息里有好幾層參數,每一層都有好多個變量,組合起來少則幾千多則幾萬條鏈接。畢竟 ...

規則 要用正則匹配的……
涉及 幾千萬鏈接 都不是問題的……如果你不懂正則的話 就花錢雇人幫你寫吧;

作者: dm360    時間: 2022-8-8 13:36
天外飄仙 發表于 2022-8-8 07:25
規則 要用正則匹配的……
涉及 幾千萬鏈接 都不是問題的……如果你不懂正則的話 就花錢雇人幫你寫吧;
...

那除了301   從根源上無法解決這個問題了嗎?到底是dz本身問題,還是蜘蛛歷史爬行記憶問題呢?
作者: 天外飄仙    時間: 2022-8-8 15:07
dm360 發表于 2022-8-8 13:36
那除了301   從根源上無法解決這個問題了嗎?到底是dz本身問題,還是蜘蛛歷史爬行記憶問題呢? ...

蜘蛛爬行記憶問題; 最好是301重定向一下; 不做301 以后蜘蛛應該也會慢慢的改過來,畢竟 已經沒有 舊鏈接的 入口了

作者: dm360    時間: 2022-8-8 15:22
天外飄仙 發表于 2022-8-8 15:07
蜘蛛爬行記憶問題; 最好是301重定向一下; 不做301 以后蜘蛛應該也會慢慢的改過來,畢竟 已經沒有 舊鏈 ...

已經改了好幾個月了 ,蜘蛛還是沒變過來,是所有的蜘蛛,百度 bing sougou 谷歌 等等 都是這樣的,很難不懷疑,難道所有的蜘蛛都有記憶問題?不會自動抓取新的鏈接嗎、。
作者: 天外飄仙    時間: 2022-8-8 17:07
dm360 發表于 2022-8-8 15:22
已經改了好幾個月了 ,蜘蛛還是沒變過來,是所有的蜘蛛,百度 bing sougou 谷歌 等等 都是這樣的,很難不 ...

主動 提交一下 新鏈接 給蜘蛛 試試呢
作者: dm360    時間: 2022-8-9 01:14
天外飄仙 發表于 2022-8-8 17:07
主動 提交一下 新鏈接 給蜘蛛 試試呢

試過了 沒有用 連續試了一星期 后面依然是抓取錯誤的組合鏈接。




歡迎光臨 Discuz! 官方交流社區 (http://m.yu-jie.cn/) Powered by Discuz! X5.0