設為首頁

收藏本站

導覽首頁 | 新登場    ◇聯盟溫泉 | 民宿 | 人力銀行 | 女性 |

類型:Linux_commend

SEMRush Bot ,封鎖惱人機器人的辦法
很多人的伺服器常常會因為機器人的騷擾而發生資源漏溢的情況。為了在谷歌引擎有好的表現,接受谷歌機器人是必要的,而通常,谷歌機器人並不會有過度擾動的情況。
相對於谷歌機器人,SEMRush Bot有幾十隻,幾乎隨時隨地在吃伺服器的資源。而更重要的問題是,沒有人可以明確說書SEMRush Bot對網站經營者的任何價值。
因此,禁止SEMRush Bot也就成為大家探討的方案。
有人傻傻的依據SEMRush官方的說明透過robot.txt來做,過程複雜,效果有限。
伺服器是自己的,從防火牆IP來做是最簡單而有效的方式。
一,使用CSF防火牆
二,手動禁止SEMRush Bot 所有機器人訪問。

# csf -d 46.229.0.0/16
(由於SEMRush Bot有幾十隻,一一禁止很麻煩,所以,用IP池/16或/24來禁止訪問會比較有效。)
最後,還記得要重啟csf (csf -r)才會生效。

重啟csf之後,用iftop指令檢視,就會看見原來密密麻麻的SEMRush Bot已經不見蹤影了。

104休閒信箱 2.3.0 © 104mm.com 2001 - 2019. 您尚未登錄
Page generated in 0.00432706 seconds with 3 Queries