mt-search.cgi が悪いのか?robot が悪いのか? : 電気ｳﾅｷﾞ的○○ mobile ver.

この間､ﾁﾗっと書いたけど､このﾌﾞﾛｸﾞを動かしているｻｰﾊﾞが時々落ちる｡いや､正確には落ちはしないんだけど､SWAP 領域を食いつぶして OOM Killer がﾌﾟﾛｾｽ殺しまくるが追っつかず､完全に固まった状態になってしまう･･･

しばらくしたら自然に復旧することもあるし､数時間そのまんまのこともあるし､発生する頻度もまちまち｡

今､ﾛｸﾞで調べてみたら､

3/4
3/13
3/14
3/19
3/23
3/24
3/25
4/3
4/5

こんな感じで発生している｡

この状況になったらﾒｰﾙが飛んでくるんだけど､自社のﾃｽﾄ用ｻｰﾊﾞだから面倒臭いときはそのまま放置なんだよね(笑)

でも､4/3､4/5 と連続で｢再起動しないといけないほどの状況｣になったので真面目に対応することにした｡

/var/log/messages を見ると､OOM Killer が殺してるﾌﾟﾛｾｽがほとんど httpd か mt-search.cgi だし､access_log 見ると､固まる前には大量のﾛﾎﾞｯﾄ型検索ｴﾝｼﾞﾝからの mt-search.cgi へのｱｸｾｽが発生している｡

どうも原因は mt-search.cgi への大量ｱｸｾｽによる過負荷のようだ｡

ほとんどが､Bing か NHN だ｡

Bing と言えば MSN の検索ｻｲﾄ｡まったく､Microsoft は何してくれてんねん!!

あと､NHN｡お前は韓国の会社やろ?他国のｻｰﾊﾞに迷惑かけてんじゃねえよ､実際｡

つｰことで､

User-Agent: *
Disallow: /mt/mt-search.cgi

という内容の robots.txt を置いた｡

まあ､robots.txt というのは紳士協定で､守らなきゃ守らないでもいいんだけど､いくらなんでも Microsoft も NHN も大手企業なんだから守るやろう(笑)

ということで､これでしばらく様子を見ることにしよう｡

ｺﾒﾝﾄ(1)

次の記事へ >
< 前の記事へ
TOPへ戻る