アカウント名:
パスワード:
>約1カ月間に、中川容疑者の自宅のパソコンなど特定の端末から計約6万4千回のアクセスがあり、その影響でホームページの閲覧は21回停止されていた
この程度で落ちるようではGoogleのクローラーにすら耐えられないのでは・・・。
普段クローラーがあまり来ないほど価値の無いコンテンツしか無いのか、アクセスされたページがよほどレベルの低いスクリプトか何かだったのか。。(図書の検索とか?)もっとお行儀の悪いSpam系のbotが来たら瞬殺だよこりゃ。
Google のクローラーなどは基本的に 1 リクエストが 15 ~ 30 秒に 1 回で、かつ If-Modified-Since 付きで送ってくれるなどしてくれますので、全然負荷が異なると思いますけど。
一番迷惑なのは作りかけ系とかの試作クローラー系。大抵この手の配慮が甘く、かつそのシステムの更新→再実行頻度も既存の安定稼働物よりも動作頻度が高い傾向があるため、負荷に直結しやすい。また、同時に複数接続した上で間断なく一気に拾っていくものとかもあります。 百度よりひどいレベル、と言えば参考になるでしょうか。少なくとも国内の企業や大学辺りとかからだけでも数件は確認している、という感じですね。 もっとお行儀の悪い……はこっちの方を言っているのだと思いますが。
静的コンテンツか動的コンテンツかで負荷の差が違いすぎるけど、静的コンテンツ主体でも延々と回線いっぱいに持って行かれるのはきついです。
より多くのコメントがこの議論にあるかもしれませんが、JavaScriptが有効ではない環境を使用している場合、クラシックなコメントシステム(D1)に設定を変更する必要があります。
UNIXはシンプルである。必要なのはそのシンプルさを理解する素質だけである -- Dennis Ritchie
なんという貧弱さ (スコア:1)
>約1カ月間に、中川容疑者の自宅のパソコンなど特定の端末から計約6万4千回のアクセスがあり、その影響でホームページの閲覧は21回停止されていた
この程度で落ちるようではGoogleのクローラーにすら耐えられないのでは・・・。
普段クローラーがあまり来ないほど価値の無いコンテンツしか無いのか、アクセスされたページがよほどレベルの低いスクリプトか何かだったのか。。(図書の検索とか?)
もっとお行儀の悪いSpam系のbotが来たら瞬殺だよこりゃ。
Re:なんという貧弱さ (スコア:2, 興味深い)
Google のクローラーなどは基本的に 1 リクエストが 15 ~ 30 秒に 1 回で、かつ If-Modified-Since 付きで送ってくれるなどしてくれますので、全然負荷が異なると思いますけど。
一番迷惑なのは作りかけ系とかの試作クローラー系。大抵この手の配慮が甘く、かつそのシステムの更新→再実行頻度も既存の安定稼働物よりも動作頻度が高い傾向があるため、負荷に直結しやすい。また、同時に複数接続した上で間断なく一気に拾っていくものとかもあります。
百度よりひどいレベル、と言えば参考になるでしょうか。少なくとも国内の企業や大学辺りとかからだけでも数件は確認している、という感じですね。
もっとお行儀の悪い……はこっちの方を言っているのだと思いますが。
静的コンテンツか動的コンテンツかで負荷の差が違いすぎるけど、静的コンテンツ主体でも延々と回線いっぱいに持って行かれるのはきついです。