アカウント名:
パスワード:
>>検索エンジンのクロールの方がよっぽど無駄に帯域食ってるでしょうに。
でも、そういう意見は何故か見つからなかったり。クローラが悪さしてる、って例を調べると、百度のクローラの例はゴマンと出てくるのに、それ以上、派手にクローラ流してるグーグルの事って、ググッても出てこないんですよね。
百度は、かつて、数アクセス/秒の「攻撃」と言えるぐらいの酷いGETをしましたから、別格かと思います。 今はまともらしいですが、かつてのそんなアクセスの時に robots.txt に Disallow: を書き加えてそのままのWebサイトが結構あるかも。
より多くのコメントがこの議論にあるかもしれませんが、JavaScriptが有効ではない環境を使用している場合、クラシックなコメントシステム(D1)に設定を変更する必要があります。
犯人は巨人ファンでA型で眼鏡をかけている -- あるハッカー
そんなことより (スコア:1, すばらしい洞察)
ブログの本文検索のログに「のでは」なんて残ってて、誰が検索してるのよ?とか思ったらグーグルのクローラだったりするし。
Re: (スコア:1)
>>検索エンジンのクロールの方がよっぽど無駄に帯域食ってるでしょうに。
でも、そういう意見は何故か見つからなかったり。
クローラが悪さしてる、って例を調べると、百度のクローラの例はゴマンと出てくるのに、
それ以上、派手にクローラ流してるグーグルの事って、ググッても出てこないんですよね。
Re:そんなことより (スコア:1)
百度は、かつて、数アクセス/秒の「攻撃」と言えるぐらいの酷いGETをしましたから、別格かと思います。
今はまともらしいですが、かつてのそんなアクセスの時に robots.txt に Disallow: を書き加えてそのままのWebサイトが結構あるかも。