クローラーについての考察(2006年06月25日)
あるサイトのＳＥＯ/ＳＥＭ対策を任されており、Yahoo!カテゴリへの登録作業や検索エンジンへの上位ヒットを検証しているところである。
その中でクローラーが来た日時とクローラーされたページ数を調べるための方法を探している。
これには直接、サーバーのはき出したアクセスログを見ないといけないようだ。
簡単な抽出プログラムを作るが、ログが余りにも多すぎて時間がかかる・・・
何か良いツールが無いかと探していて見つけた参考になるページを残しておく。
クローラー - SEO 検索エンジン最適化 SEOの大家、住太陽先生のページが見つかった。
投稿者 : 2006年06月25日 21:07
Google：
←クリックでGoogle+1の桝田良一プロフィールに飛びます。Twitter：ツイート
以下のいいね！クリックやFacebookに投稿するためにはFacebookIDの取得が必要です。
トラックバック
このエントリーのトラックバックURL:
http://369ch.jp/mt335/mt-tb.cgi/1192