AIクローラーによる過度なアクセスへの対応方法
SEO最適化を進める中で、AIクローラーのアクセス量が予想以上に多いことに気づきました。CloudFlareの分析データを確認したところ、短期間で約20GB程度の転送量が発生しており、同じページが連続して何度も瞬間的にクロールされています。秒間あたりの同時接続数は10～20程度と推測されます。
このような重複クローリングが本当に必要なのか。。。
♥ 0 💬 0 👁 32
Log in to request work
Sign up
View profile
SAKURA WALLET / KYC
Messaging is available before KYC. Placing or accepting work, deposits, and payment receipt require a SAKURA WALLET account and KYC verification.
This user's listed skills
View more →
💻
Development
active
国内及び海外の暗号資産取引所を活用したアービトラージ・レイテンシーBOT開発
現在、FABLE5を利用して国内及び海外の暗号資産取引所のウェブソケットエンドポイントに接続...
伊藤 彰男
USD 30–
💻
Development
active
AI・MCPサーバー設計と導入
AIを活用したサービスにおいて、貴社で運用するシステムに対してMCPサーバーの導入とAIによ...
伊藤 彰男
USD 100–
💻
Development
active
AI Development Advisory
We implement AI-powered solutions including multilingual systems, content management,...
伊藤 彰男
USD 100–