Robots.txt ile API Endpoint’lerini Engelleme

API endpoint’leri (örneğin, /api/v1/) genellikle robots.txt ile engellenir: `Disallow: /api/*`. Bu, gereksiz taramayı önler ve sunucu yükünü azaltır. Ancak, halka açık API’lerin engellenmesi istemci uygulamalarını etkileyebilir; `Allow` kurallarıyla denge sağlanmalıdır. Test için `curl -A "Googlebot" /api/` ile bot erişimi kontrol edilir. Güvenlik için, API’ler ayrıca kimlik doğrulama (örneğin, JWT) ile korunmalıdır.

Admin - (21.05.2025 18:01:33) ▲ 0