User-agent: * Allow: / # 不要なパラメータURL・モーダルURLはクロール抑制 Disallow: /*?lightbox= Disallow: /*?preview= Disallow: /*?share= Disallow: /*?fbclid= Disallow: /*?gclid= Disallow: /*?yclid= Disallow: /*?utm_ # 不要なBotはブロック User-agent: PetalBot Disallow: / # SEO調査系Botはクロール間隔調整 User-agent: dotbot Crawl-delay: 10 User-agent: AhrefsBot Crawl-delay: 10 Sitemap: https://www.terrasky-tech.co.jp/sitemap.xml