User-agent: * Allow: / # SEO 友好的 Sitemap 位置 Sitemap: https://omakase.tw/sitemap.xml # 允許所有搜索引擎索引主要內容 Disallow: /admin/ Disallow: /api/ Disallow: /*.json$ Disallow: /temp/ Disallow: /cache/ # 爬取延遲設定(對服務器友好) Crawl-delay: 1 # 特定搜索引擎規則 User-agent: Googlebot Allow: / Disallow: /admin/ User-agent: Bingbot Allow: / Disallow: /admin/ User-agent: Slurp Allow: / Disallow: /admin/ # 社交媒體爬蟲 User-agent: facebookexternalhit Allow: / User-agent: Twitterbot Allow: / # 廣告相關爬蟲(對 AdSense 重要) User-agent: AdsBot-Google Allow: / User-agent: Mediapartners-Google Allow: / # 圖片搜索 User-agent: Googlebot-Image Allow: / # 移動搜索 User-agent: Googlebot-Mobile Allow: /