由 HTTP header fields 發出 Google robots no index

cola · 2021年04月26日07:15

網站或網頁在部份特殊情況下不想被 google 索引~
一般都會在 html 的 head meta 裡加上註記

<meta name="robots" content="noindex">

(使用情境)
如果是 圖片 或 PDF 等 binary 檔，html 的解法就無法執行…
但其實是可以由 nginx 端在 http header 加料的~

location ~* \.pdf$ {
  add_header X-Robots-Tag "noindex, nofollow";
}

or 

location ~* \.(png|jpe?g|gif)$ {
  add_header X-Robots-Tag "noindex";
}

當然~ 也可以由應用端加料~
e.g. PHP

header('X-Robots-Tag: noindex');
header('X-Robots-Tag: noindex, nofollow');