在大约一周之前，Google 悄悄掐掉了 Lynx 等纯文本浏览器的访问支持，使用 Lynx 或 w3m 访问 google.com 的时候会提示 Your browser isn't supported anymore. To continue your search, upgrade to a recent version. ，虽然动机未知，但可能与打击爬虫有关.
然后大伙找了半天，发现如下的两个 User Agent 还能用，一个是 Google 自家的 Bot，一个是 PSP 浏览器🤣：
Mozilla/4.0 (PSP (PlayStation Portable); 2.00)
AdsBot-Google (+http://www.google.com/adsbot.html)


Edit: 实际上类似 PSP 浏览器的老设备 UA 大概率都还行，因此可以推断封禁 Lynx 为故意为之.

ref:
https://news.ycombinator.com/item?id=45203881
https://news.ycombinator.com/item?id=45201692
https://github.com/Nv7-GitHub/googlesearch/issues/113
 
 
Back to Top