机器人的眼睛与用户不同

这是因为某些网站可以根据用户或机器人提供不同的内容。

例如,用户的在线商店可能会根据居住地区提供不同的内容。

黑色搜索引擎优化的方法——叫做“伪装”该术语来自英文单词 to cloak - 掩盖、隐藏、隐藏 - 为用户和搜索引擎机器人提供不同内容的网站。

Yandex 和 Google 此类网站被归类为低质量网站,并已宣布对伪装行为进行严厉处罚,从悲观到禁止。

伪装的一个显着例子可以作为链接目录,隐藏机器人的直接链接,但向一个不明白为什么他的链接在搜索引擎中不可见的简单用户展示它们。

请注意,如果用户以授权(通过登录名和密码)查看网络资源,则伪装不包括显示网络资源的各种内容。与伪装无关的还有查看具有不同 URL 变量(例如 URL = user 和 URL = bot)的动态页面。

查看 HTML 页面代码

我们的在线网站管理员工具可让您通过 Googlebot 抓取工具和 Yandex 抓取工具的眼睛查看 HTML 代码。
HTTP 用户代理列表:
用户 - 我是 Mozilla / 5.0 (Windows NT 6.1; WOW64) AppleWebKit / 537.36 (KHTML, like Gecko) Chrome / 91.0.4472.135 YaBrowser / 21.6.2.854 Yowser / 2.5 Safari / 537.36<

APIs-Google - Google PIs-Google 机器人(+ https://developers.google.com/webmasters/APIs-Google.html)

Adsense - Google Mediapartners-Google Robot

AdsBot Mobile Web Android - Google Mozilla / 5.0 机器人(Linux;Android 5.0;SM-G920A)AppleWebKit(KHTML,像 Gecko)Chrome Mobile Safari(兼容;AdsBot-Google-Mobile;+ http://www.google .com/mobile/adsbot.html)

AdsBot Mobile Web - Google Robot Mozilla / 5.0(iPhone;CPU iPhone OS 9_1,如 Mac OS X)AppleWebKit/601.1.46(KHTML,如 Gecko)版本/9.0 Mobile/13B143 Safari/601.1(兼容;AdsBot-Google - 移动;+ http://www.google.com/mobile/adsbot.html)

AdsBot-Google(+ http://www.google.com/adsbot.html)AdsBot - Google 机器人)

Googlebot 图片 - Googlebot Googlebot-Image / 1.0

Googlebot 新闻 - Google 机器人 Googlebot-新闻

Googlebot Video - Google 机器人 Googlebot-Video / 1.0

Googlebot - Google 机器人 Mozilla / 5.0(兼容;Googlebot / 2.1;+ http://www.google.com/bot.html)

Mobile Adsense - Google Robot(兼容;Mediapartners-Google / 2.1;+ http://www.google.com/bot.html)

Android 移动应用 - Google AdsBot-Google-Mobile-Apps 机器人

查看网站的html页面

此工具将使用代码语法高亮显示页面的 html 代码。现在可以直观地查看 html 文档。

html 文档查看器基于使用 PHP 脚本接收数据。

查看网站的 html 页面是学习如何使用 HTML 标记、CSS 和 JS 编写 Web 文档的第一步。