今天看到这个帖子《腾讯云注册“良心云”商标快手、抖音和百度最近的小动作》,原帖楼主的观点看就不敢苟同,不加以推断就用上自己的主观观点做结论,实在马虎。我一看是前天的帖子,就懒得在原帖反驳了,所以另开新帖。原帖楼主的观点请看下图。图片加载慢的直接看引用
引用原来的文字:“
发现2
百度区别对待tiktok和kwai?
搜索“tiktok”和“kwai”以及“tiktok.com”“kwai.com”就知道差异了
也是百度投资过快手字节跳动可是搞搜索又搞百科的能一样?”
我就反驳他的观点2,他的观点是百度区别对待tiktok和kwai。
我开始反驳了
反驳(1):robots.txt文件反驳法
大家打开tiktok的robots文件https://www.tiktok.com/robots.txt,懒得打开的直接看下图我截的图:
tiktok的robots文件明明白白的写着:
User-agent:Googlebot
User-agent:Applebot
User-agent:Bingbot
User-agent:DuckDuckBot
User-agent:Naverbot
User-agent:推特bot
User-agent:Yandex
Allow:/
User-agent:Baiduspider
User-agent:360Spider
User-agent:Yisouspider
User-agent:Sogouspider
Disallow:/
User-agent:*
Allow:/trending
Allow:/discover
Allow:/about
Allow:/legal
Allow:/safety
Allow:/forgood
Allow:/community-guidelines
Allow:/tag
Allow:/music
Allow:/embed
Allow:/share
Allow:/amp
Sitemap:https://www.tiktok.com/tos/node/sitemaps/sitemap.xml
Sitemap:https://www.tiktok.com/tos/node/sitemaps/sitemap_tag_jpagency_index_20200509_-1553821641.xml
Sitemap:https://www.tiktok.com/tos/node/sitemaps/sitemap_tag_jpagency_index_20200525_-1553821583.xml
Sitemap:https://www.tiktok.com/tos/node/sitemaps/sitemap_tag_jpagency_index_20200615_-1553820653.xml
也就是可以爬取tiktok任何目录的爬虫:苹果公司的爬虫、谷歌爬虫、微软bing爬虫、duackduakgo爬虫、韩国搜索引擎naver的爬虫、推特爬虫、俄罗斯搜索引擎Yandex的爬虫
任何目录都不给爬的爬虫:百度爬虫、360爬虫、神马爬虫、搜狗爬虫
第三点是其他爬虫只能爬取指定的目录:所以我尝试头条搜索搜索tiktok,果然看下图:
所以tiktok自己屏蔽国内其他搜索爬虫唯独放过头条搜索爬虫,这就导致国内搜索只有头条搜索还有bing(这个沾了是外国搜索引擎的光)才能搜到tiktok的爬虫
快手国际版根本不存在网站robots文件,所以百度等国内搜索抓取正常正常
反驳(2)模拟各爬虫分别访问tiktok和kwai:测试结果两个都没有从ua上屏蔽国内搜索爬虫,也就是说tiktok只从robots文件上屏蔽了国内爬虫
反驳(3):原帖子的观点:“字节跳动可是搞搜索又搞百科的能一样?”,曾经360搜索刚出来的时候,责任可能不知道,360份额一下暴增到国内第二大搜索引擎,也出了搜索和百科,百度动摇了吗?神马接着uc的风头,也曾不可一世,百度动摇了吗?搜狗更是集成了原来腾讯的搜搜,搜狗只是直接深度集成到微信当中,微信的搜索基本上是搜狗在服务的,这样就导致搜狗反超360、神马成为全国第二大搜索,搜索份额近百分之15,搜狗也有百科的,百度也不见害怕。现在头条搜索的份额,低的可怜,百度怕的什么?
结论:所以原贴的结论根本没经过推断和推敲,原帖所谓的:“搜索“tiktok”和“kwai”以及“tiktok.com”“kwai.com”就知道差异了
也是百度投资过快手字节跳动可是搞搜索又搞百科的能一样?””这样的主观臆测即结论根本站不住脚
这里@index.html,欢迎原帖楼主过来讨论
-----------------------------------------------------
**网友回复**:
主观臆断,他不香吗,以自己的想法为中心,他不爽吗
网友回复:
楼主直接就事论事反驳原贴就好了,不要扩大范围到‘现在的人都喜欢’,直接说‘有的人’会好点
网友回复:
我只是随手一搜
根本没做“研究”来就来水贴了
别人都盯着第四条你竟然不按常理出牌
网友回复:
引用:nicestill发表于2020-8-511:13
applebot是干嘛用的最近也看到了
网友回复:
引用:Alanku发表于2020-8-511:11
楼主直接就事论事反驳原贴就好了,不要扩大范围到‘现在的人都喜欢’,直接说‘有的人’会好点...
网友回复:
引用:index.html发表于2020-8-511:13
我只是随手一搜
根本没做“研究”来就来水贴了
网友回复:
引用:mryin发表于2020-8-511:19
一是原帖有两天了,我怕我的观点会作为普通的一条留言,后面的人看得到,前面的人接受了既有的观点,也不...
网友回复:
引用:index.html发表于2020-8-511:24
别
以有的人...开头
这样显得阴阳怪气指桑骂槐之感虽然不是骂槐而是讨论
网友回复:
引用:mryin发表于2020-8-511:19
一是原帖有两天了,我怕我的观点会作为普通的一条留言,后面的人看得到,前面的人接受了既有的观点,也不...
网友回复:
引用:index.html发表于2020-8-511:24
别
以有的人...开头
这样显得阴阳怪气指桑骂槐之感虽然不是骂槐而是讨论
网友回复:
引用:mryin发表于2020-8-511:21
我没买腾讯的产品,所以对于良心云这字样就不会敏感。我是看你id:index.html,所以我觉得你不应该是忽略...
网友回复:
引用:mryin发表于2020-8-511:37
就这标题了,还是这标题好