1.什么是robots.txt协议 是网络爬虫跟网站之间的一种约定协议，告诉网络爬虫网站中哪些页面信息可以抓取…
阅读全文了解网站的robots协议是什么
发表回复
作者归档：feiyanggeboke
HTTP状态码是指什么呢？
http状态码是表示网页服务器http响应状态的3种数字代码。 当我们在互联网浏览网页的时候，如果网页响应…
阅读全文什么是网络爬虫？
这些在后面的光年日志分析工具的使用和查看中会详细地讲解到
阅读全文外链的概念
今天飞扬哥就带着大家了解一下外链的一些概念。 其实外链就是指在网站的页面链接在别的网站上出现的情况。一般会被认…
阅读全文如何区分网站的链接
网站的链接根据类型分为：内链和外链 其中外链是我们后面优化网页的一个重要的手段，在后面如何通过外链优化网页会详…
阅读全文网页的权重和PR值是什么意思？
PR值：是谷歌用于用来标识网页的等级、重要性的一种方法，是谷歌用来衡量一个网站的好坏的重要标准之一。 注意点：…
阅读全文什么叫做关键词的分类？
首先说明一下，这里所说的“关键词”跟上一节提到的TDK标签定义和查看中的keyword是有区别的，TDk标签中…
阅读全文TDK标签的定义与查看
接下来这一节我们会从TDK标签的定义和查看方法两方面给大家讲解： TDK标签定义：指的是t-title，即网页…
阅读全文独立IP和共享性IP的判断方法详解
讲本节接着给大家讲解IP的分类和判断方法。首先我们了解一下IP类型是如何划分的 而两者区别就在与对seo的影响…
阅读全文详解IP和域名、网站的关系
在弄懂这三者的关系前，我们先了解一下什么叫“IP”。 IP概念：在网络上有成千上万台主机，为了区分这些主机，人…
阅读全文