Skip to content

SEO 和 蜘蛛介绍和工作

SEO 和蜘蛛的关系

简单的SEO图

image.png

请求的 Curl 示例

模拟 agent 来访问某个页面, 用来判定结果是否符合预期

$ curl -H "user-agent: Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)" \
https://baidu.com/ -o index.html

$ curl -H "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)" \
https://baidu.com/ -o index.html
$ curl -H "user-agent: Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)" \
https://baidu.com/ -o index.html

$ curl -H "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)" \
https://baidu.com/ -o index.html

常用的蜘蛛头

百度

来源地址 : https://ziyuan.baidu.com/crawltools/index

Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)
Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)

Google

来源地址 : https://developers.google.com/search/docs/advanced/crawling/overview-google-crawlers

Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Googlebot/2.1; +http://www.google.com/bot.html) Chrome/W.X.Y.Z Safari/537.36
Googlebot/2.1 (+http://www.google.com/bot.html)
Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Googlebot/2.1; +http://www.google.com/bot.html) Chrome/W.X.Y.Z Safari/537.36
Googlebot/2.1 (+http://www.google.com/bot.html)

全球完整的 agent 头信息

SEO 工作内容

A.我司需做工作:

a、官网文章辅助更新

每月提供 3-4 篇的官网原创文章;

b、会把云链平台开放,提供友链交换平台,

1、贵司可在平台上面自由交换友链;

2、也会提交友情需求给到友链部门,一旦有合适的友链会直接提供给贵司上链; c、每天机器人发布 30-40 篇大数据文章,发布网站外链,为网站引流;

d、给到合理的网站的 TDK 建议,辅助贵司在网站后台设置;

e、推广 60 天,每 30 天发送月度数据汇报,其中包含本月的关键词排名以及后续推广建议,本月所做工作的不足之处;

f、适时建议贵司增加关键词推广,或者更换其中一部分不适合推广的关键词,给到合理的关键词推广建议;

g、重要邮件及时通知,未回复会于最迟当天致电避免延误重要事项;

h,推广后台扣费可导出扣费明细实时查询;

I,推广后台实时监控网站 TDK 变化以及网站是否可以正常访问,如果异常需在当天微信或者电话告知;

J,提供给贵司网站优化方案,需要贵司安排技术调整网站项,并将时间节点与贵司确认并督促配合工作;

B:技术负责项

1,网站优化方案会在广告计划上线投放 1-2 周内出具提供,需贵司安排人员确认之后安排对应技术人员修改

(一般为 1-2 周时间) 2,网站 TDK 设置;

3,网站整体图多文字较少,不利于搜索引擎的抓取爬行,收录网站页面;

4,网站首页链接较少,建议添加内链跳转;例如上分教学中的 4 张图片,添加跳转链接,有利于蜘蛛爬取网站信息;

贵司若进行网站改版,建议网站:

1、首页必须要有友情链接板块,新闻资讯板块。

2、每页页面必须要有正确的面包屑。

3、新闻、案例、视频、方案等要有上下篇。

4、新闻、案例、视频、方案、产品要有相关链接。其中,产品必须使用图文形式。

C,贵司负责项:

1,建议安排负责推广的专员对接,所以事宜交由一人负责;

2,关键词相关的新闻文章更新频次低,与关键词相关度低,需定期合理更新,建议一周 3-5 篇,更新规范如下或与小故详细沟通;

3,每天提交发布 1-2 篇的云文章,发布到各大平台,提高网站的曝光率,为网站发布外链;

4,与小故一同督促网站项的修改调整;

5,有任何事宜及时反馈,小故好根据贵司的反馈及时对推广或者关键词做出调整;

6,建议贵司安装百度流量统计,以便于统计网站每日的浏览量以及访问量;

TDK

指网站中一个页面的标题 T title,

关键词 K keyword,

描述 D description

在页面代码中展现,供搜索引擎识别页面内容

每个网站都有非常多的页面,每一个页面我们都应合理设置好该页面的标题,关键词以及描述 告诉搜索引擎该页面的主题是什么,该页面的重点词汇是什么,以及对标题进行补充的描述内容

只有设置好搜索引擎才能知道这个页面的内容方向和主体,从而判断整站主体与关键词的相关性,才能 给到相应的关键词排名

1,如何设置 TDK:

标题设置规范:首页栏目页 2-3 个关键词+公司简称,详情页 1-2 个关键词+公司简称,页面内容里需要有此关键词体现

关键词设置规范:首页栏目页 2-8 个,子栏目 1-3 个,详情页 1 个,设置页面内容里需要有此关键词体现

描述设置规范:100 字内,对标题的补充或介绍公司主营业务,可适当布局推广关键词

2,站内文章规范:

相关性:标题包含推广关键词短词,文章中出现几次该关键词,选择文章前 100 字出现的该关键词做一个锚文本链接,链接官网首页或关键词对应的产品页面

原创度:文章要包含一定的原创度,原创度低于 30%就不会被收录,没有起到作用,经常转载和完全复制其他地方的软文,会被搜索引擎飓风算法打击,减少站内的收录率以及信任度

3,云文章规范:

关键词:一篇文章选择一个推广关键词作为主题,标题包含该关键词,文章包含几次该关键词,选择文章前 100 字出现的该关键词做一个锚文本链接,文本内容填该关键词,链接地址为官网首页,勾选在新窗口打开

内容规范:需在 TXT 记事本里清除格式再复制到云文章,或直接编辑,字数 500 字-1500 字,须有配图,不可以有二维码,建议不带联系方式,联系方式可以单独提交广告短语,须有 30%以上的原创度,不可完全转载自其他站点的文字内容,合理通顺,敏感词需修改为近似词,提交后平台全选

其他:站内文章更新后可以同步发布云文章

补充工作

一、网站优化

1.导航栏目:需要有首页、产品中心/业务中心、新闻资讯、联系我们;

2.首页:需有产品中心/业务中心、新闻资讯的板块,产品中心业务中心板块调取导航栏目

产品中心/业务中心的内容,并且需要加上超链接,可以点击跳转产品中心/业务中心的详情

页;新闻中心同样,

3.友链板块:在首页底部设置即可;

4.网站首页底部或者头部需要添加较为醒目的联系方式;

5.内页需要有面包屑导航,指明所处位置,方便用户跳转页面,提高用户体验;

6.网站404页面设置,为了避免网站链接错误的情况,提醒用户返回上一页或者首页;