2月6日信息 近日，海外SEO从事者Eli Schwartz共享了他应用Splunk的几个心得。下列为Eli Schwarz（下文中的“我”）共享的工作经验：
想必每一个对SEO技术性感兴趣爱好的站长都期待可以从更深层次次掌握网站构架、和谷歌检索模块的排名标准等。从我这些年科学研究SEO技术性的工作经验看来，深层次剖析网站浏览系统日志可以让我更掌握检索模块是怎样“看待”网站的，而在诸多网站剖析专用工具中，Splunk无疑是最使我安心、也是最好用的1款。
注：Splunk是设备数据信息的模块。能用于搜集、数据库索引和运用全部运用程序流程、服务器和机器设备(物理学、虚似和云中)转化成的迅速挪动型测算机数据信息 。
1、监测网站URL是不是已被谷歌爬虫抓取（百度搜索蜘蛛、yahoo爬虫亦可监测）
当网站转化成了1个新的网页页面，站长们最关注的当然是网页页面的收录难题。假如以快照做为指标值，也许得在谷歌爬虫抓取后的几日（乃至几个礼拜）才可以明确是不是已被收录。要快点儿的话，能够立即在检索模块中检索有关网页页面的题目。
而最切实可行的就是查询网站系统日志，即可明确网页页面是不是已被谷歌爬虫抓取。这就该用到Splunk了。
实际流程：
1、最先挑选要查寻的時间段。時间段越短，回应速率当然越快，因此尽量减少查寻的時间差。
2、在查寻框中键入下列查寻句子：
Index = {the name of your index} url stub AND googlebot
例如：假如你数据库索引名是“Primary”，URL是“free-trial.html”，则查寻句子为：
Index=primary free-trial.html AND googlebot
1、查询系统日志
2、搜索404网页页面
404网页页面是1种很招人烦的物品，98%的访客在看到404网页页面时，常常都会立即关掉网页页面。这样1来，你的网站不但损害了1次展现內容或商品的基本上，客户还默默的在内心给了你个差评。你：之后还来大家网站吗？客户：呵呵。
针对404网页页面，你能够挑选应用ScreamingFrog之类的专用工具来搜索修补。可是在无效网页页面数量太多的状况下，你就该客观事实系统日志分析了。根据系统日志分析，你能够找出那些数最多人浏览的404网页页面，有挑选的来修补网页页面、或是做自动跳转。
设定Splunk来搜索404网页页面：
1、最先挑选搜索時间差，我一般将其设为30天，你们能够按需随便设定。
2、在查寻框中键入下列查寻句子：
Index = {the name of your index} status = 404 | top limit = 50 uri
限定数量可自主明确，我较为喜爱定为50条URL。查寻句子实行进行后，点一下Statistics选项，即可在目录中找出访客数最多的404网页页面们。
2、搜索404网页页面
3、搜索设定过302自动跳转的网页页面
不一样于301自动跳转，302自动跳转属于临时重定项。但是在许多连接使用价值检测中，302都能根据检测，并且也是有排名。但因为前些年，很多黑帽SEO根据这项技术性来获得排名，现如今许多检索模块都加大了对其的严厉打击幅度。因此302自动跳转只能用于那些只需做临时自动跳转的网页页面。
根据Splunk搜索302自动跳转网页页面的流程：
1、一样也是先挑选搜索時间段，可按需设定，我喜爱将其设为30天。
2、键入以下查寻句子：
Index = {the name of your index} status = 302 | top limit = 50 uri
跟搜索404网页页面1样，可按需设定。
3、搜索302自动跳转网页页面
4、统计分析每日被谷歌检索模块抓取的网页页面
假如你有效过谷歌管理方法职工具，那末你对谷歌抓取URL的展现网页页面1定不生疏。但这些数据信息是不是精确，你得查询网站系统日志才可以明确。
应用Splunk查寻每天抓取的URL流程：
1、一样也是选择時间，我還是喜爱设为30天（假如数据信息较多能够7天为企业）。
2、键入查寻句子：
index ={name of your index} googlebot | timechart count by day
查寻句子实行完后，点一下Statistics选项，则会看到谷歌爬虫每日抓取的网页页面数据信息。也可点一下“visualization”选项查询转变详细信息。
4、谷歌爬虫每天抓取网页页面
5、统计分析谷歌挪动端爬虫每天抓取网页页面
伴随着挪动互联网技术的发展趋势，挪动检索也愈发关键。假如想了解谷歌挪动爬虫每日抓取的URL数量，就没法应用谷歌管理方法职工具了。那末，就只能根据网站浏览系统日志来查询该数据信息。
下面以iPhone为例，应用Splunk查寻：
1、一样也是选择時间，我還是喜爱设为30天（假如数据信息较多能够7天为企业）。
2、键入下列查寻句子：
index ={name of your index} googlebot AND iphone | timechart count by day
句子实行结束后，点一下Statistics选项，即可得出所需数据信息，与PC端1样，还可以在“visualization”选项中查询更多详细信息。
5、谷歌挪动爬虫每天抓取网页页面
6、找出消耗爬虫抓取量的废弃物网页页面
站长们都了解，检索模块对每一个网站的抓取数量都有1定的限定，网站的PR或权重不一样，抓取“限额”也各不相同。因此，假如网站中的废弃物网页页面被抓取，那末高质网页页面则将会会丧失被抓取的机遇。
假如不清晰谷歌爬虫的爬取相对路径，则没法了解谷歌抓取限额的运用率。这时候候，就必须应用Splunk来检验了。
流程以下：
1、挑选時间段，可随便选择，最好是挑选好几个开展比照。
2、键入下列查寻句子：
index={name of your index} googlebot uri_stem=”*”| top limit=20 uri
限定数量可随便选择，但20条是较为好管理方法的。与以前1样，实行完句子后，点一下statistic选项，然后即可在目录中找出你感觉应当移除的网页页面，在robots.txt文档中将其屏蔽。
6、挑选需屏蔽网页页面
7、500不正确网页页面
当服务器没法进行HTTP恳求时，则会回到500不正确网页页面。许多情况下，500不正确对SEO工作中都存在1定的负面危害。实际上，在500不正确危害到检索排名时，谷歌便会根据管理方法职工具向站长推送恳求终断信息内容，但是这类信息内容一般要24小时后才可以接受到。
除危害检索模块排名外，500不正确网页页面也会减少网站的客户体验度。而添加Splunk专用工具的Enterprise方案则可即时监管500不正确。
流程以下：
1、检索以下查寻句子：
index={name of your index} AND “status=5*”
2、点一下“Save As”随后在往下拉菜单选中择“Alert”。
3、取名Alert。
4、将Alert的情况改成“Real Time”。
5、点一下“Next”。
6、在下个网页页面，会出現“Send Email”选项。
7、在键入框中键入电子邮件，随后点一下“Save”。
7、即时监管500网页页面
总结
Splunk能够用于多种多样SEO工作中，能够给工作中带来很大的便捷性。假如还没用过的站长们，何不尝试下哦！