تحليل ملفات السجل هو ممارسة فحص سجلات الوصول الخام لخادم الويب لمعرفة كيف تتفاعل زواحف محركات البحث وروبوتات التسوق مع الموقع بدقة: ما الصفحات التي تطلبها، وبأي معدل، وهل تواجه أخطاء أثناء ذلك. وبالنسبة إلى الكتالوجات المعتمدة على خلاصة المنتجات، فهو من الوسائل القليلة لتأكيد ما يراه Googlebot أو زاحف السوق الإلكتروني فعليًا، بدلًا من الاعتماد على ما تفترض الخلاصة وجوده. ويختلف عن معظم أدوات التحليلات لأنه يسجّل كل طلب يستقبله الخادم، بما في ذلك الطلبات الصادرة عن الروبوتات التي لا تظهر أبدًا في تقارير الزيارات القياسية.
لماذا يُعد تحليل ملفات السجل مهمًا
قد تكون خلاصة المنتجات سليمة البنية تمامًا، بينما صفحات الهبوط التي تشير إليها غير متاحة للزواحف بصمت، إما بسبب قاعدة robots.txt مضبوطة بشكل خاطئ، أو لأنها تُرجع أخطاء الخادم، أو لأنها تعيد التوجيه عبر سلاسل طويلة تتخلى عنها الزواحف قبل اكتمالها. يكشف تحليل ملفات السجل هذه المشكلات لأنه يعرض رموز حالة HTTP الفعلية وتكرار الزحف الذي يعيده الخادم إلى الروبوت، بمعزل عن أي شيء تدّعيه خريطة الموقع أو الخلاصة. ويؤثر ذلك مباشرة في أداء البحث العضوي: فصفحة المنتج التي لا تستطيع الزواحف الوصول إليها أو تواجه فيها أخطاء متكررة ستخرج في النهاية من الفهرس مهما كان محتواها محسّنًا. وفي الكتالوجات الكبيرة، يكشف تحليل السجلات أيضًا هدر ميزانية الزحف، أي حين يقضي الروبوت معظم زياراته في عناوين URL مفلترة قليلة القيمة بدلًا من صفحات المنتجات التي تحتاج فعلًا إلى الفهرسة.
كيف يعمل تحليل ملفات السجل
تسجّل سجلات الخادم كل طلب مع الطابع الزمني، ووكيل المستخدم (user agent) الطالب، وعنوان URL المطلوب، ورمز الاستجابة المُرجَع. وتقوم أدوات تحليل السجلات بتصفية هذه البيانات الخام لتقتصر على وكلاء المستخدم المعروفين للزواحف (Googlebot وBingbot والروبوتات الخاصة بالأسواق الإلكترونية)، ثم تجمّعها في أنماط: ما مسارات URL الأكثر زحفًا، وأيها تُرجع أخطاء 404 أو 500، وكيف تغيّر تكرار الزحف مع الوقت. وغالبًا ما تُقارن هذه البيانات بنتائج مقارنة أداء الخلاصة لمعرفة ما إذا كانت مشكلات الزحف ترتبط برفض المنتجات أو بتراجع الترتيب في فئات منتجات محددة، كما تغذّي لوحات التحليلات الخاصة بالخلاصة كمدخل إضافي إلى جانب بيانات النقرات والتحويلات.
مثال
<item>
<g:id>SKU-20956</g:id>
<title>Merino Wool Hiking Socks - 2 Pack</title>
<g:link>https://example-shop.com/products/merino-wool-hiking-socks</g:link>
<g:availability>in stock</g:availability>
</item>سيُظهر تحليل ملفات السجل لعنوان URL مثل الموجود في link ما إذا كان Googlebot يصل فعلًا إلى هذه الصفحة ويتلقى استجابة 200، أم يصطدم مرارًا بإعادة توجيه أو بخطأ قد يفسّر سبب عدم ظهور المنتج في الترتيب رغم أن إدخال الخلاصة مبني بشكل سليم.
مفاهيم ذات صلة
تكون قيمة تحليل ملفات السجل أعلى عند اقترانه بـمقارنة أداء الخلاصة، لأن أخطاء الزحف كثيرًا ما تفسّر فجوات الأداء التي تكتفي المقارنة بالإشارة إليها دون تشخيصها، وكذلك عند اقترانه بتتبّع أوسع لـالبحث العضوي، لأن إمكانية الوصول إلى الصفحات بالزحف شرط أساسي للترتيب أصلًا. وعند دمجه في المراجعة الدورية لـالتحليلات الخاصة بالخلاصة، فإنه يلتقط فئة من المشكلات تتعلق بالخادم لا بالخلاصة، ولا يمكن لأي قدر من تحسين العناوين أو الأسعار أن يعالجها بمفرده.