Anomaly Detection: Search Console ڈیٹا میں غیر معمولی دنوں کی نشاندہی

Anomaly Detection آپ کے Search Console ڈیٹا کے ہر دن کا موازنہ آس پاس کے ہفتوں کے اسی دن سے کرتا ہے اور ان دنوں کو نشان زد کرتا ہے جو معمول کی حد سے نمایاں طور پر باہر ہوں۔ یہ clicks، impressions، CTR یا اوسط پوزیشن پر کام کرتا ہے، میڈین پر مبنی اسکور استعمال کرتا ہے تاکہ کوئی ایک انتہائی دن بنیادی سطح کو بگاڑ نہ سکے، اور ہر anomaly کو Low سے Critical تک درجہ دیتا ہے۔ ایک دوسرا چارٹ ان سست رفتار تبدیلیوں پر نظر رکھتا ہے جو کسی ایک دن میں دکھائی نہیں دیتیں۔

کسی دن کا اسکور کیسے بنتا ہے

1. بنیادی سطح (Baseline)۔ کسی دن کی متوقع قدر ان 8 قریب ترین دنوں کا میڈین ہوتی ہے جو ہفتے کے اسی دن آتے ہیں، چاہے پہلے ہوں یا بعد میں، اور اس دن کو خود شامل نہیں کیا جاتا۔ پیر کا موازنہ پیر سے کیا جاتا ہے، اس لیے ہفتہ وار تعطیل کی عام کمی کبھی anomaly شمار نہیں ہوتی۔ ایسے کم از کم 3 دن درکار ہیں، ورنہ اس دن کو اسکور نہیں دیا جاتا۔
2. پھیلاؤ (Spread)۔ عام تغیر ان دنوں کا median absolute deviation (MAD) ہے، جسے 1.4826 سے ضرب دیا جاتا ہے تاکہ اس کا موازنہ معیاری انحراف سے کیا جا سکے۔ اگر MAD صفر ہو تو اس کی جگہ mean absolute deviation استعمال ہوتا ہے۔
3. اسکور۔ z-score کسی دن کا میڈین سے فاصلہ ہے، جسے اس پھیلاؤ پر تقسیم کیا جاتا ہے۔ یہ وہی modified z-score ہے جو NIST engineering handbook میں outlier کی نشاندہی کے لیے بیان کیا گیا ہے، جہاں 3.5 کی حد تجویز کی گئی ہے۔
4. دو شرائط۔ کوئی دن صرف اسی صورت میں anomaly شمار ہوتا ہے جب اس کا اسکور آپ کی مقرر کردہ Sensitivity تک پہنچے اور وہ متوقع قدر سے کم از کم 10% دور بھی ہو۔ دوسری شرط ان سلسلوں میں معمولی حرکات کو نشان زد ہونے سے روکتی ہے جو بہت چھوٹے مگر نہایت باقاعدہ ہوں۔

Sensitivity کی حد 1.0 سے 4.0 تک ہے اور ڈیفالٹ 2.5 ہے: کم قدر زیادہ دنوں کو نشان زد کرتی ہے۔ شدت دراصل اسکور کو sensitivity کے گنا کے طور پر ماپتی ہے: 1.5 گنا سے کم Low، 2 گنا سے کم Medium، 3 گنا سے کم High، اور 3 گنا یا اس سے زیادہ Critical ہے۔

نتائج کو سمجھنا

• کارڈز: Anomalies، Spikes، Drops، اسکور کیے گئے دنوں میں anomaly کا حصہ، اور سب سے زیادہ انتہائی دن۔
• Actual vs expected with confidence band سلسلے، اسی دن کے میڈین اور ± sensitivity × مضبوط پھیلاؤ کی ڈیشڈ پٹی کو دکھاتا ہے۔ نشانات anomalies کی نشاندہی کرتے ہیں اور شدت کے مطابق رنگین ہوتے ہیں۔
• جدول میں Date، Weekday، Actual، Expected، Deviation، Z-score، Severity اور Direction (Spike یا Drop) درج ہوتے ہیں۔

Direction عددی بنیاد پر طے ہوتی ہے۔ Position کے لیے Spike کا مطلب ہے کہ عدد بڑھ گیا، یعنی رینکنگ خراب ہوئی، اور Drop کا مطلب ہے کہ بہتر ہوئی۔

رن کے بعد metric بدلنے یا سلائیڈر ہلانے پر اسکور براؤزر میں دوبارہ شمار ہو جاتے ہیں۔ رن کم از کم 90 دن کا احاطہ کرتا ہے؛ اس سے مختصر مدت کو پیچھے کی طرف بڑھا دیا جاتا ہے اور نتائج کے اوپر دیا گیا نوٹ استعمال شدہ تاریخیں بتاتا ہے۔ کم از کم مدت 21 دن ہے۔

EWMA چارٹ: سست رفتار تبدیلیاں

ایک مختلف سوال کے لیے EWMA control chart (small persistent shifts) کھولیں۔ ہر نئے دن کو 0.3 وزن دینے والی exponentially weighted moving average سلسلے کے میڈین کے گرد چلتی ہے، اور control limits ± sensitivity × مضبوط پھیلاؤ پر ہوتی ہیں، جو اوسط کے ابتدائی مرحلے میں تنگ رہتی ہیں۔ حدود سے باہر دنوں کا تسلسل، جس میں کوئی ایک دن بطور anomaly نہ ہو، اس بات کی علامت ہے کہ سطح بتدریج بدل رہی ہے۔ NIST کی handbook وضاحت کرتی ہے کہ EWMA charts چھوٹی اور تدریجی تبدیلیاں کیوں پکڑ لیتے ہیں جو روزانہ کی جانچ سے رہ جاتی ہیں۔ جب چارٹ ایسے تسلسل کی اطلاع دے تو Change Point Detection سے اس کی تاریخ معلوم کریں۔

جاننے کے قابل حدود

• یہ وقت میں دونوں طرف دیکھتا ہے۔ بنیادی سطح پچھلے ہفتوں کے ساتھ بعد کے ہفتے بھی استعمال کرتی ہے، اس لیے یہ ماضی کا جائزہ ہے، فوری الارم نہیں، اور حالیہ دن کا اسکور مزید ہفتے آنے پر بدل سکتا ہے۔
• تازہ ترین دنوں کا فیصلہ صرف تاریخ کی بنیاد پر ہوتا ہے، اور موازنے کے دن کم ہوتے ہیں، اس لیے ایک ہفتے بعد انہیں دوبارہ دیکھنا چاہیے۔
• غائب دن صفر شمار ہوتے ہیں۔ ڈیٹا میں خلا، یا ایسی property جو ونڈو سے نئی ہو، ایسی گراوٹیں پیدا کرتی ہے جو حقیقی نہیں ہوتیں۔
• CTR اور پوزیشن queries کے امتزاج کے ساتھ بدلتی ہیں۔ کوئی دن اس لیے غیر معمولی لگ سکتا ہے کہ آپ کی سائٹ مختلف تلاشوں میں نظر آئی، اس لیے نہیں کہ کچھ خراب ہوا۔ ردعمل دینے سے پہلے اس دن کی queries دیکھیں۔
• یہ بیان کرتا ہے، وجہ نہیں بتاتا۔ نشان زد تاریخوں کو ریلیزز، آؤٹیجز اور ranking update history سے ملائیں، اور وجہ کو annotation کے طور پر درج کریں۔

Anomaly alerts ایک الگ جانچ ہیں

Traffic anomaly الرٹ رول اس رپورٹ کو دوبارہ استعمال نہیں کرتا۔ یہ صرف تازہ ترین مستحکم دن کے clicks کا موازنہ حالیہ ونڈو کے میڈین سے کرتا ہے، گراوٹیں تلاش کرتا ہے، اور اس کی اپنی sensitivity ہے۔ انہیں Slack، Microsoft Teams یا webhook پر بھیجنے کے لیے alerts دیکھیں۔