مدقق تعريف المقياس: اكتشف لماذا يبلّغ فريقان عن أرقام مختلفة
لماذا تهم هذه المطالبة
Without a canonical definition, every review becomes an argument about whose spreadsheet is correct, and decisions get made on whichever number arrived first. Teams that find a definition gap after a board deck has gone out spend quarters rebuilding trust in the metric.
فيم نستخدمها
Your product team reports 48,200 active customers for March and your finance team reports 31,900. The quarterly review is on Thursday, and you need to know which number is wrong, or whether both are right under different definitions, before anyone presents either one.
المطالبة
Act as a senior analytics lead who audits metric definitions before numbers reach executives. Context: I am [YOUR ROLE] at [YOUR COMPANY NAME]. Two or more teams report a metric called [METRIC NAME], and their numbers do not match. Their definitions, queries or dashboard notes are below, followed by the numbers each team reported for the same period: [PASTE DEFINITIONS, QUERIES OR DASHBOARD NOTES HERE] [PASTE THE REPORTED NUMBERS HERE]. Task: (1) Restate each team's definition as an explicit rule covering five dimensions: population (who is counted), event (what counts as an action), time window, deduplication rule, and attribution rule. (2) List every point where the definitions diverge, and estimate how much of the gap between the reported numbers each divergence explains. (3) Recommend one canonical definition that serves [PRIMARY DECISION THIS METRIC DRIVES], and state directionally which team's number will change and why. Constraints: Use only information in my input. Label every estimate as an estimate and state the assumption behind it. Do not favour a team because of seniority or because its number is larger. Write the canonical definition as one sentence a non-analyst could read. If a divergence cannot be resolved from the input, put it under Open Questions instead of guessing. Output Format: (a) a table with columns Team, Population, Event, Window, Deduplication, Attribution; (b) a ranked list of divergences with estimated contribution to the gap; (c) the canonical definition as a single bold sentence; (d) Open Questions as a bullet list.
النتيجة
Metric audit: Active Customers (March) Scenario: Product reports 48,200. Finance reports 31,900. Gap: 16,300.
Definitions | Team | Population | Event | Window | Deduplication | Attribution | |---|---|---|---|---|---| | Product | All registered users | Any login | Last 30 days | Per user | User | | Finance | Accounts with a paid subscription | Active paid status on report date | Point-in-time | Per account | Account |
Divergences, ranked by estimated contribution to the gap 1. Population (about 14,800 of the 16,300 gap). Product counts free-tier users who logged in during the window. Finance excludes them. Estimate assumes most free-tier logins in Product's count belong to non-paying accounts. 2. Deduplication and attribution (about 1,500). Product counts each login from a 12-seat account as a separate user. Finance counts the account once. Estimate assumes roughly 1,500 of the gap comes from multi-seat accounts. 3. Window (not quantified). A 30-day login window captures users who lapsed during the month. A point-in-time status does not. This pushes the two numbers in opposite directions and cannot be sized from the input.
Canonical definition **Active Customers is the number of accounts with an active paid subscription on the last day of the reporting month.**
Effect on each team Product's number falls sharply and should be reported under its own name, such as Monthly Active Users. Finance's number does not change.
Open Questions - Does Finance count trial accounts as paying? The input does not say. - Does Product's login count include internal staff or support logins? - Does the 30-day window end at UTC midnight or at each user's local time?
يقدّم فريقان المقياس نفسه ويحصلان على رقمين مختلفين. يجعل هذا الموجّه تعريف كل فريق صريحاً، ويعثر على الاختلاف الذي يفسّر الفجوة، ويقترح تعريفاً مرجعياً واحداً يمكن طرحه في مراجعة.
متى تستخدمه
يبلّغ فريق المنتج عن 48,200 عميل نشط لشهر مارس، ويبلّغ فريق المالية عن 31,900. مراجعة الربع يوم الخميس. تحتاج إلى معرفة أي الرقمين خاطئ، أو ما إذا كانا صحيحين معاً بتعريفين مختلفين، قبل عرض أي منهما.
لماذا يهم
بدون تعريف مرجعي، تتحول كل مراجعة إلى جدال حول صحة جداول كل فريق، وتُتخذ القرارات بناءً على الرقم الذي وصل أولاً. والفرق التي تكتشف فجوة التعريف بعد إرسال عرض مجلس الإدارة تقضي أرباعاً كاملة في استعادة الثقة في هذا المقياس.
لماذا بُني الموجّه على هذا النحو
يحدد الدور محلّلاً يدقّق التعريفات بدلاً من الدفاع عن فريق. ويطلب السياق تعريفاتك وأرقامك الفعلية، فيعمل النموذج على الأدلة لا على معرفة عامة بمعنى «النشط». وتمثل الأبعاد الخمسة (السكان، والحدث، والنافذة الزمنية، وإزالة التكرار، والإسناد) المواضع التي تتباعد عندها تعريفات المقاييس عادةً، وتسميتها تمنع التحليل من أن ينحدر إلى خلاف غامض. ويحمي قسم القيود من أكثر الأخطاء شيوعاً في هذا النوع من المهام، وهو أرقام واثقة لم تكن في المدخلات أصلاً. ويمنح قسم الأسئلة المفتوحة النموذج مكاناً أميناً لوضع ما لا يستطيع حله.
كيف تكيّفه
- استبدل الحقول بين الأقواس بالتعريفات الحقيقية من لوحة كل فريق أو استعلامه، لا بملخصات عنها.
- أضف الأرقام المبلّغ عنها لفترتين على الأقل. الفجوة الثابتة تشير إلى سبب مختلف عن الفجوة المتحركة.
- بعد التشغيل الأول، اطرح متابعة: أعد ترتيب الاختلافات بافتراض أن الحسابات التجريبية مدرجة في عدّ المالية. هذا يُظهر مدى حساسية النتيجة لافتراض واحد.
علامة جيدة على نجاح التدقيق أن يتسع التعريف المرجعي في سطر واحد، وأن يتمكن الفريق الذي سيتغير رقمه من قبوله. إن لم يتسع، فالتعريف على الأرجح ما زال غامضاً.