घंटे के अनुसार BigQuery स्लॉट उपयोग

यह क्यों मायने रखता है

अधिकांश BigQuery कार्यभार में पूर्वानुमानित घंटावार पैटर्न होते हैं — सुबह ETL रन, दोपहर विश्लेषक गतिविधि, शाम बैच प्रोसेसिंग।

यह कैसे काम करता है

दैनिक संस्करण की तरह, यह क्वेरी JOBS_TIMELINE से period_slot_ms एकत्र करती है, लेकिन HOUR ग्रेनुलैरिटी के लिए ट्रंकेट करती है और मिलीसेकंड-प्रति-घंटे (3,600,000) से विभाजित करती है।

SQL क्वेरी

-- Average slot consumption per hour (zero-filled time series)

DECLARE lookback_days INT64 DEFAULT 7;
DECLARE ms_per_hour INT64 DEFAULT 3600000;

WITH hourly_slots AS (
  SELECT
    TIMESTAMP_TRUNC(period_start, HOUR) AS hour,
    ROUND(SUM(period_slot_ms) / ms_per_hour, 2) AS avg_slots
  FROM `your-project`.`region-us`.INFORMATION_SCHEMA.JOBS_TIMELINE
  WHERE period_start >= TIMESTAMP_SUB(CURRENT_TIMESTAMP(), INTERVAL lookback_days DAY)
    AND statement_type != 'SCRIPT'
  GROUP BY hour
),
calendar AS (
  SELECT ts AS hour FROM UNNEST(GENERATE_TIMESTAMP_ARRAY(
    TIMESTAMP_TRUNC(TIMESTAMP_SUB(CURRENT_TIMESTAMP(), INTERVAL lookback_days DAY), HOUR),
    TIMESTAMP_TRUNC(CURRENT_TIMESTAMP(), HOUR),
    INTERVAL 1 HOUR)) AS ts
)
SELECT
  c.hour,
  IFNULL(h.avg_slots, 0) AS avg_slots
FROM calendar c
LEFT JOIN hourly_slots h ON c.hour = h.hour
ORDER BY c.hour

क्वेरी व्याख्या

दैनिक क्वेरी के समान दृष्टिकोण लेकिन घंटा ग्रेनुलैरिटी पर। ms_per_hour विभाजक 3,600,000 है। उत्पन्न टाइम सीरीज़ विज़ुअलाइज़ेशन के लिए एक सतत घंटावार डेटासेट सुनिश्चित करती है।

मुख्य अंतर्दृष्टि

• lightbulb

  पीक घंटे अक्सर शेड्यूल्ड ETL/dbt रन के साथ मेल खाते हैं — पीक स्लॉट मांग को कम करने के लिए उन्हें स्थानांतरित करें।

• lightbulb

  लगभग-शून्य उपयोग वाले ऑफ-पीक घंटे फ्लैट-रेट मूल्य निर्धारण के तहत बर्बाद आरक्षण क्षमता का प्रतिनिधित्व करते हैं।

• lightbulb

  उच्चतम औसत स्लॉट उपयोग वाले घंटे की पहचान करें।

• lightbulb

  दिनों में अत्यधिक परिवर्तनशील स्लॉट उपयोग वाले घंटे ad hoc कार्यभार सुझाते हैं।

सर्वोत्तम प्रथाएं

1. 1

   स्लॉट उपयोग वक्र को समतल करने के लिए घंटों में शेड्यूल्ड जॉब को स्थानांतरित करें।

2. 2

   ओवर-प्रोविज़न किए बिना घंटावार पीक को संभालने के लिए autoscaled Editions आरक्षण का उपयोग करें।

3. 3

   उसी व्यावसायिक दिन में अनियंत्रित क्वेरी को पकड़ने के लिए घंटावार लागत अलर्ट सेट करें।

4. 4

   स्लॉट प्रतिस्पर्धा सबसे कम होने पर ऑफ-पीक घंटों के दौरान भारी बैच जॉब चलाएं।

संबंधित गाइड