Postgres SQL क्वेरी धीमी गति के साथ एक बड़ी मेज (एडब्ल्यूएस RDS)

0

सवाल

वर्तमान में मेज न्यूनतम पंक्ति के 30million, और यह बढ़ रहा है, जब भी ऐसा करने की कोशिश क्वेरी का चयन करें, यह बहुत लंबे समय. क्या जरूरत है अनुकूलन करने के लिए क्वेरी इससे पहले कि मैं के प्रदर्शन को बढ़ाने डेटाबेस?

POSTGRES 12 on AWS RDS db.t3.small, with 20GB storage

**Message Table**

id (bigint) -> pk
meta (jsonb)
snapshot_ts (integer) -> epoch timestamp
value (character varying 100)
type (character varying 50)
created (timestamp with timezone)
last_modified (timestamp with timezone)
attribute_id (bigint) -> Foreign Key
company_id (bigint) -> Foreign Key
project_id (bigint) -> Foreign Key
device_id (bigint) -> Foreign Key


EXPLAIN (analyze,buffers) SELECT COUNT(*) FROM public.message
WHERE company_id=446 AND project_id=52 AND snapshot_ts>=1637568000.0 AND snapshot_ts<=1637654399.0 AND attribute_id=458

->Aggregate  (cost=399804.26..399804.27 rows=1 width=8) (actual time=65150.696..65150.697 rows=1 loops=1)
  Buffers: shared hit=170 read=115437 dirtied=167
  I/O Timings: read=64396.424
  ->  Index Scan using message_attribute_id_6578b282 on message  (cost=0.56..399803.23 rows=411 width=0) (actual time=57752.297..65147.391 rows=8656 loops=1)
        Index Cond: (attribute_id = 458)
        Filter: ((company_id = 446) AND (project_id = 52) AND ((snapshot_ts)::numeric >= 1637568000.0) AND ((snapshot_ts)::numeric <= 1637654399.0))
        Rows Removed by Filter: 106703
        Buffers: shared hit=170 read=115437 dirtied=167
        I/O Timings: read=64396.424
Planning Time: 0.779 ms
Execution Time: 65150.730 ms

**Indexes**
indexname                       | indexdef
message_attribute_id_6578b282   | CREATE INDEX message_attribute_id_6578b282 ON public.message USING btree (attribute_id)
message_company_id_cef5ed5f     | CREATE INDEX message_company_id_cef5ed5f ON public.message USING btree (company_id)
message_device_id_b4da2571      | CREATE INDEX message_device_id_b4da2571 ON public.message USING btree (device_id)
message_pkey                    | CREATE UNIQUE INDEX message_pkey ON public.message USING btree (id)
message_project_id_7ba6787d     | CREATE INDEX message_project_id_7ba6787d ON public.message USING btree (project_id)
amazon-rds postgresql postgresql-12 sql
2021-11-24 01:48:59
1

सबसे अच्छा जवाब

2

पर विचार विशिष्ट क्वेरी:

SELECT COUNT(*)
FROM public.message
WHERE company_id=446 
  AND project_id=52 
  AND snapshot_ts>=1637568000.0 AND snapshot_ts<=1637654399.0 
  AND attribute_id=458

निम्न सूचकांक की क्षमता बहुत बढ़ रही है प्रदर्शन:

create index ix1 on public.message (
  company_id, project_id, attribute_id, snapshot_ts
);

हालांकि, मन में रखने के लिए है कि बनाने के एक सूचकांक पर एक 30 लाख पंक्ति तालिका कुछ समय ले सकते हैं.

2021-11-24 03:41:16

है कि मतलब है, चलो कहते हैं कि मैं कई मामले क्वेरी स्थिति, मैं की जरूरत है बनाने के लिए प्रत्येक सूचकांक प्रत्येक मामले के लिए? "(company_id, project_id, attribute_id, snapshot_ts)", "(project_id, attribute_id, snapshot_ts)", "(attribute_id, snapshot_ts)"
Sola

@सोला अगर आप की जरूरत है सटीक इष्टतम सूचकांक के लिए प्रत्येक क्वेरी है, तो हाँ हो सकता है कि एक बहुत अनुक्रमित. लेकिन आप शायद प्राप्त कर सकते हैं दूर के साथ कुछ हद तक कम इष्टतम उनमें से कुछ के लिए. कुछ कोशिश करो और देखो. यदि आप प्रश्न हैं, हो यकीन है कि शामिल करने के लिए समझाने (विश्लेषण, बफ़र्स)
jjanes

बनाने के बाद सूचकांक पर अपने स्थानीय मशीन के हैं, और यह काम शुरुआत में, लेकिन कुछ समय के बाद, यह नहीं था ट्रिगर अनुक्रमित कर रही है, जब क्वेरी । हुआ यह उत्पादन सर्वर पर के रूप में अच्छी तरह से.
Sola

@सोला यदि क्वेरी नहीं है सूचकांक का उपयोग कर, फिर अनुकूलक यह विचार एक अलग निष्पादन की योजना है । सबसे पहले, सुनिश्चित करें कि आंकड़ों की टेबल पर तारीख तक कर रहे हैं का उपयोग कर ANALYZE public.message. तो, अगर अभी भी समस्या बनी रहती है, कृपया पुनः प्राप्त निष्पादन की योजना और इसे जोड़ने के लिए सवाल है ।
The Impaler

धन्यवाद उत्तर के लिए. कल जब की कोशिश कर के साथ सूचकांक (company_id, project_id, attribute_id, snapshot_ts), में हालत का उपयोग कर (snapshot_ts और attribute_id), यह काम कर रहा है, तो पहली बार में नहीं है. अब मैं एक और जोड़ने के साथ सूचकांक (attribute_id, snapshot_ts), इस उद्देश्य के लिए, लग रहे हैं फिर से काम जारी रहेगा, मॉनिटर.
Sola

अन्य भाषाओं में

यह पृष्ठ अन्य भाषाओं में है

Русский
..................................................................................................................
Italiano
..................................................................................................................
Polski
..................................................................................................................
Română
..................................................................................................................
한국어
..................................................................................................................
Français
..................................................................................................................
Türk
..................................................................................................................
Česk
..................................................................................................................
Português
..................................................................................................................
ไทย
..................................................................................................................
中文
..................................................................................................................
Español
..................................................................................................................
Slovenský
..................................................................................................................

इस श्रेणी में लोकप्रिय

लोकप्रिय सवाल इस श्रेणी में