Gerege Nexus АЖИГЛАЛТ Grafana руу нэвтрэх

АЖИГЛАЛТ · monitor.open.gerege.mn

Юу ч чимээгүй унахгүй

Энэ платформ өөрийгөө 15 секунд тутамд хэмждэг: хүсэлт бүрийн хугацаа, алдаа, дараалал, диск, санах ой, өгөгдлийн сан, гадаад систем. Сэрэмжлүүлэг дуугарахад ямар самбар нээхээ мэдэж байх нь энэ домэйн байгаагийн шалтгаан.

15 секундхэмжилтийн давтамж 27 дүрэмсэрэмжлүүлэг 60 хоногхэмжүүрийн түүх 31 хоноглогийн түүх
01 · ХААНА ОРОХ

Энэ домэйн дээр хоёр л хаяг байна

Бусад бүх зам 404 хариулна. Энэ нь алдаа биш — дор нь юу нээлттэй биш болохыг тайлбарласан хэсэг бий.

/grafana/

Самбарууд ба логууд

Дөрвөн самбар, Loki дахь бүх контейнерын лог, Tempo дахь мөрдлөгө — бүгд нэг цонхонд. Gerege Nexus-ийн бүртгэлээрээ нэвтэрнэ, тусдаа нууц үг байхгүй.

Нэвтрэх

/alertmanager/

Одоо юу дуугарч байна

Идэвхтэй сэрэмжлүүлэг, чимээгүй болгосон дүрмүүд. Чимээгүй болгох нь бичих үйлдэл учраас энэ хаяг нэмэлт нэвтрэлтийн ард байна.

Хэрэглэгчийн нэр, нууц үг нь зөвхөн энэ хост дээр — /root/monitor-alertmanager-credentials.txt.

Нэвтрэлт

Нэг л бүртгэл

Grafana нь Gerege Nexus-ийн SSO-г ашиглана. Платформын эхний байгууллагын админ нь энд серверийн администратор болно — бусад нь харах эрхтэй.

eID-ээр нэвтэрсэн данс нь и-мэйлээр нэвтэрсэн данснаас өөр хүн гэж тооцогдоно. Хоёуланг нь холихгүй байх нь чухал.

02 · САМБАРУУД

Дөрвөн самбар, дөрвөн өөр асуулт

Аль нь нээхээ сэрэмжлүүлэг өөрөө хэлдэг — гэхдээ хэлэхгүй өдөр ч бий.

  1. API Overview — «Хэрэглэгч юу мэдэрч байна вэ»

    Хүсэлтийн тоо, алдааны хувь, p50/p95/p99 хугацаа, хамгийн удаан зам. Ямар нэг зүйл «удаашралтай байна» гэсэн гомдол энэ самбараас эхэлнэ.

  2. Infrastructure — «Машин өөрөө юу гэж байна вэ»

    CPU, санах ой, диск, контейнер бүрийн хэрэглээ, PostgreSQL-ийн холболт ба удаан query. Дискний зай дуусах нь энд хамгийн эрт харагдана.

  3. Resilience — «Тогтолцоо дарамт дор яаж авирлаж байна вэ»

    Дараалал, дахин оролдлого, circuit breaker, хугацаа хэтрэлт. Бүтэлгүйтэл тархаж эхэлсэн эсэхийг энэ самбар хамгийн түрүүнд харуулна.

  4. External Systems — «Бидний биш, гэхдээ бидний асуудал»

    ДАН, банк, SMS, и-мэйл, гадны API-уудын хариу хугацаа ба алдаа. Гадны систем унасныг манайх унасан гэж андуурахгүй байх л энэ самбарын ажил.

03 · ДОХИО

Хэмжигдээгүй систем бол ажиллаж байгаа систем биш

Prometheus

Хэмжүүр · 15 секунд · 60 хоног

Backend, node_exporter, cAdvisor, postgres_exporter, blackbox — бүгд нэг цуглуулагч руу. 27 сэрэмжлүүлэг дүрэм тав хуваагдсан файлд: API SLO, дэд бүтэц, удирдлагын хавтгай, гадаад систем, мониторинг өөрөө.

Loki

Лог · 31 хоног

Контейнер бүрийн стандарт гаралтыг Alloy цуглуулж, Grafana-аас шүүнэ. Хугацаа нь өөрөө хязгаар: 31 хоногийн дараа устгагдана, энэ нь баримтжуулалт биш, идэвхтэй дүрэм.

Tempo

Мөрдлөгө

Backend спануудаа шууд илгээнэ. Нэг удаан хүсэлтийг сонгоод түүний доторх алхам бүрийг харах — «яагаад удаан вэ» гэдгийн ганц шууд хариулт.

Alertmanager

Хэн мэдэх вэ

Дүрэм зөрчигдвөл Telegram суваг руу. Чимээгүй болгох, бүлэглэх, давтахыг энд удирдана — /alertmanager/.

Мониторинг өөрөө ч хэмжигддэг — цуглуулагч унавал сэрэмжлүүлэг дуугарна.

04 · ИЛЭН ДАЛАНГҮЙ

Юу нээлттэй биш вэ

Prometheus, Loki, Tempo, cAdvisor болон бүх exporter нь энэ домэйн дээр байхгүй. Prometheus-д нэвтрэлт огт байдаггүй бөгөөд түүний query API нь энэ суулгацын бүтцийг асуусан хүн бүрт дүрсэлж чадна.

Grafana бол энэ багц дахь хүнтэй харьцахаар зохиогдсон цорын ганц хэсэг — тэгээд бас бусад бүгдээс нь асуулт тавьж чаддаг нь ч тэр. Тиймээс гадагш харсан хаалга нэг л ширхэг.

Энэ хуудас өөрөө индексжихгүй, framing хийгдэхгүй, гадны фонт, скрипт, зураггүй.