VK Cloud logo

Мониторинг

ОС орнату кезінде, сондай-ақ жаңа серверге тапсырыс беру кезінде Мониторингті қосу опциясы қолжетімді. Ол telegraf мониторинг агентін орнатады.

Агент Bare Metal сервер метрикаларын жинап, оларды Cloud Monitoring сервисіне жібереді. Бұл процессордың жүктемесін, жад пен диск кеңістігінің пайдаланылуын, желі жүктемесін және басқа көрсеткіштерді бақылауға мүмкіндік береді.

Сервердің метрикаларының ең аз жиынтығын VK Cloud жеке кабинетіндегі сервер картасында көруге немесе графиктері бар өз дашбордыңызды дайындауға болады.

Bare Metal сервер метрикалары

Агент операциялық жүйенің метрикаларын 10 секунд сайын жинап, оларды mcs/baremetal атаулар кеңістігіне жібереді.

Cloud Monitoring ішіндегі Bare Metal сервисінің белгілері:

  • service_id — мәні BMaaS.
  • group_id — мәні Server.
  • stream_id — сервердің идентификаторы, оны сервер картасынан білуге болады.

Процессор

Барлық метрикалар процессордың барлық ядролары бойынша жиынтық ағымдағы мәнді көрсетеді.

Cloud Monitoring ішіндегі белгі — cpu=cpu-total.

Метрика

Сипаттама

cpu_usage_user

Процессордың пайдаланушы процестерін өңдеуге жұмсайтын уақытының үлесі.

Пайдаланушы қолданбалары тудыратын жүктемені бағалау үшін қолданылады.

Өлшем бірлігі: %

cpu_usage_system

Процессордың ОС ядросы деңгейіндегі жүйелік процестерді өңдеуге жұмсайтын уақытының үлесі.

Жүйе жұмысындағы ауытқуларды, мысалы, жиі жүйелік шақыруларды немесе диск пен желімен қарқынды жұмысты анықтауға мүмкіндік береді.

Өлшем бірлігі: %

cpu_usage_iowait

Процессордың кіріс-шығыс операцияларының аяқталуын күтіп бос тұратын уақытының үлесі.

Сақтау ішкі жүйесінің жұмысындағы кідірістерді анықтау үшін қолданылады. Себептері әртүрлі болуы мүмкін: жинақтауыш жүктемемен күресе алмайды; процестер кіріс-шығыс үшін бәсекелеседі; драйвер немесе төмен деңгейлі БЖ дұрыс жұмыс істемейді, деректерді тасымалдау шинасы немесе жинақтауыштың өзі ақаулы.

Өлшем бірлігі: %

cpu_usage_irq

Процессордың аппараттық үзілімдерді өңдеуге жұмсайтын уақытының үлесі.

Жабдықтан келетін сұрауларды өңдеу кезіндегі жоғары жүктемені, мысалы, қарқынды трафик кезінде желі адаптерлерінен түсетін жүктемені анықтауға мүмкіндік береді.

Өлшем бірлігі: %

cpu_usage_guest

Процессордың қонақ ОС кодын орындауға жұмсайтын уақытының үлесі.

Серверде гипервизор пайдаланылса, виртуалды машиналардың ресурстарды пайдалануын бағалауға мүмкіндік береді.

Өлшем бірлігі: %

Жад

Барлық метрикалар ағымдағы мәнді көрсетеді. Cloud Monitoring белгілері пайдаланылмайды.

Метрика

Сипаттама

mem_used_percent

Пайдаланылатын оперативті жадтың жалпы көлемге қатысты үлесі.

Жадты тұтынуды бағалау үшін қолданылады.

Өлшем бірлігі: %

mem_used

Пайдаланылатын оперативті жад көлемі.

Жадты тұтынуды абсолютті мәндерде бағалау үшін қолданылады.

Өлшем бірлігі: байт

mem_available_percent

Қолжетімді жадтың жалпы көлемге қатысты үлесі.

Жаңа пайдаланушы қолданбалары үшін қолжетімді оперативті жад ресурсын бағалауға мүмкіндік береді.

Өлшем бірлігі: %

mem_available

Қолданбаларға своп-файлға жүгінбей қолжетімді жад көлемі.

Жаңа пайдаланушы қолданбалары үшін қолжетімді оперативті жад ресурсын абсолютті мәндерде бағалауға мүмкіндік береді.

Өлшем бірлігі: байт

mem_cached

Файлдық жүйе кэшімен алынған жад көлемі.

ОС дискімен жұмысты жылдамдату үшін пайдаланатын оперативті жад көлемін бағалауға мүмкіндік береді.

Өлшем бірлігі: байт

mem_dirty

Жадта жазу кезегінде тұрған деректер көлемі.

Мән жоғары болса немесе cpu_usage_iowait метрикасымен бір мезгілде тез өссе, сақтау ішкі жүйесінің жұмысындағы кідірістерді анықтауға мүмкіндік береді. Ықтимал себептер cpu_usage_iowait метрикасы үшін сипатталған.

Өлшем бірлігі: байт

mem_free

Еш жерде пайдаланылмайтын жад көлемі.

Шынымен бос жадты жадтың басқа түрлерінен ажыратуға мүмкіндік береді.

Өлшем бірлігі: байт

Файлдық жүйелер

Әрбір файлдық жүйе үшін ағымдағы мән жинақталады.

Cloud Monitoring белгілері:

  • device — /dev/ префиксінсіз құрылғы атауы;
  • path — телу нүктесі;
  • fstype — файлдық жүйе.

tmpfs, devtmpfs, devfs, iso9660, overlay, aufs, squashfs қызметтік файлдық жүйелері ескерілмейді.

Метрика

Сипаттама

disk_used_percent

Файлдық жүйенің толуы.

Жинақтауыштардағы орынның пайдаланылуын бақылау үшін қолданылады.

Өлшем бірлігі: %

disk_free

Файлдық жүйедегі бос орын көлемі.

Жинақтауыштардың қолжетімді ресурсын абсолютті мәндерде бағалау үшін қолданылады.

Өлшем бірлігі: байт

disk_inodes_free

Файлдық жүйедегі бос индекстік дескрипторлар (inodes) саны.

Метадеректерді сақтауға арналған индекстік дескрипторлардың (inodes) жетіспеушілігін анықтауға мүмкіндік береді. Олардың саны шектеулі, сондықтан көптеген ұсақ файлдар болғанда индекстік дескрипторлар диск орнынан бұрын таусылып қалуы мүмкін, бұл жаңа объектілерді құруға мүмкіндік бермейді.

Өлшем бірлігі: дана

Дискілік кіріс-шығыс

Әрбір диск үшін бөлек мән жинақталады. Барлық метрикалар ОС жүктелген сәттен бергі есептегіштің мәнін көрсетеді.

Cloud Monitoring ішінде name белгісі пайдаланылады — /dev/ префиксінсіз құрылғы атауы.

Метрика

Сипаттама

diskio_reads

Орындалған оқу операцияларының саны.

Оқу операцияларының қарқындылығын (IOPS) бағалау үшін қолданылады.

Өлшем бірлігі: дана

diskio_writes

Орындалған жазу операцияларының саны.

Жазу операцияларының қарқындылығын (IOPS) бағалау үшін қолданылады.

Өлшем бірлігі: дана

diskio_read_bytes

Оқылған деректер көлемі.

Аралық мәндерді салыстыру арқылы дискіден оқу жылдамдығын бағалау үшін қолданылады.

Өлшем бірлігі: байт

diskio_write_bytes

Жазылған деректер көлемі.

Аралық мәндерді салыстыру арқылы дискіге жазу жылдамдығын бағалау үшін қолданылады.

Өлшем бірлігі: байт

diskio_read_time

Оқу операцияларын орындаудың жалпы уақыты.

Аралық мәндерді салыстыру арқылы оқу кезіндегі кідірістің артуын анықтауға мүмкіндік береді.

Өлшем бірлігі: миллисекунд

diskio_write_time

Жазу операцияларын орындаудың жалпы уақыты.

Аралық мәндерді салыстыру арқылы жазу кезіндегі кідірістің артуын анықтауға мүмкіндік береді.

Өлшем бірлігі: миллисекунд

diskio_io_time

Дискінің кіріс-шығыс операцияларымен бос емес болған уақыты.

Аралық мәндерді салыстыру арқылы кіріс-шығыс операцияларына жұмсалатын жалпы уақыттың артуын анықтауға мүмкіндік береді.

Өлшем бірлігі: миллисекунд

diskio_weighted_io_time

Кезектегі сұраулар санымен өлшенген дискінің бос емес болу уақыты.

Дискінің шамадан тыс жүктелуін анықтауға мүмкіндік береді: сұраулар кезекке тұрса, мән diskio_io_time метрикасынан жылдам өседі.

Өлшем бірлігі: миллисекунд

Желі

Әрбір желі интерфейсі үшін бөлек мән жинақталады. netstat_tcp_established метрикасынан басқа, барлық метрикалар ОС жүктелген сәттен бергі есептегіштің мәнін көрсетеді. netstat_tcp_established үшін ағымдағы мән көрсетіледі.

Cloud Monitoring ішінде interface белгісі пайдаланылады — Linux ядросы деңгейінде қолданылатын желі интерфейсінің атауы.

Метрика

Сипаттама

net_bytes_sent

Жіберілген деректер көлемі.

Шығыс трафикті бағалау үшін қолданылады.

Өлшем бірлігі: байт

net_bytes_recv

Алынған деректер көлемі.

Кіріс трафикті бағалау үшін қолданылады.

Өлшем бірлігі: байт

net_packets_sent

Жіберілген пакеттер саны.

Шығыс трафиктің пакеттердегі қарқындылығын бағалау үшін қолданылады.

Өлшем бірлігі: дана

net_packets_recv

Алынған пакеттер саны.

Кіріс трафиктің пакеттердегі қарқындылығын бағалау үшін қолданылады.

Өлшем бірлігі: дана

net_err_in

Пакеттерді қабылдау кезіндегі қателер саны.

Санның артуы арқылы желі жабдығындағы немесе байланыс арнасындағы ақауларды анықтауға мүмкіндік береді.

Өлшем бірлігі: дана

net_err_out

Пакеттерді жіберу кезіндегі қателер саны.

Санның артуы арқылы желі жабдығындағы немесе байланыс арнасындағы ақауларды анықтауға мүмкіндік береді.

Өлшем бірлігі: дана

net_drop_in

Тасталған кіріс пакеттерінің саны.

Желі интерфейсінің немесе ОС-тың шамадан тыс жүктелуін анықтауға мүмкіндік береді.

Өлшем бірлігі: дана

net_drop_out

Тасталған шығыс пакеттерінің саны.

Желі интерфейсінің немесе ОС-тың шамадан тыс жүктелуін анықтауға мүмкіндік береді.

Өлшем бірлігі: дана

netstat_tcp_established

Орнатылған TCP қосылымдарының саны.

Серверге белсенді қосылымдар санын бағалау үшін қолданылады.

Өлшем бірлігі: дана

GPU

GPU бар серверлер үшін әрбір құрылғыға бөлек мән жинақталады. Барлық метрикалар nvidia-smi утилитасы арқылы сұратылған ағымдағы мәнді көрсетеді.

Cloud Monitoring ішінде мынадай белгілер пайдаланылады:

  • index — сервердегі GPU-дың 0-ден басталатын реттік нөмірі;
  • uuid — GPU-дың бірегей идентификаторы;
  • name — GPU моделі.

Метрика

Сипаттама

nvidia_smi_utilization_gpu

GPU есептеу ядроларының жүктемесі.

GPU жүктемесін бағалау үшін қолданылады.

Өлшем бірлігі: %

nvidia_smi_utilization_memory

GPU жад шинасының жүктемесі.

VRAM-ға қолжетімділік жылдамдығына байланысты өнімділік шектеуін анықтауға мүмкіндік береді.

Өлшем бірлігі: %

nvidia_smi_memory_used

Пайдаланылатын GPU жады көлемі.

VRAM жадының пайдаланылуын бақылау үшін қолданылады.

Өлшем бірлігі: МиБ

nvidia_smi_memory_free

GPU бос жады көлемі.

VRAM бос ресурсын бақылау үшін қолданылады.

Өлшем бірлігі: МиБ

nvidia_smi_memory_total

GPU жадының жалпы көлемі.

VRAM жалпы көлемін бағалауға және оны nvidia_smi_memory_used және nvidia_smi_memory_free көрсеткіштерімен салыстыруға мүмкіндік береді.

Өлшем бірлігі: МиБ

nvidia_smi_temperature_gpu

GPU температурасы.

Жиілікті төмендетудің (throttling) алдын алу үшін температураны бақылауға қолданылады.

Өлшем бірлігі: °C

nvidia_smi_power_draw

GPU тұтынатын қуат.

Энергия тұтынуды бағалау үшін қолданылады.

Өлшем бірлігі: Вт

nvidia_smi_clocks_current_graphics

Графикалық процессордың ағымдағы жиілігі.

Қызып кеткенде немесе қуат шектелгенде жиіліктің төмендеуін (throttling) бақылауға мүмкіндік береді.

Өлшем бірлігі: МГц

nvidia_smi_clocks_current_memory

GPU жадының ағымдағы жиілігі.

Қызып кеткенде немесе қуат шектелгенде жад жиілігінің төмендеуін бақылауға мүмкіндік береді.

Өлшем бірлігі: МГц

nvidia_smi_fan_speed

GPU желдеткішінің айналу жылдамдығы максимумнан пайызбен.

Салқындату жүйесінің жұмысын тексеру үшін қолданылады.

Өлшем бірлігі: %

nvidia_smi_pcie_link_gen_current

GPU қосылған PCIe интерфейсінің ағымдағы буыны.

Интерфейс буынын ескере отырып, GPU жұмысының өнімділігін талдауға мүмкіндік береді.

Өлшем бірлігі: буын нөмірі

nvidia_smi_pcie_link_width_current

GPU қосылған PCIe желілерінің ағымдағы саны.

Желілер санын ескере отырып, GPU жұмысының өнімділігін талдауға мүмкіндік береді.

Өлшем бірлігі: желілер саны

nvidia_smi_retired_pages_double_bit

Түзетілмейтін ECC қателеріне байланысты өшірілген GPU жады беттерінің саны.

VRAM ақауын анықтауға мүмкіндік береді.

Өлшем бірлігі: дана

nvidia_smi_remapped_rows_uncorrectable

Түзетілмейтін қателерге байланысты қайта тағайындалған GPU жады жолдарының саны.

VRAM ақауын анықтауға мүмкіндік береді.

Өлшем бірлігі: дана

Стандартты дашборд графиктері

График

Сипаттама

RAM Used

Жадты тұтынуды бағалауға мүмкіндік береді.

Метрикалар: mem_used_percent.

Шама: %

Current IOWait

Сақтау ішкі жүйесінің жұмысындағы кідірістерді анықтауға мүмкіндік береді. Ықтимал себептер cpu_usage_iowait метрикасы үшін сипатталған.

Метрикалар: cpu_usage_iowait.

Шама: %

Current CPU

Процессордың жалпы жүктемесін бағалауға мүмкіндік береді.

Метрикалар: cpu_usage_user, cpu_usage_system, cpu_usage_iowait, cpu_usage_irq, cpu_usage_guest қосындысы.

Шама: %

Disk Used

Файлдық жүйедегі орынның пайдаланылуын бақылауға мүмкіндік береді.

Метрикалар: disk_used_percent (барлық файлдық жүйелер арасындағы ең жоғары мән).

Шама: %

CPU

Қолданбалардан түсетін жүктеме мен кіріс-шығысты күтудің уақыт өте келе қалай өзгеретінін қадағалауға мүмкіндік береді.

Метрикалар: cpu_usage_user (User қатары), cpu_usage_iowait (IO wait қатары).

Шама: %

RAM

Оперативті жадтың толуының уақыт өте келе қалай өзгеретінін қадағалауға мүмкіндік береді.

Метрикалар: mem_used_percent (Used қатары).

Шама: %

Disk IO

Дискілерден оқу және оларға жазу жылдамдығының уақыт өте келе қалай өзгеретінін қадағалауға мүмкіндік береді.

Метрикалар: diskio_read_bytes (Reads қатары), diskio_write_bytes (Writes қатары), өзгеру жылдамдығы (rate) түрінде, барлық дискілер бойынша жиынтықта.

Шама: байт/с

Disk used

Әрбір файлдық жүйенің толуының уақыт өте келе қалай өзгеретінін қадағалауға мүмкіндік береді.

Метрикалар: disk_used_percent, әрбір файлдық жүйе үшін бір қатардан.

Шама: %

Network

Желі бойынша деректерді жіберу және алу жылдамдығының уақыт өте келе қалай өзгеретінін қадағалауға мүмкіндік береді.

Метрикалар: net_bytes_sent (Sent қатары), net_bytes_recv (Received қатары), өзгеру жылдамдығы (rate) түрінде, барлық желі интерфейстері бойынша жиынтықта.

Шама: байт/с

Мақала пайдалы болды ма?