Operatör konsolu ve araştırmacı portalı aynı tasarımı paylaşır
Operatör konsolu kümenin bütün işletimini tek web arayüzünde toplar. Konsol head node'da, kontrol düzleminin içinde çalışır ve internet gerektirmez. Araştırmacı portalı login node'dan açılır, aynı tasarım dilini kullanır.
Kümenin her nesnesi aynı düzende bir sayfaya sahiptir
Konsol küme özetiyle açılır; envanterden her node'a, depolama hedefine ve alarma inilir. Nesne sayfalarında aynı sekmeler bulunur: Özet, İzleme, Yapılandırma, Etki, Olaylar, İşler ve Denetim. İşlemler ve onaylar, kuyruklar ve kotalar, imaj terfi kuyruğu ve runbook okuyucu da konsolun kendi bölümleridir.
Envanter, her node'un GPU, NVLink, InfiniBand, PCIe ve NUMA yapısını keşfedildiği hâliyle listeler. Bir node'un sayfasından hangi profille kurulduğuna, üzerinde hangi işlerin çalıştığına ve geçmiş olaylarına aynı yerden bakarsınız.
Ekranlar canlıdır; sunucudaki değişiklik anında görünür. Bağlantı koparsa ekran bunu gizlemez ve veriyi "bayat" olarak işaretler.
- Küme özeti
- Cluster
- NodeProfile
- Node
- Katılım
- Fabric
- StorageTarget
- DriverStack
- Tenant
- Queue
- İşler
- Kullanım raporu
- Operation
- Onaylar
- Sürüm ve imaj
- Politikalar
- Olaylar
- Alarmlar
- Denetim
- Runbook'lar
| Ready | Unknown | E-NODE-008 |
- Ne oldu
- Node'un kiralaması 60 sn'dir yenilenmedi.
- Etkisi
- BareStax Core'da node DRAIN'e alınır: yeni iş yerleşmez, çalışan iş sürer.
- Ürünün yaptığı
- Ready=Unknown yazıldı; node dönünce DRAIN kalkar.
- Ne yapmalı
- Node'un açık olduğunu ve barestaxd'nin çalıştığını denetleyin:
systemctl status barestaxd - Runbook
- RB-NODE-008
Alarmdan etkiye, etkiden onaylı işleme tek akış vardır
Etki görünümü konsolun merkezinde yer alır ve node'lar için olduğu kadar depolama hedefleri ve alarmlar için de çalışır.
Bir alarm açıldığında hangi işlerin, kiracıların ve servislerin etkilendiği aynı ekranda listelenir. Doğrulanmış ve olası etki ayrı tutulur, verinin yaşı her zaman yanında durur.
Buradan doğrudan işleme geçersiniz: node'u boşaltma, yeniden başlatma ya da çıkarma talebi etkinin yanında açılır. Talep, onaylayacak kişiye aynı etki bilgisiyle ulaşır.
| JOBID | TENANT | USER | STATE | GPU | IMPACT |
|---|---|---|---|---|---|
| 4521 | research-a | researcher-1 | RUNNING | 4 | Doğrulanmış |
| 4533 | research-a | researcher-2 | RUNNING | 4 | Doğrulanmış |
- E-PROV-007 Kesinti gerektiren yapılandırma sapması Etkiyi göster
Kritik işlem iki ayrı kişinin onayıyla yürür
Dört göz kuralına bağlı bir işlem, ikinci bir kişi onay penceresinden geçirmeden yürümez ve talep eden kendi talebini onaylayamaz. Hangi işlemlerin bu kurala bağlı olduğu Güvenlik sayfasında yazılıdır.
Pencere iki adımlıdır: önce etki gösterilir, ardından hedefin adı elle yazılır. Yanlış hedefi onaylamak bu yüzden zordur; ikinci faktör de bu anda yeniden istenir.
Taranmış imajlar da konsoldaki imaj terfi kuyruğunda iki kişinin onayını bekler.
barestaxctl operation list
barestaxctl operation approve <ad>Her hata kodludur ve ne yapmanız gerektiğini söyler
Konsolda görülen her hata bir kod taşır ve aynı düzende açıklanır:
- Ne oldu: Olayın kendisi.
- Etkisi: Hangi iş, kiracı ya da servisin etkilendiği.
- Ürünün yaptığı: BareStax'in o ana kadar attığı adım.
- Ne yapmalı: Sizden beklenen işlem.
- Runbook: Ayrıntılı çözüm adımları.
Runbook'lar çevrimdışıdır. Air-gap kümede de konsolun runbook okuyucusundan ya da komut satırından açılır. Hata kartının runbook bölümü ilgili runbook'u doğrudan açar; çözüm adımlarını ayrıca aramanız gerekmez.
barestax runbook RB-NODE-008Grafikler ve derin izleme panoları konsolun içindedir
Isı haritası bütün kümeyi node ve GPU ekseninde tek bakışta gösterir. GPU kullanımı, bellek, güç, sıcaklık ve ağ grafikleri her node'un İzleme sekmesindedir. Derin izleme panoları ürünün kendi panolarıdır; konsolda, aynı oturumla açılır.
Kullanım raporu da buradadır; kapasitenin nerede boşta beklediğini oradan okursunuz. Alarmlar aynı konsolda listelenir ve her biri etki görünümüne bağlanır.
Konsoldaki her işlemin komut satırı karşılığı vardır
İkisi de aynı API'ye gittiği için konsolda yaptığınız bir işlemin komutu tek tıkla kopyalanır; aynı işi betiğe ya da runbook'a taşıyabilirsiniz.
Operatör barestaxctl, araştırmacı barestax kullanır. Çıktılar insan için tablo, araçlar için JSON biçimindedir.
barestaxctl get nodes -o wide
barestaxctl node drain gpu-07
barestax logs <iş>Araştırmacı portalı iş, oturum ve dosyaları bir araya getirir
Portal login node'dan açılır. İşlerim ekranında her işin durumu, bekleme nedeni, günlüğü ve iptal düğmesi, yanında kullanıcının kotası bulunur. Yeni iş, hazır şablonların formu doldurularak gönderilir: batch işi, dizi işi, çok node'lu torchrun eğitimi ya da etkileşimli oturum.
Jupyter, VS Code, RStudio ve uzak masaüstü oturumları BareStax Core işi olarak başlar ve tarayıcıda açılır. Oturuma yalnız sahibi erişir; boşta kalan oturum kapanır ve GPU serbest kalır. Dosya yöneticisi ve tarayıcıdaki terminal, her işlemi kullanıcının kendi Linux kimliğiyle yapar.
Çalışma alanı kalıcıdır. Kullanıcının kurduğu paketler ve ortamlar oturumdan oturuma korunur.
| JOBID | NAME | QUEUE | STATE | GPU | NODE | END |
|---|---|---|---|---|---|---|
| 4820 | jupyter | train-h200 | RUNNING | 1 | gpu-01 | 14:06 |
Arayüz Türkçe ve İngilizcedir, klavyeyle baştan sona kullanılır
Konsolun ve portalın arayüzü Türkçe ve İngilizcedir; koyu ve açık tema arasında geçiş yapabilirsiniz. Her ekran klavyeyle yönetilir. Ctrl+K ile açılan komut paleti, bir nesneye ya da işleme fareye dokunmadan ulaştırır.