On this page
Architektura RabbitMQ zwymiarowana pod dzisiejsze obciążenie rzadko wytrzymuje wzrost 5-10x — topologia klastra, replikacja kolejek kworum i komunikacja między regionami psują się pod wpływem skali inaczej niż podczas incydentu gaszonego doraźnie. Planowanie pod przyszłe obciążenie — przez ocenę stanu obecnego, projekt stanu docelowego i etapowy plan wdrożenia — pozwala uniknąć przebudowy architektury, która dwa lata później wraca jako sytuacja awaryjna.
Większość zespołów nigdy nie przeprowadza takiego ćwiczenia. Łata istniejący klaster, incydent po incydencie, aż wzrost przerośnie topologię i ktoś musi ją przeprojektować pod presją. Poniżej opisujemy, jak zamiast tego wygląda świadomy proces projektowania pod przyszłą skalę.
Co w praktyce oznacza architektura RabbitMQ projektowana na przyszłość?
Oznacza projektowanie topologii klastra, typów kolejek i komunikacji między regionami pod obciążenie, liczbę węzłów i zakres integracji, jakich spodziewają się Państwo przy skali 5-10 razy większej od obecnej — a następnie wyznaczenie wstecz ścieżki migracji, zamiast projektowania pod bieżące obciążenie w nadziei, że architektura jakoś się rozciągnie.
To rozróżnienie ma znaczenie, ponieważ wydajność RabbitMQ nie spada liniowo. Klaster, który bez trudu radzi sobie z dzisiejszą liczbą powiązań (bindingów), łączy federacji i rozgałęzieniem do konsumentów (fan-out), może uderzyć w ścianę na długo przed 10x, ponieważ powiązania exchange'y, replikacja kolejek kworum i czas resynchronizacji federacji niosą narzut, który kumuluje się wraz ze skalą, zamiast rosnąć proporcjonalnie do niej.
Jak projektować pod przyszłą skalę zamiast łatać problemy doraźnie?
Trzy fazy, w tej kolejności: ocena stanu obecnego, projekt stanu docelowego, plan migracji. Przeskoczenie od razu do projektu stanu docelowego bez oceny to najczęstszy błąd — zespoły projektują wyidealizowaną architekturę, która ignoruje biblioteki klienckie, zespoły aplikacyjne i ograniczenia operacyjne istniejące już na produkcji, a projekt w nieskończoność utyka na etapie przeglądu.
W niedawnym projekcie architektury na przyszłość dla dużego operatora z sektora energetycznego, który wykorzystuje RabbitMQ w monitoringu rurociągów połączonym z systemami SCADA, przygotowaliśmy równolegle dwa warianty architektury zamiast jednego: projekt od zera (greenfield), zakładający brak ograniczeń, oraz projekt z ograniczeniami, godzący ten ideał z tym, co zespoły aplikacyjne realnie mogły zmienić w czasie trwania projektu. Udokumentowanie uzasadnienia każdej rozbieżności między nimi — dlaczego warto było wymusić aktualizację biblioteki klienckiej, a gdzie zespół zaakceptował kompromis — bardziej pomogło uzyskać poparcie interesariuszy niż którykolwiek z wariantów osobno.
Druga zmiana, która miała znaczenie: przegląd projektu w krótkich, iteracyjnych punktach kontrolnych zamiast przekazania gotowej architektury na końcu. Czterotygodniowa faza projektowa, w której informacja zwrotna pojawia się dopiero w czwartym tygodniu, marnuje trzy z tych tygodni, jeśli kierunek okaże się błędny.
Które elementy RabbitMQ trzeba dopracować przed skalowaniem?
Projekt na przyszłość to nie tylko kwestia klastrów i węzłów — wybrane teraz typy exchange'y, klucze routingu, hosty wirtualne i kolejki dead-letter decydują o tym, ile przeróbek będzie kosztował kolejny wzrost 5-10x. Direct exchange ze stabilnym kluczem routingu skaluje się przewidywalnie; topic exchange z kluczami routingu zawierającymi symbole wieloznaczne daje dziś elastyczność, ale to właśnie on napędza później rozrost powiązań, więc warto mu się ponownie przyjrzeć, zanim zacznie dźwigać dziesiątki integracji. Fanout exchange'e są proste i niezawodne w dużej skali właśnie dlatego, że całkowicie pomijają ewaluację klucza routingu — warto przyjąć je domyślnie dla wzorców rozgłoszeniowych, w których selektywny routing w rzeczywistości nie jest potrzebny.
Hosty wirtualne to najtańsza izolacja, jaką można kupić: rozdzielenie środowisk, najemców lub jednostek biznesowych na osobne vhosty w ramach jednego wdrożenia systemu rozproszonego pozwala uniknąć późniejszego dzielenia na osobne klastry wyłącznie z powodów kontroli dostępu. Z kolei kolejki dead-letter przestają być opcjonalne, gdy rośnie wolumen — projekt na przyszłość powinien z góry definiować obsługę komunikatów zatrutych (poison messages) i limity dostarczeń dla każdej kolejki, a nie dokładać je dopiero wtedy, gdy pierwsza burza ponownych kolejkowań położy broker komunikatów, który poza tym był zdrowy. Nic z tego nie jest egzotyczne. To podstawy wysokiej dostępności i architektury sterowanej zdarzeniami, stosowane świadomie, a nie przypadkiem.
Które decyzje dotyczące topologii klastra mają znaczenie przy skali 5-10x?
Gdy wolumen rośnie, nieproporcjonalnie duże znaczenie mają trzy decyzje: liczba i rozmieszczenie węzłów, projekt exchange'y i powiązań oraz to, w jakim stopniu polega się na jednym klastrze, a w jakim rozdziela obciążenia. Liczba węzłów to nie tylko dźwignia przepustowości — narzut replikacji kolejek kworum i konsensusu Raft rośnie wraz z rozmiarem klastra, więc 3-węzłowa topologia, która działa dobrze, przy 9 węzłach nie staje się po prostu szybsza, tylko zachowuje się inaczej.
Projekt powiązań to obszar, który zespoły najczęściej niedoszacowują. Wzorzec oparty na topic exchange, który działa bez zarzutu przy kilku tysiącach powiązań, może stać się realnym problemem, gdy ich liczba wzrośnie do dziesiątek tysięcy — nie dlatego, że RabbitMQ nie jest w stanie ich utrzymać, ale dlatego, że odbudowa stanu routingu po utracie węzła lub resynchronizacji federacji wyraźnie zwalnia wraz ze wzrostem liczby powiązań. Widzieliśmy łącze federacji, które zwykle resynchronizowało się w około 15 minut, a podczas incydentu odbudowywało się ponad godzinę, wyłącznie z powodu wolumenu powiązań — a w systemie połączonym ze SCADA konsument pozbawiony świeżych danych przez 10 minut wyzwala wymuszone wyłączenie rurociągu. To właśnie taki scenariusz awarii projekt na przyszłość musi uwzględnić, zanim się wydarzy, a nie po fakcie.
Jak wymiarować kolejki kworum pod przyszły wzrost?
Współczynnik replikacji należy dobierać do liczby węzłów, do której zmierza projekt, a nie do tej, na której działają Państwo dziś. Współczynnik replikacji 3 jest domyślny i sprawdza się w większości obciążeń; krytyczne kolejki czasem uzasadniają 5, ale każda replika dodaje narzut konsensusu Raft w całej grupie, więc przewymiarowanie „na wszelki wypadek” ma realny koszt w przepustowości.
Pytanie o wymiarowanie, które naprawdę ma znaczenie przy przyszłej skali, nie dotyczy samego współczynnika replikacji — liczy się współczynnik replikacji w połączeniu z prognozowaną liczbą konsumentów i natężeniem komunikatów na kolejkę. Projekt kolejek, który działa dobrze przy dzisiejszym fan-oucie konsumentów, może napotkać problemy z opóźnieniem konsensusu, gdy liczba konsumentów konkurujących o tę samą kolejkę kworum wzrośnie 5-krotnie. Testy obciążeniowe należy przeprowadzić przy docelowym wolumenie, zanim topologia zostanie zamknięta, a nie po migracji.
| Parametr projektowy | Wymiarowanie pod dziś | Wymiarowanie pod przyszłą skalę |
|---|---|---|
| Współczynnik replikacji | Zgodny z obecną liczbą węzłów | Zgodny z docelową liczbą węzłów przy skali 5-10x |
| Liczba powiązań na exchange | Obecne wzorce routingu | Prognozowana liczba integracji, sprawdzona testami obciążeniowymi |
| Czas resynchronizacji federacji | Nieprzetestowany, dopóki nie wymusi tego incydent | Zmierzony przy prognozowanym wolumenie powiązań |
Kiedy stosować federację, a kiedy Shovel w komunikacji między regionami?
Federacja to domyślny wybór dla stałej dystrybucji między regionami: utrzymuje exchange'e lub kolejki w luźnej synchronizacji między regionami, automatycznie łączy się ponownie po zerwaniu łącza i nie wymaga, aby topologia źródłowa i docelowa były identyczne. Shovel to prostszy mechanizm typu punkt-punkt — przenosi komunikaty z określonego źródła do określonego celu i lepiej sprawdza się przy jednorazowych migracjach, wzorcach przekazywania (relay) lub łączeniu środowisk, które nie będą długoterminowo korzystać z federacji.
Błąd, który najczęściej widzimy w projektach wieloregionowych, to traktowanie federacji jako mechanizmu skalowania, a nie dystrybucji. Federacja nie zmniejsza obciążenia regionu — replikuje je. Jeśli faktycznym wąskim gardłem jest rozrost powiązań lub fan-out konsumentów, dodawanie łączy federacji do kolejnych regionów zwielokrotnia problem, zamiast go rozwiązywać. Zwykle w tym momencie strumienie (streams), używane wewnątrz regionu do wysokowolumenowych dzienników zdarzeń, stają się lepszym uzupełnieniem federacji na granicy regionu, a nie jej zamiennikiem.
| Federacja | Shovel | |
|---|---|---|
| Zastosowanie | Stała dystrybucja między regionami | Jednorazowa migracja lub proste przekazywanie |
| Ponowne łączenie | Automatyczne | Konfigurowalne, domyślnie mniej automatyczne |
| Dopasowanie topologii | Źródło i cel mogą się różnić | Stała ścieżka od źródła do celu |
Czy RabbitMQ przetrwa awarię regionu?
Najpierw uczciwa odpowiedź: nie, nie jako pojedynczy klaster. Standardowy klaster RabbitMQ zakłada niskie opóźnienia w obrębie jednego centrum danych, co omawiamy w artykule HA, disaster recovery i wymiarowanie klastra. Jeśli rozciągnąć konsensus Raft klastra na kilka regionów, każdy zapis płaci realne opóźnienie sieciowe, a fałszywie wykryte partycje przestają być rzadkimi przypadkami brzegowymi i zaczynają zdarzać się co tydzień. Awarię regionu musi obsłużyć coś innego niż klaster, który przetrwa ją w nienaruszonym stanie — trzeba więc wybrać jeden z czterech wzorców i zaakceptować to, ile każdy z nich kosztuje pod względem spójności.
- Federacja. Asynchroniczna replikacja między regionami ze spójnością ostateczną. Każdy region działa niezależnie na własnych lokalnych kolejkach; jeśli łącze z innym regionem zostanie zerwane, komunikaty gromadzą się w kolejce i są przekazywane po ponownym połączeniu. W przypadku awarii regionu wzorzec polega na tym, że ocalały region nadal konsumuje własny lokalny ruch, zamiast bezpośrednio przejmować kolejki regionu, który uległ awarii. To najniższy narzut operacyjny spośród czterech wzorców i ten sam mechanizm, który opisaliśmy wyżej dla stałej dystrybucji między regionami; scenariusz DR różni się tylko tym, że uruchamia go awaria, a nie działa on w sposób ciągły z założenia.
- Shovel. Ta sama asynchroniczna idea, ale w trybie punkt-punkt i prostsza do przeanalizowania. Lepiej pasuje do zdefiniowanej procedury odtwarzania niż do stałej dwukierunkowej synchronizacji: zaległe komunikaty z regionu, który uległ awarii, przenosi się do ocalałego regionu w ramach skryptowego przełączenia awaryjnego, zamiast utrzymywać dwa regiony w stałej relacji synchronizacji.
- Replikacja warm standby w Tanzu RabbitMQ. Opcja komercyjna, nazywana czasem warm schema replication: niemal bieżąca, asynchroniczna kopia całego schematu — kolejek, powiązań, exchange'y, użytkowników i uprawnień — wraz z komunikatami w tranzycie, utrzymywana w lokalizacji zapasowej. Lokalizację zapasową można awansować do roli głównej przy minimalnym nakładzie pracy, a awans działa w obu kierunkach. To najściślejsze RPO z czterech wzorców, mierzone w sekundach opóźnienia, a nie w minutach, i jest to funkcja licencjonowana — ile kosztuje w układzie środowisko główne plus DR, opisujemy na stronie Licencje RabbitMQ.
- Odtwarzanie na poziomie aplikacji z trwałego magazynu. Oprócz standardowej publikacji treść komunikatów, lub tyle danych, ile potrzeba do odtworzenia operacji, zapisuje się w trwałym magazynie całkowicie poza RabbitMQ — w magazynie obiektowym lub tabeli outbox. Po awarii regionu odtwarza się je z tego magazynu w ocalałym regionie. To najwolniejsze odtwarzanie z czterech wzorców i największy nakład inżynierski, by je poprawnie zbudować i przetestować, ale nie wymaga narzędzi DR specyficznych dla RabbitMQ i działa niezależnie od typu kolejki, w tym dla kolejek klasycznych i strumieni, których pozostałe trzy opcje nie obejmują równie dobrze.
Wybór sprowadza się do RPO i RTO, a nie do preferencji. Jeśli firma naprawdę nie może sobie pozwolić na utratę więcej niż kilku sekund danych w tranzycie, replikacja warm standby jest jedynym z czterech wzorców zbudowanym z myślą o tym. Jeśli opóźnienie rzędu minut jest akceptowalne, a zespół już korzysta z federacji do dystrybucji, rozszerzenie tego samego wzorca na przełączanie awaryjne kosztuje niewiele. Jeśli przełączenia awaryjne są na tyle rzadkie, że skryptowy przepływ punkt-punkt łatwiej utrzymać niż stałą relację replikacji, sprawdzi się Shovel. A jeśli nie ma budżetu na licencję komercyjną, a zespół jest w stanie utrzymywać własną logikę odtwarzania, sprawdzi się odtwarzanie na poziomie aplikacji — ale tylko wtedy, gdy ktoś faktycznie przetestuje ścieżkę odtwarzania, zanim region, który jej potrzebuje, przestanie działać.
Niezależnie od wybranego wzorca runbook przełączenia regionu musi na piśmie odpowiadać na pięć kwestii, zanim incydent wymusi odpowiedzi na żywo: kryteria uznania regionu za niedostępny i to, kto ma uprawnienia, by to ogłosić, aby chwilowe zakłócenie nie uruchomiło niepotrzebnego przełączenia; dokładne kroki awansu — czy jest to polecenie przełączenia warm standby, odwrócenie kierunku łącza federacji, czy uruchomienie zadania odtwarzania; sposób przekierowania połączeń klientów — zmiana DNS, zmiana connection stringa lub obie — oraz to, co mają zrobić istniejące połączenia w regionie, który uległ awarii, gdy nie mogą się tam ponownie połączyć; plan uzgodnienia stanu po powrocie regionu, aby nie przetwarzać tej samej pracy dwukrotnie i nie doprowadzić ponownie do split-brain między dwoma regionami, z których każdy uważa się za główny; oraz krok weryfikacji — głębokości kolejek, opóźnienie konsumentów (consumer lag) i najlepiej transakcja syntetyczna — który potwierdza, że przełączenie faktycznie zadziałało, zanim ktokolwiek uzna incydent za rozwiązany. Nasza praca nad disaster recovery opartym na odtwarzaniu z Boomi pokazuje, jak taki runbook wygląda w praktyce w zespołach, które stosują właśnie wzorzec odtwarzania na poziomie aplikacji.
Kiedy dzielić środowisko na kilka logicznych klastrów, a kiedy skalować jeden?
Dzielić należy wtedy, gdy obciążenia mają rzeczywiście różne wymagania dotyczące dostępności, gdy hałaśliwy najemca lub najemca z dużą liczbą powiązań może pogorszyć działanie łączy federacji współdzielonych z krytycznym obciążeniem, albo gdy granice rezydencji danych lub wymogi regulacyjne wprost tego wymagają. W opisanym wyżej przykładzie z systemem SCADA argument za izolacją był konkretny: integracje z dużą liczbą powiązań współdzieliły klaster z monitoringiem rurociągów krytycznym dla bezpieczeństwa ludzi, co oznaczało, że rozrost routingu jednego zespołu mógł spowolnić resynchronizację federacji, od której drugi zespół zależał, aby uniknąć wymuszonego wyłączenia.
Jeden klaster należy zachować, gdy taka asymetria nie występuje. Każdy dodatkowy klaster logiczny to kolejna topologia do monitorowania, kolejny zestaw łączy federacji do utrzymania i kolejne pole do rozjazdu konfiguracji między środowiskami. Zespoły, które dzielą klaster przedwcześnie — zanim pojawi się rzeczywisty powód do izolacji — zwykle kończą z większym narzutem operacyjnym, niż podział im zaoszczędził.
Jak wygląda plan migracji i wdrożenia?
Plan wdrożenia porządkuje zmiany tak, aby ruch produkcyjny nigdy nie zależał od jednego przełączenia. Zwykle oznacza to nową topologię uruchomioną obok starej, ruch przenoszony stopniowo według kolejek lub grup konsumentów oraz aktywną ścieżkę wycofania, dopóki nowy projekt nie przejdzie pełnego cyklu szczytowego obciążenia. Konwersje kolejek kworum, przeprojektowanie powiązań i zmiany łączy federacji otrzymują osobne fazy, zamiast trafiać na produkcję jednocześnie.
Decyzja o kolejności, którą najczęściej się pomija, to porządkowanie według ryzyka, a nie wygody. Zespoły zwykle migrują najpierw najłatwiejsze obciążenia, bo to pokazuje postęp — tymczasem projekt na przyszłość powinien wskazać obciążenie, które faktycznie weryfikuje najbardziej ryzykowne założenie nowej topologii, i zmigrować je na tyle wcześnie, by wciąż można było zmienić kurs, jeśli założenie okaże się błędne.
Projektowanie z myślą o tym, dokąd zmierza firma, a nie gdzie jest dziś
Większość architektur RabbitMQ nie jest błędna na dziś — jest błędna na półtora roku naprzód, a nikt nie zaplanował rozmowy, która by to wychwyciła. Projektowanie pod przyszłą skalę jest właśnie taką rozmową, prowadzoną świadomie, a nie w trakcie awarii.
Jeśli Państwa zespół planuje wzrost, fuzję lub ekspansję na kolejne regiony i chce mieć udokumentowaną architekturę docelową oraz plan wdrożenia, zanim podejmie wiążące decyzje, nasz zespół architektów RabbitMQ prowadzi to jako ustrukturyzowany projekt — ocena stanu obecnego, projekt stanu docelowego z udokumentowanym uzasadnieniem i etapowy plan migracji uporządkowany według ryzyka. Zapraszamy do rozmowy z architektem RabbitMQ o zakresie takiego projektu dla Państwa środowiska.
Najczęściej zadawane pytania
Na czym polega projektowanie architektury RabbitMQ pod przyszłą skalę?
To ustrukturyzowany proces planowania — ocena stanu obecnego, projekt stanu docelowego, plan migracji — który wymiaruje RabbitMQ pod to, dokąd zmierza firma, a nie tylko pod to, gdzie jest dziś. Zastępuje jednorazowe łatki udokumentowanym planem topologii, kolejek i komunikacji między regionami, który zespół może realizować przez kolejne kwartały, a nie w trakcie incydentu.
Jak sprawdzić, czy architektura RabbitMQ przetrwa wzrost 5-10x?
Należy zamodelować trzy elementy, które w dużej skali psują się nieliniowo: liczbę powiązań na exchange, czas odbudowy łącza federacji po utracie węzła oraz narzut replikacji kolejek. Jeśli liczba powiązań już dziś sięga dziesiątek tysięcy lub resynchronizacja federacji trwa minuty, przy większym wolumenie ta krzywa będzie się pogarszać, a nie poprawiać.
Czym różni się federacja RabbitMQ od Shovel w środowisku wieloregionowym?
Federacja utrzymuje exchange'e lub kolejki w luźnej synchronizacji między regionami z automatycznym ponownym łączeniem i jest domyślnym wyborem dla stałej replikacji między regionami. Shovel przenosi komunikaty w trybie punkt-punkt między stałym źródłem a celem i lepiej sprawdza się przy jednorazowych migracjach lub prostych wzorcach przekazywania niż w stałej topologii wieloregionowej.
Jak wymiarować kolejki kworum pod przyszły wzrost, a nie tylko bieżące obciążenie?
Współczynnik replikacji (zwykle 3, czasem 5 dla krytycznych kolejek) należy dobierać do docelowej, a nie obecnej liczby węzłów, a liczbę powiązań i konsumentów sprawdzić testami obciążeniowymi przy prognozowanym wolumenie, zanim zapadnie decyzja o topologii. Narzut replikacji kolejek kworum rośnie wraz z rozmiarem klastra, więc projekt, który działa przy 3 węzłach, przy 9 może zachowywać się inaczej.
Kiedy podzielić RabbitMQ na kilka logicznych klastrów zamiast skalować jeden?
Gdy obciążenia mają istotnie różne wymagania dotyczące dostępności, gdy jeden hałaśliwy najemca może pogorszyć działanie łączy federacji innego albo gdy granice regulacyjne lub wymogi rezydencji danych wymagają izolacji. Jeden klaster warto zachować, gdy narzut operacyjny utrzymywania kilku przewyższa korzyści z izolacji — większość zespołów ten narzut niedoszacowuje.
Ile zwykle trwa projekt architektury RabbitMQ pod przyszłą skalę?
Skoncentrowana faza projektowa — od oceny stanu obecnego po udokumentowaną architekturę docelową i plan wdrożenia — trwa zwykle od trzech do sześciu tygodni, w zależności od tego, ile zespołów i aplikacji zależnych musi się wypowiedzieć na temat ograniczeń. Wdrożenie i migracja to osobna, dłuższa faza.
Czy przejście na wieloregionowy projekt oparty na strumieniach wymaga rezygnacji z federacji?
Nie. Strumienie i federacja rozwiązują różne problemy i mogą współistnieć — strumienie służą do wysokowolumenowych, odtwarzalnych dzienników zdarzeń w obrębie regionu, a federacja do dystrybucji między regionami. Większość projektów na przyszłość zachowuje federację na granicy regionu, a strumienie wprowadza wewnętrznie tam, gdzie faktycznym wąskim gardłem jest rozrost powiązań.
Jakie rezultaty daje projektowanie architektury RabbitMQ pod przyszłą skalę?
Ocenę stanu obecnego dokumentującą dzisiejszą topologię i jej punkty krytyczne, architekturę docelową z udokumentowanym uzasadnieniem każdej ważnej decyzji oraz etapowy plan migracji, który porządkuje zmiany tak, aby ruch produkcyjny nigdy nie był zablokowany przez jedno przełączenie typu big bang.
Czy RabbitMQ przetrwa awarię regionu?
Nie jako pojedynczy klaster rozciągnięty na kilka regionów; standardowy klaster RabbitMQ zakłada niskie opóźnienia w obrębie jednego centrum danych i źle znosi opóźnienia łącza między regionami. Przetrwanie awarii regionu wymaga federacji, Shovel, replikacji warm standby w Tanzu RabbitMQ lub odtwarzania na poziomie aplikacji z trwałego magazynu między dwoma niezależnymi klastrami regionalnymi — wybór zależy od tego, jaką utratę danych i jaki czas odtwarzania firma może zaakceptować. Replikacja warm standby zapewnia najściślejszy punkt odtwarzania, ale jest licencjonowaną funkcją komercyjną; pozostałe trzy to wzorce open source z luźniejszymi gwarancjami.
Czy federacja RabbitMQ nadaje się do disaster recovery?
Tak, dla zespołów, które mogą zaakceptować ostatecznie spójny punkt odtwarzania mierzony w minutach, a nie sekundach. Federacja replikuje asynchronicznie między regionami i automatycznie łączy się ponownie po zerwaniu łącza, więc ocalały region w trakcie awarii nadal obsługuje własny ruch. Nie daje najściślejszego dostępnego RPO — to zapewnia replikacja warm standby w Tanzu RabbitMQ — ale jej rozszerzenie kosztuje niewiele, jeśli zespół już korzysta z federacji do stałej dystrybucji między regionami.
Talk to an engineer
Need a hand with RabbitMQ?
Senior engineers who run it in production. Get a quote or a free consultation, no sales pitch.
Poradniki, porównania i analizy

