Självbetjänad åtkomst till öppen källkods-infrastruktur med hjälp av NATS och Huma

Jon Ander Novella de Miguel

Safespring Engineer

Texten är automatiskt översatt för din bekvämlighet, du kan läsa texten på:

Jag hade nyligen möjlighet att presentera på OpenInfra Day Sweden 2024, och jag är glad att kunna dela med mig av insikter och nyheter från vårt team på Safespring.

Under de senaste tre månaderna har vi arbetat med ett nytt verktyg som är utformat för att förbättra självserviceåtkomst till open source-infrastruktur för våra B2B-kunder och kunder inom den europeiska forskargemenskapen. Detta verktyg drar nytta av NATS och Huma.

Safesprings uppdrag Safespring siktar på att bli den plattform som föredras för europeisk molnberäkning. Vi är dedikerade till att leverera säkra, regelefterlevande molntjänster över flera datacenter i Norden, inklusive Oslo, Stockholm och Luleå. Våra erbjudanden följer GDPR och europeiska säkerhetsstandarder, vilket säkerställer förstklassig säkerhet för våra användare.

Ladda ner presentation
Klicka här för att ladda ner presentationen som PDF.

Projektöversikt

Vårt projekt adresserar behovet av automatiserad provisionering av resurser som projekt, användare, nätverk och åtkomstkontrollistor (ACL) över flera OpenStack-installationer. Vi utvecklade ett självservice-API med två nyckeltekniker:

NATS - ett meddelandesystem för mikrotjänster.
Huma - ett HTTP-ramverk i Golang som underlättar skapandet av OpenAPI-specifikationer.

Mål för självservice-API:t

Distribuerad hantering: Möjliggör effektiv distribuerad hantering av kundresurser, minskar driftkostnader och låter kunder provisionera projekt vid behov.
Infrastrukturfederation: Stöd för federation av infrastruktur för projekt som involverar flera organisationer, till exempel vårt pågående samarbete med Europeiska kommissionen.
Kontrollerad resursprovisionering: Införa ett kontrollager för att hantera kunders resursförfrågningar och säkerställa efterlevnad av fördefinierade kvoter och åtkomstnivåer.

Tekniska detaljer

Huma-ramverket

Kompatibilitet med populära routrar.
Användning av generiska HTTP-handler-signaturer för bättre underhållbarhet.
Annoterade struct-typer för in- och utdatamodeller, vilket möjliggör automatisk generering av OpenAPI-specifikationer.

Huma, HTTP-ramverket vi valde, är integrerat i Golang-ekosystemet.

<div class="pb-2"></div>

NATS-mikrotjänster

Fire-and-forget-meddelanden: effektiv publicering av meddelanden utan att invänta svar.
Ämnesbaserad kommunikation: möjliggör riktad kommunikation med flera tjänster samtidigt.
Inbyggd lastbalansering: säkerställer hög tillgänglighet och effektiv resursfördelning.

För att övervinna HTTP:s begränsningar kring dynamisk tjänsteupptäckt och lastbalansering använde vi NATS som meddelande-middleware.

<div class="pb-2"></div>

Arkitektur

Vår arkitektur består av:

Självservice-HTTP-API: det huvudsakliga gränssnittet för användarinteraktion.
NATS-mikrotjänster: distribuerade över olika datacenter, lyssnar på ämnen och utför operationer som att skapa projekt och användare.
Centrala tjänster: inklusive en kvot- och ACL-kontroller för att hantera resursallokering och åtkomstkontroll.

Meddelandemönster

Vi implementerade flera NATS-meddelandemönster, bland annat:

Fan-in och fan-out: distribuerar meddelanden från självservice-API:t till flera tjänster.
Scatter/gather: aggregerar svar från flera tjänster för att ge klienten ett heltäckande resultat.

Utmaningar och lösningar

Enhetligt API för OKD och OpenStack: utveckla en abstraktion som fungerar över olika plattformar samtidigt som komplexiteten kring användare och grupper hanteras.
Integrationstester: säkerställa robust testning mot återställningsbara OpenStack- och OKD-miljöer, trots utmaningar med nästlad virtualisering.

Slutsats

Detta projekt är ett viktigt steg mot att erbjuda skalbar självserviceåtkomst till open source-infrastruktur för våra kunder. Genom att utnyttja NATS och Huma har vi skapat ett robust, effektivt och säkert verktyg som möter de växande behoven hos våra B2B-kunder och den europeiska forskargemenskapen.

Hör gärna av dig om du har några frågor eller vill ha mer detaljerad information om vårt projekt!