Validators DAO vernieuwt de TypeScript-client voor Yellowstone Geyser gRPC in Solana Stream SDK. NAPI-RS verbetert prestaties en stabiliteit bij hoogfrequente streaming

ELSOUL LABO B.V. (Hoofdkantoor: Amsterdam, Nederland; CEO: Fumitake Kawasaki) en Validators DAO kondigen een grote versie-update aan van de TypeScript-client van het opensource Solana-streamingframework "Solana Stream SDK," waardoor de TypeScript Yellowstone Geyser gRPC-client gebruik kan maken van NAPI-RS (native Rust-implementatie).

Met deze update vergroot Solana Stream SDK de verwerkingsmarge en stabiliteit voor hoogfrequente streamingworkloads, met behoud van de vertrouwde TypeScript-ontwikkelervaring. Ook tijdens piekverkeer en aanhoudende event-bursts is het systeem ontworpen om stabiel te blijven en niet vast te lopen. Daarnaast is de starterscode niet langer beperkt tot eenvoudige verbindingsvoorbeelden, maar heringericht als een productieklaar fundament voor praktijkgebruik en verdere uitbreiding.

Solana-streams worden gebruikt in domeinen waar realtime responsiviteit zich direct vertaalt in waarde, zoals handel, monitoring, analytics en operationele besluitvorming. Tegelijkertijd zijn veel ontwikkelomgevingen in de praktijk fundamenteel webgebaseerd, waardoor TypeScript een sterke keuze is vanwege ontwikkelsnelheid, onderhoudbaarheid, teamflexibiliteit en overdraagbaarheid.

Wat er daarom toe doet, is niet simpelweg dat streams in TypeScript kunnen worden afgehandeld, maar dat hoogfrequente streams realistisch en duurzaam in TypeScript kunnen worden verwerkt zonder in te storten bij langdurig gebruik.

Hoogfrequente streaming omvat continue ontvangst, verwerking, filtering, decodering en uitvoering van downstreamlogica, allemaal gelijktijdig draaiend. Onder deze omstandigheden is een singlethreaded Node.js-uitvoeringspad gevoelig voor backpressure tijdens bursts of kortdurende belastingspieken.

In de praktijk manifesteert dit zich vaak als verhoogde latentie, verwerkingsachterstanden, verloren events en frequente herverbindingen. Hoewel TypeScript uitblinkt in ontwikkelsnelheid en onderhoudbaarheid, is de belangrijkste operationele uitdaging of tijdens piekomstandigheden bij streaming voldoende verwerkingsmarge behouden blijft. Deze update pakt die uitdaging direct aan.

Eerder werd NAPI-RS binnen Solana Stream SDK voornamelijk gebruikt in de Shreds gRPC TypeScript-client. Met deze update is NAPI-RS (Rust native) ondersteuning uitgebreid naar de veelgebruikte Yellowstone Geyser gRPC TypeScript-client.

Hierdoor kan een aanzienlijk groter deel van de streaming-pipeline profiteren van native uitvoering met weinig overhead met behoud van een TypeScript-gebaseerde interface. Interne benchmarks tonen een aanzienlijke verbetering in de bestendigheid tegen backpressure bij piekbelasting, waarbij de verwerkingsmarge tot ongeveer vier keer toeneemt. Het belangrijkste resultaat is niet de numerieke vermenigvuldiger zelf, maar de verschuiving naar gedrag dat ineenstorting onder piekomstandigheden vermijdt en als een betrouwbaar uitgangspunt voor beheer kan worden beschouwd.

Vergeleken met alternatieven zoals WebAssembly (WASM) voert NAPI native code rechtstreeks uit, waardoor lagere latentie en hogere doorvoer mogelijk zijn. Binnen Solana Stream SDK speelt NAPI-RS een centrale rol bij het verhogen van realtimestreamprestaties zonder de TypeScript-ontwikkelervaring op te offeren.

Geyser gRPC is een kerninterface voor het ontvangen van streams met lage latentie van transacties, accountupdates en slot-events. Vertragingen of dataverlies vertalen zich direct in gemiste handelskansen, vertraagde monitoring en operationele besluitvorming, en hogere ontwikkelings- en operationele kosten.

Het mogelijk maken van realistisch, piekbestendig gebruik van deze kerninterface in TypeScript is niet slechts een kwestie van snelheid. Het vermindert wrijving in zowel ontwikkeling als beheer, waardoor teams hun systemen continu kunnen verbeteren zonder van stack te wisselen of kernlogica te herschrijven.

Voorheen diende starterscode voornamelijk als instappunt voor snelle connectiviteitstests. In de dagelijkse praktijk zijn problemen zoals verbroken verbindingen, herverbindingen, streamcontinuïteit, duplicatie of verlies, abonnementsfiltering en piekbelastingcontrole echter onvermijdelijk.

Als de initiële structuur te licht is, worden deze praktische vereisten vaak later op ad-hocbasis toegevoegd, wat een scheve structuur veroorzaakt en de onderhoudskosten op lange termijn verhoogt. Deze update reorganiseert de starterscode als een fundament dat echte operationele eisen vanaf het begin kan doorstaan.

Aan de TypeScript-zijde zijn verantwoordelijkheden duidelijk gescheiden om uitbreidingspunten expliciet te maken. Het instappunt is minimaal gehouden en gericht op wiring en opstart, terwijl verwerkingslogica is geïsoleerd in handlers. Hooks zoals onTransaction en onAccount definiëren duidelijke invoegpunten voor aangepaste logica.

Deze structuur maakt het mogelijk handelslogica, detectielogica, filterbeleid en uitvoerbestemmingen lokaal en voorspelbaar aan te passen. Abonnementsdefinities zijn eveneens samengebracht in TypeScript-code in plaats van JSON-gebaseerde configuraties, wat de leesbaarheid en typeveiligheid verbetert. Leesbare constructen zoals CommitmentLevel.PROCESSED verminderen configuratiedrift tussen code en runtimegedrag.

Bij hoogfrequente streaming is snelheid alleen onvoldoende; veerkracht is even cruciaal. Deze update biedt nog steeds ingebouwde mechanismen zoals backpressure-beheersing (begrensde wachtrijen, drop-logging), metrics voor ontvangen, verwerkte en verloren events, verbindingsbehoud (ping/pong), exponentiële backoff en hiaatherstel op basis van from_slot.

Dit zijn geen optionele verbeteringen maar basale vereisten voor productie-streamingsystemen. Starterscode als productieklaar beschouwen betekent deze aannames vanaf het begin inbedden in plaats van ze later toe te voegen.

Deze update richt zich op ontwikkelaars die realtime Solana-streams in productie willen draaien met TypeScript, teams die lage-latentie detectie-, handels- en monitoringsystemen bouwen met Yellowstone Geyser gRPC, en ontwikkelaars die uitdagingen ondervinden met betrekking tot piekbelastingverwerking en herverbindingsgedrag. Het doel is de operationele haalbaarheid van TypeScript-gebaseerde streaming te verhogen zonder de inherente voordelen ervan op te offeren.

Updates voor Solana Stream SDK zijn beschikbaar op GitHub. Feedback is welkom via GitHub of via de officiële Discord van Validators DAO.

ERPC biedt Solana streaming-infrastructuur aan in meerdere regio's. Met de starterscode van Solana Stream SDK kunnen ontwikkelaars gedrag rechtstreeks valideren in daadwerkelijke Geyser gRPC-omgevingen. Via de gratis proefperiode van ERPC is het ook mogelijk de SDK en streaming-infrastructuur samen te evalueren onder omstandigheden die de productiepraktijk benaderen. Verdere details zijn beschikbaar op de ERPC officiële website.

officiële Discord van Validators DAO: https://discord.gg/C7ZQSrCkYR Solana Stream SDK (GitHub): https://github.com/ValidatorsDAO/solana-stream ERPC officiële website: https://erpc.global/nl/