Fivetran maakt het mogelijk om via zijn Connector SDK aangepaste connectors te bouwen voor elke databron. Deze uitbreiding elimineert datagaten en zorgt ervoor dat bedrijven al hun data kunnen centraliseren, ongeacht waar deze zich bevindt.
Het data movement-platform kondigt vlak voor de start van de Snowflake Summit aan dat ontwikkelaars nu betrouwbare pipelines kunnen bouwen voor gespecialiseerde of eigen systemen. Tot nu toe waren teams vaak aangewezen op het zelf ontwikkelen en onderhouden van aangepaste pipelines wanneer er geen voorgebouwde connector bestond.
De uitbreiding komt enkele weken na Fivetrans overname van Census, waarmee het bedrijf uitgroeide tot een volledig beheerd platform voor dataverplaatsing in beide richtingen.
Infrastructuur zonder DevOps
Met de SDK schrijven ontwikkelaars de logica in Python, terwijl Fivetran de infrastructuur beheert. Dit omvat deployment, orkestratie, scaling, monitoring en error handling. De meeste connectors kunnen volgens het bedrijf binnen enkele uren gebouwd en geïmplementeerd worden, zonder DevOps-ondersteuning of aangepaste infrastructuur.
“Wanneer er geen voorgebouwde connector is, bouwen de meeste teams zelf aangepaste pipelines”, vertelt Chief Product Officer Anjan Kundavaram. “Die DIY-aanpak lijkt aanvankelijk flexibel, maar wordt vaak een langetermijnlast met verborgen kosten voor betrouwbaarheid, security en onderhoud.”
De SDK gebruikt dezelfde infrastructuur als Fivetrans volledig beheerde connectors. Het systeem zorgt voor retries, monitoring en alerting om ervoor te zorgen dat data wordt geleverd waar nodig, of dat nu BigQuery, Databricks, Snowflake of een andere bestemming is.
De SDK-uitbreiding is onderdeel van Fivetrans strategie om datateams te ondersteunen bij het elimineren van datagaten en het centraliseren van bedrijfsinformatie voor analytics, AI en besluitvorming.