Google breidt data-import voor BigQuery uit
Google Cloud heeft nieuwe connectors en functies toegevoegd aan BigQuery Data Transfer Service. Volgens een blog van Google kunnen organisaties daarmee data uit meer databases, cloudomgevingen en zakelijke applicaties automatisch naar BigQuery overbrengen, zonder hiervoor eigen code te schrijven.
BigQuery Data Transfer Service is een beheerde dienst voor het automatisch importeren van data in BigQuery. Google breidt de dienst onder meer uit met ondersteuning voor relationele databases, marketingplatforms en e-commerceapplicaties.
Nieuwe connectors
De connectors voor PostgreSQL en MySQL zijn nu algemeen beschikbaar. Microsoft SQL Server wordt als preview ondersteund. Hiermee kan data uit deze databases volledig of stapsgewijs naar BigQuery worden overgebracht. De databases kunnen lokaal, in Google Cloud of in andere cloudomgevingen draaien.
Daarnaast zijn connectors voor Shopify, Klaviyo, HubSpot en Mailchimp in preview beschikbaar. Hiermee kunnen bijvoorbeeld gegevens over klanten, bestellingen en marketingcampagnes naar BigQuery worden gehaald.
De bestaande migratieconnector voor Snowflake is nu algemeen beschikbaar. Deze ondersteunt onder meer stapsgewijze overdracht van data en automatische herkenning van databaseschema’s. Ook de bestaande connectors voor ServiceNow, Salesforce en Oracle zijn uitgebreid met ondersteuning voor stapsgewijze updates.
AI-agents
Google heeft daarnaast een Model Context Protocol-server voor BigQuery Data Transfer Service in preview beschikbaar gemaakt. Hiermee kunnen ontwikkelaars AI-applicaties en AI-agents verbinden met de dienst. De agents kunnen vervolgens databronnen vinden en namens een gebruiker overdrachten configureren en uitvoeren.
Ook kunnen gebruikers data uit Google Cloud Storage, Amazon S3 en Azure Blob Storage rechtstreeks importeren in beheerde Apache Iceberg-tabellen. Deze mogelijkheid is eveneens beschikbaar in preview.
Google positioneert de uitbreidingen als een manier om minder eigen datapijplijnen te hoeven bouwen en onderhouden. BigQuery Data Transfer Service integreert daarbij met de beveiligingsmogelijkheden van Google Cloud.
Bron: Google Cloud
