ClickHouse Cloud maakt executable UDF’s algemeen beschikbaar
ClickHouse heeft executable user-defined functions (UDF’s) sinds gisteren algemeen beschikbaar gemaakt in ClickHouse Cloud op AWS, Google Cloud en Microsoft Azure. In een blog schrijft het bedrijf dat gebruikers nu ook gecompileerde code kunnen uitvoeren, netwerkverbindingen vanuit UDF’s kunnen gebruiken en prestaties per query kunnen volgen.
Executable UDF’s maken het mogelijk om eigen functies vanuit SQL aan te roepen. ClickHouse introduceerde de functionaliteit vier maanden geleden als publieke bèta. Gebruikers konden toen Python-code uploaden en als functie binnen queries gebruiken. Met de algemene beschikbaarheid voegt ClickHouse verschillende mogelijkheden toe die tijdens de bètafase werden gevraagd.
Ondersteuning voor gecompileerde code
Een nieuwe Native runtime ondersteunt vooraf gecompileerde binaries. Volgens ClickHouse kunnen ontwikkelaars hiervoor onder meer Rust, Go en C++ gebruiken. JavaScript-code die met Bun is gecompileerd, wordt ook ondersteund. De bestaande mogelijkheid om Python te gebruiken blijft beschikbaar.
UDF’s kunnen nu ook uitgaande verbindingen maken met publieke endpoints. Die netwerktoegang was tijdens de bètafase nog beperkt beschikbaar. ClickHouse heeft bovendien ondersteuning voor Azure toegevoegd, waardoor de functies nu op alle drie de cloudplatforms worden aangeboden.
Meer beheer en observability
ClickHouse voegt een geheugenlimiet per proces toe en introduceert een deterministic-optie. Met die instelling kan de querycache ook resultaten gebruiken van queries waarin een UDF wordt aangeroepen.
Voor beheer via infrastructuurcode zijn twaalf UDF-endpoints toegevoegd aan de Cloud API. De Terraform-provider bevat bovendien resources voor UDF’s en bijbehorende attachments. Versies kunnen per service worden vastgezet.
Ook de observability is uitgebreid. ClickHouse 26.6 en nieuwere versies bevatten acht ProfileEvents-counters en twee asynchrone metrics voor UDF’s. Beheerders kunnen onder meer verwerkingstijd, wachttijd, CPU-gebruik, geheugenverbruik en dataverkeer terugzien in system.query_log.
Geen afzonderlijke kosten
ClickHouse brengt geen afzonderlijke kosten voor executable UDF’s in rekening. De functies draaien in de pods van de bestaande service en gebruiken dezelfde CPU- en geheugenresources als reguliere queries.
Het bedrijf demonstreert de nieuwe mogelijkheden met UDF’s die onder meer tokens van large language models tellen en antwoorden van taalmodellen beoordelen. ClickHouse gebruikt dit voorbeeld om te laten zien hoe externe bibliotheken en eigen programmalogica dichter bij de data kunnen worden uitgevoerd.
Bron: ClickHouse




