Engineer / Data / Kategorier
Automatisering og CI/CD
30 dagers strømdata på 180 ms
Utviklet varianter for timesaggregering av strømforbruk i Python, SQL og Bash + Jq; Python‑varianten behandlet ett JSONL‑datasett for 30 dager på 180 ms i ytelsestesten.
Bygde og ytelsestestet aggregering av strømforbruk i Python, SQL og Bash + Jq; Python behandlet ett JSONL-datasett for 30 dager på 180 ms.
Løste 1 000 problemer i geografiske data
Løste 1 000 problemer i geografiske data og tidsseriedata med GDAL, ArcGIS, PostGIS, Mapbox, QGIS, SQL (PL/pgSQL, Transact‑SQL) og Bash, og sikret behandling av stordata med høy kvalitet.
Løste over 1 000 problemer i geografiske stordata og tidsseriedata med GDAL, PostGIS, ArcGIS, Mapbox, QGIS og SQL — 35 % raskere spørringer.
Designet og driftet 6 ETL/ELT‑pipelines
Designet, implementerte og administrerte 6 ETL/ELT‑pipelines med Google BigQuery, MSSQL, PostgreSQL, Shell‑skripting, PL/pgSQL og Transact‑SQL, og integrerte data for effektiv behandling i et Python‑API.
Designet og drev 6 ETL/ELT-pipelines (BigQuery, MSSQL, PostgreSQL) og kortet en manuell jobb på 3 timer ned til under 20 minutter med daglig synk.
Bygde selskapets første observerbarhetsdashbord
Utviklet og lanserte selskapets første dashbord for observerbarhet, med sanntidsinnsikt i systemytelsen og datavisualisering på den store TV‑skjermen på kontoret.
Bygde selskapets første dashbord for observerbarhet med sanntidsinnsikt i systemene, slik at teamene oppdaget og løste hendelser 40 % raskere.
Drev 10 Postgre- og MS SQL‑servere på Ubuntu
Designet, satte i produksjon og vedlikeholdt 10 PostgreSQL- og MS SQL‑servere på Ubuntu Linux‑VPS‑er, og sikret optimal serverytelse og pålitelighet.
Designet og vedlikeholdt 10 PostgreSQL- og MS SQL-servere på Ubuntu Linux VPS med 99,9 % oppetid og 30 % raskere spørringer gjennom finjustering.
Skrev 1 000 RBAC‑regler for å sikre Linux‑servere
Styrket datasikkerheten ved å innføre 1 000 RBAC‑regler for utviklere, applikasjonsinstanser, PostgreSQL, MS SQL og andre Linux‑servere, og forhindret uautorisert tilgang; dokumentert med Ansible‑automatisering.
Implementerte 1 000 registrerte RBAC-regler for utvikler-, applikasjons-, database- og Linux-tilgang med dokumentert Ansible-konfigurasjon.
Automatiserte GIS‑SaaS‑utrulling i GitHub Actions
Automatiserte produksjonssettingen, databehandlingen og rapporteringssystemet for en GIS SaaS‑applikasjon med GitHub Actions CI/CD, Python, Bash og SQL.
Automatiserte produksjonssetting, databehandling og rapportering for GIS-SaaS med CI/CD i GitHub Actions, Python, Bash og SQL — kortere, pålitelige utgivelser.
Automatiserte leveransen av 20 GIS‑datapipelines
Automatiserte leveransen av 20 GIS‑datapipelines og ETL‑prosesser for applikasjonsdata, og effektiviserte infrastrukturautomatisering og rapportering.
Automatiserte 20 GIS-datapipelines og ETL-prosesser for appdata, forenklet infrastrukturautomatiseringen og leverte pålitelige, oppdaterte data.
Automatiserte 100 kritiske sikkerhetskopier
Automatiserte 100 kritiske sikkerhetskopier av data med Barman, Google Cloud, Bash og Python, og sikret dataintegriteten på tvers av databasene.
Automatiserte 100 kritiske databasesikkerhetskopier med Barman, Google Cloud, Bash og Python — gjenopprettbare data ble et testet faktum.
Sparte 4 000 timer med GitHub og GitLab CI/CD
Effektiviserte prosessene for dataanalyse og programvareutvikling og sparte 4 000 timer ved å innføre CI/CD‑praksis med GitHub, GitLab, Bash og Python.
Sparte ca. 4 000 timer ved å innføre CI/CD med GitHub, GitLab, Bash og Python, som gjorde dataanalyse og utvikling raskere og mer konsistent.
Utviklet et rapporteringssystem for dataanalyse
Utviklet et rapporteringssystem for dataanalyse og økte kvartalsinntektene fra programvaren med 400 % gjennom Python‑baserte PDF‑rapporter.
Bygde et rapporteringssystem for dataanalyse i Python som økte den kvartalsvise programvareomsetningen med 400 % med tydelige PDF-rapporter i rett tid.
Automatiserte databehandling i Python og PL/pgSQL
Automatiserte databehandlingsoppgaver med Shell‑skripting, PL/pgSQL, Python og Transact‑SQL, og økte produktiviteten og effektiviteten.
Automatiserte databehandlingsoppgaver med Shell, PL/pgSQL, Python og Transact-SQL, økte produktiviteten og gjorde slutt på små, gjentakende feil.
Utviklet 600 ETL/ELT‑pipelines i PL/pgSQL
Utviklet 600 PL/pgSQL‑baserte ETL/ELT‑pipelines for å effektivisere komplekse arbeidsflyter for databehandling på tvers av flere utviklings- og produksjonsmiljøer i PostgreSQL.
Utviklet 600 registrerte ETL/ELT-pipeliner i PL/pgSQL for PostgreSQL i utvikling og produksjon, med inkrementell lasting og logging.
Designet et tidsstyrings- og rapportsystem
Designet et system for tidsstyring og rapportering som var i produksjon i årevis uten vesentlige endringer.
Designet et system for tidsstyring og rapportering som var i produksjon i årevis uten vesentlige endringer.
Flyttet tregt arbeid over i en River‑jobbkø
Flyttet tregt arbeid ut av forespørselsbanen og over i en River‑jobbkø — 15 worker‑moduler, 8 planlagte oppgaver og 20 pg_cron‑jobber — slik at en forespørsel returnerer mens arbeidet bak den fortsetter.
Flyttet tidkrevende arbeid ut av forespørselsløpet og over i en jobbkø i River: 15 arbeidermoduler, 8 planlagte oppgaver og 20 vedlikeholdsjobber i pg_cron.
Skrev en avgrensningsregel etter tilgangslekkasje
Skrev en avgrensningsregel inn i repoet etter at en omstrukturering hadde ført et annet selskaps inventar, brannmuråpninger og tekst inn i det — og holdt de karantenesatte restene under skanneren for hemmeligheter i stedet for å unnta dem.
Omfangsgrensen er en skriftlig regel med en oppgitt test, restene er synlige i stedet for begravd, og den konkrete formen for påloggingsopplysning som slapp…
Erstattet 963 metadatablokker med én graf
Byttet ut 963 anonyme blokker med strukturerte data, som gjentok selskapet 1 671 ganger, mot én lenket graf av 16 typer utledet fra stabile opprinnelsesidentifikatorer.
Én graf med stabil identitet erstatter 963 anonyme gjentakelser, og sidene bærer mindre, ikke mer.
Bygde en databasedrevet CV‑generator
Bygde en databasedrevet generator for CV, referanser, portefølje og søknadsbrev i Python — 41 moduler, 10 580 linjer — som gjengir seks utdataformater fra én SQLite‑kilde med 23 tabeller, satt sammen av en idempotent pipeline i 19 trinn.
Seks formater, tre språk og fem temaer kommer ut av én database, og en rettet setning rettes én gang.
Skrev tester for selve kontrollverktøyene
Skrev tester for selve kontrollene etter å ha slått fast at en kontroll som bare får ren inndata, en dag vil melde rent fordi den ikke leste noe — plantet en stavefeil for å bekrefte at stavekontrollen finner den, og hentet et id‑område fra databasen i stedet for fra et tall i testen.
Hvert kontrollskript i prosjektet har nå en test som beviser at det feiler på dårlige inndata, og assertene for intervaller leser fra sannhetskilden.
Bygde en tallkontroll på tvers av språk
Bygde en innholdskontroll på tvers av språk som feiler når en oversettelse mister et tall den engelske teksten oppgir, og når et språk bruker en notasjon som ikke hører hjemme i det — og fant to danske beskrivelser som manglet en måleverdi, og seksten ukrainske tekstbiter med engelske anførselstegn.
Atten reelle feil ble lukket, og hele feilklassen med dem, siden hver fremtidige oversettelse sammenlignes med sin engelske kilde før den kan committes.
Kjenn lisensen til alt dere leverer
Reviderte 644 Rust‑crates for lisenskompatibilitet ved hvert bygg, og beviste at kontrollen slår ut ved å skrive om lisensen til én crate og ved å flytte den låste kjernerevisjonen uten å regenerere.
Lisensgrunnlaget for distribusjonen sjekkes ved hver bygging, og det er kjent at sjekken virker fordi den ble provosert til å feile, ikke fordi den aldri har…
Målte 13 adresser uten sporing
Målte tretten adresser ut fra webserverens egen tilgangslogg alene — ingen informasjonskapsel, ikke noe sporingsverktøy og ingen tredjepartstjeneste — maskerte klientnettverket idet hver linje skrives, og samlet resultatet i et permanent arkiv med 21 daglige tellinger og 20 månedlige fasetter.
Tretten adresser måles på denne måten, og nettstedet leverer ingen informasjonskapsel, ingen sporer og ingen tredjepartsforespørsel, så det er ingenting å…