Hvorfor er Holo1.5 relevant?

Automatisering og intelligente brugerflader er på alles læber, men det er sjældent, at der dukker noget op, som virkelig flytter barren. Holo1.5 er netop sådan et gennembrud. Modellen er udviklet med et unikt fokus på brugerflader (GUI) og automatisering, og den er målrettet offentlige organisationer, virksomheder og softwareudviklere, der ønsker at løfte effektivitet, sikkerhed og brugeroplevelse til et nyt niveau. I en tid hvor digitalisering og automatisering er afgørende for konkurrenceevne og service, er det værd at se nærmere på, hvad Holo1.5 kan tilbyde.

Vi oplever i Snilld, at mange organisationer kæmper med at få automatisering til at fungere på tværs af komplekse brugerflader. Her er Holo1.5 et frisk pust, fordi modellen ikke kun forstår, hvad der sker på skærmen – den kan også handle præcist og sikkert. Det gør den relevant for både it-chefer, digitaliseringsansvarlige og udviklere, der ønsker at automatisere mere end blot simple processer.

Hvad er Holo1.5 og hvad kan den?

Holo1.5 er en familie af open source vision-modeller, der er designet til computer-use (CU) agenter, som arbejder direkte med brugerflader via skærmbilleder og input som mus og tastatur. Serien består af modeller i tre størrelser: 3B, 7B og 72B parametre. 7B-modellen er licenseret under Apache-2.0 og kan bruges kommercielt, mens de øvrige er research-only. Det betyder, at både små og store organisationer kan finde en variant, der passer til deres behov og compliance-krav.

Det unikke ved Holo1.5 er dens evne til præcis GUI localization – altså at finde og pege på de rigtige elementer på skærmen – og UI-VQA (Visual Question Answering), hvor modellen kan svare på spørgsmål om brugerfladens tilstand. I praksis betyder det, at en agent kan få besked om at åbne et bestemt program, finde en knap eller tjekke, om en bruger er logget ind, og så udføre handlingen sikkert og korrekt.

Praktiske anvendelser i organisationer

Holo1.5 åbner for en række nye muligheder i både offentlige og private organisationer. For eksempel kan modellen bruges til at automatisere sagsbehandling, hvor en agent navigerer rundt i komplekse fagsystemer og udfører opgaver, der tidligere krævede manuel indgriben. I supportfunktioner kan Holo1.5 hjælpe med at identificere og løse brugerproblemer ved at forstå og interagere med brugerfladen direkte.

Et andet oplagt anvendelsesområde er test og kvalitetssikring af software, hvor modellen kan gennemføre UI-tests langt hurtigere og mere præcist end traditionelle scripts. Endelig kan borgerkontakt automatiseres, så borgere får hurtigere svar og bedre service, uden at det går ud over sikkerheden. Erfaringer fra Snilld viser, at denne type automatisering både øger effektiviteten og reducerer fejl.

Integration og tilpasning

En af de store styrker ved Holo1.5 er, at den kan integreres i eksisterende arbejdsgange og systemlandskaber uden at kræve store ændringer. Modellen fungerer som et “perception layer”, der modtager skærmbilleder og returnerer koordinater og svar, som andre systemer kan handle på. Det gør integrationen fleksibel og skalerbar, uanset om man arbejder med desktop, web eller mobile løsninger.

For at få det fulde udbytte kræver det dog, at organisationen har styr på sin infrastruktur og adgang til de nødvendige ressourcer – især hvis man vil arbejde med de større modelvarianter. Samtidig er der gode muligheder for at tilpasse modellen til specifikke miljøer, så den matcher organisationens behov og sikkerhedskrav.

Sikkerhed, compliance og governance

Automatisering med AI rejser naturligt spørgsmål om sikkerhed og compliance. Holo1.5 understøtter audit trails og kan håndtere følsomme data på en måde, der gør det muligt at dokumentere alle handlinger. Det er afgørende for både GDPR og andre relevante regler, som især offentlige organisationer skal leve op til.

Risici ved automatisering kan minimeres ved at kombinere modellen med governance-værktøjer, der overvåger og validerer agentens handlinger. Vores erfaring er, at det er muligt at opnå høj sikkerhed og sporbarhed, hvis man tænker governance ind fra starten og vælger de rigtige værktøjer til opgaven.

Teknisk fordybelse og benchmarks

Holo1.5 bygger på avancerede træningsmetoder som reinforcement learning og supervised fine-tuning (SFT), hvilket sikrer både præcision og robusthed. På tværs af benchmarks som ScreenSpot-v2, ScreenSpot-Pro og GroundUI-Web leverer modellen markant bedre resultater end både åbne og lukkede konkurrenter. For eksempel scorer Holo1.5-7B hele 77,32 på localization, hvor nærmeste konkurrent ligger på 60,73.

På UI-VQA benchmarks som VisualWebBench og ScreenQA leverer modellen også topresultater, med op til 90% nøjagtighed på de største varianter. For udviklere og teknikere er der adgang til kodeeksempler og ressourcer på HuggingFace og GitHub, så man hurtigt kan komme i gang med at eksperimentere og tilpasse løsningen.

Forbedring af brugeroplevelse og UI-test

En af de store fordele ved Holo1.5 er dens evne til at identificere usability-problemer i komplekse brugerflader. Ved at analysere og lokalisere UI-elementer præcist kan modellen hjælpe med at finde fejl og uhensigtsmæssigheder, som ellers ville være svære at opdage. Det gør automatiseret UI-test både hurtigere og mere pålidelig.

Visuelle eksempler fra benchmarks viser, at Holo1.5 kan håndtere selv meget tætte og professionelle brugerflader, hvor små ikoner og mange elementer ellers øger risikoen for fejl. Sammenlignet med andre løsninger er præcisionen markant højere, hvilket sparer tid og minimerer fejl i både udvikling og drift.

Implementeringsbarrierer og governance

Selvom potentialet er stort, er der også udfordringer ved at implementere Holo1.5 i praksis. Typiske barrierer er manglende kompetencer, modstand mod forandring og behovet for governance og styring. Det er vigtigt at have en klar plan for, hvordan modellen skal indgå i organisationens processer, og hvordan man følger op på resultater og sikkerhed.

Vores erfaring er, at det betaler sig at starte i det små og bygge erfaring op, før man ruller løsningen bredt ud. Gode råd er at involvere både it og forretning tidligt, sikre ledelsesopbakning og vælge de rigtige værktøjer til governance og opfølgning.

Perspektivering og fremtid

Holo1.5 markerer et vigtigt skridt mod mere avanceret og pålidelig automatisering af brugerflader. Tendensen går mod, at stadig flere opgaver kan løses autonomt, og at AI-modeller som Holo1.5 bliver centrale i fremtidens digitale organisationer. Udviklingen går stærkt, og vi forventer, at både funktionalitet og brugervenlighed vil blive endnu bedre i de kommende år.

For organisationer, der vil være på forkant med digitalisering og automatisering, er det derfor oplagt at undersøge mulighederne med Holo1.5 og lignende løsninger. Vi ser allerede nu, at de organisationer, der investerer i AI-drevet automatisering, får et markant forspring.

Konklusion

Holo1.5 sætter nye standarder for automatisering og brugerfladeforståelse. Med stærke resultater på både localization og UI-VQA, fleksibel integration og fokus på sikkerhed og compliance, er modellen et oplagt valg for organisationer, der vil effektivisere og fremtidssikre deres digitale arbejdsgange. Vi anbefaler at tage et nærmere kig på Holo1.5 og kontakte Snilld for rådgivning om, hvordan løsningen kan implementeres i netop jeres organisation. Det er nu, man skal tage de første skridt mod en mere automatiseret og intelligent fremtid.

Kilder:

• https://www.marktechpost.com/2025/09/18/h-company-releases-holo1-5-an-open-weight-computer-use-vlms-focused-on-gui-localization-and-ui-vqa/
• https://arxiv.org/html/2506.02865v1
• https://www.hcompany.ai/blog/holo-1-5
• https://www.linkedin.com/company/h-company-ai
• https://huggingface.co/Hcompany/Holo1.5-3B

Målgruppens mening om artiklen

Anne Larsen, Digitaliseringschef i kommune: Jeg giver artiklen 85. Artiklen er meget relevant for mit arbejde, fordi den adresserer konkrete udfordringer med automatisering i det offentlige og præsenterer en løsning, der virker gennemtestet og moden. Jeg savner dog lidt mere om de praktiske erfaringer fra andre kommuner og lidt mere om økonomiske gevinster.

Jonas Madsen, IT-udvikler i større privat virksomhed: Jeg giver den 80. Det tekniske niveau er godt og jeg kan se, hvordan Holo1.5 kan bruges i vores test-setup. Jeg kunne dog godt have brugt flere konkrete kodeeksempler og lidt mere om, hvordan integrationen foregår i praksis, men overordnet meget interessant.

Maria Holm, Sikkerheds- og complianceansvarlig i region: Jeg giver artiklen 75. Jeg synes det er positivt, at der er fokus på audit trails og compliance, men jeg mangler mere konkret om, hvordan Holo1.5 håndterer følsomme data i praksis, især i forhold til GDPR og databehandleraftaler.

Peter Jensen, Chef for borgerservice: Jeg giver den 70. Det er spændende med automatisering af borgerkontakt, men artiklen er meget teknisk og jeg savner flere eksempler på, hvordan det faktisk kan forbedre servicen for borgerne og lette vores hverdag.

Sofie Andersen, Digital forretningsudvikler i softwarehus: Jeg giver artiklen 90. Jeg synes, det er en virkelig god gennemgang af både teknologi, fordele og barrierer. Jeg kan bruge artiklen direkte i vores arbejde med at vurdere nye AI-løsninger, og den rammer plet ift. de udfordringer vi møder hos kunderne.

*Denne artiklen er skrevet af en redaktion bestående af kunstig intelligenser, der har skrevet artiklen på baggrund af automatiseret research og oplysninger om de seneste teknologi nyheder fra internettet.

Billederne i artiklen er lavet af FLUX.1.1 Pro fra Black Forest Labs.