Læsetid: 10 minutter
Mindst et dusin helt nye værktøjer til automatisering af UI-test er dukket op i løbet af de sidste par år. Da hvert værktøj har sit eget fokus og sin egen strategi, kan det være svært at vide, hvor man skal starte. Leder du efter mere vejledning? Tjek de 10 bedste værktøjer til UI-testning på nettet nedenfor.
Top 10 automatiserede værktøjer til UI-testning på nettet
Som enhver UI-tester kan bestride, er UI-testning relativt ligetil, så længe intet i din GUI ændres, men problemet er … ting ændres hele tiden. Afhængigt af den løsning, du har valgt til UI-test, kan ændrede forhold enten være en revolutionerende oplevelse med selvhelbredende og AI-lokalisatorer eller en afgrundsdyb fiasko med indviklede manuelle arbejdsgange.
I et forsøg på at opnå det første vs. det sidste, har jeg gennemgået de 10 bedste UI-testværktøjer, som du bør kigge på.
- Parasoft Selenic
- Katalon
- Selenium IDE
- mabl
- TestIM
- Functionize
- Perfecto
- Perfecto
- TestCraft
- Squish
- AutonomIQ
Jeg delte også herovre nogle gode spørgsmål, som du skal stille dig selv, når du evaluerer værktøjer til UI-testning, for at sikre, at du ender med et værktøj, der passer til dig, og som kan opnå det, du har brug for.
Hvilket værktøj du end vælger, har alle disse UI-testværktøjer gode funktioner til brugervenlighed og har sat brugeroplevelsen i højsædet.
Parasoft Selenic
Designet til:
Designet til: Eksisterende (eller nye) Selenium-brugere, der bruger for meget tid på at oprette, opdatere og vedligeholde deres UI-tests. Også for dem, der ikke ønsker at være låst til et leverandørspecifikt værktøj.
Priser: Årligt abonnement til projekt og/eller teams
Se Parasoft Selenic i aktion!
Start din gratis prøveversion nu
Pros:
- Smart recorder gør det nemt at oprette Selenium-tests, der bruger sideobjektmodellen
- Kan udføre selvhealing på eksisterende Selenium-tests og anbefaler smart locators på eksisterende Selenium-tests
- Integrerer sig direkte i din CI/CD-pipeline ved at udnytte dine eksisterende Selenium-scripts eller oprette nye Selenium-scripts
- Får test analyse-teknologi til automatisk at identificere, hvilke Selenium-tests der skal udføres i CI/CD-pipelinen for at validere nye kodeændringer
- Giver kundesupport på alle niveauer (ikke kun på virksomhedsniveau)
- BDD understøttes (Cucumber). Fokuserer på vedligeholdelse af den underliggende Java (JUnit og TestNG) Selenium-testkode
Kontra:
- Der er ingen gratis licens til dette kommercielle tilbud, men der er en gratis prøveversion tilgængelig.
- Dette produkt er stadig relativt nyt. Den nuværende version understøtter Java, JUnit 4 & 5, TestNG, Cucumber, Eclipse og IntelliJ. Anden understøttelse er under overvejelse til fremtidige udgivelser.
Nøglepunkter: AI-drevne anbefalinger til dine eksisterende Selenium-tests gør det nemt at tilføje denne løsning til din eksisterende Selenium-praksis med det samme. Som det fremgår af Gartner Peer Insights, er en af de bedste fordele ved løsningen Parasofts kundesupport i verdensklasse, som er blevet anerkendt utallige gange og har støttet over 30 års produktinnovation inden for softwaretestning.
Se Parasoft Selenic i aktion!
Start din gratis prøveversion nu
Katalon
Designet til:
Katalon
Designet til:
For et gratis værktøj kan Katalon meget, og det bruges meget af systemintegratorer til UI-testning. Dens recorder tilsluttes Chrome-browseren, så du kan generere testcases, og derefter opbygger værktøjet dem i Katalon IDE ved hjælp af sideobjektmodellen, så de er meget vedligeholdelsesvenlige. På et hvilket som helst tidspunkt kan du udføre dine tests direkte i deres IDE eller eksportere dem til mange forskellige typer testskripter.
Priser: Gratis for det grundlæggende Katalon Studio (med betalte plugins, der kan fås som abonnementer via markedspladsen). Enterprise support er tilgængelig (men kan blive ret dyrt)
Pros:
- Anbefaler smart locators
- Anvender page object model (men kun for de tests, der genereres og administreres i IDE’et)
- Har en selvhelbredende evne (via et betalt plug-in)
- Mulighed for at eksportere til mange forskellige typer test scripts
- BDD understøttet. Funktionsfiler udfører Katalon-testkode
Kommentarer:
- Selv om du kan eksportere dine tests som Selenium- og andre testskripter, mister du al anvendeligheden af Katalon, når du har eksporteret, og eksporten indeholder ikke sideobjektmodellen, hvilket betyder, at testene bliver svære at genbruge og vedligeholde
- Deres kundesupport er kun tilgængelig på virksomhedsniveau, og er meget dyrt
- Der kan ikke integreres direkte i din eksisterende eksekveringsramme (bruger en proprietær ramme, med CI-integrationer tilgængelige som plugins)
Nøgleudbytte: Brugere kan begynde at bruge Katalon uden at have nogen teknisk viden og oprette testcases hurtigt takket være nøgleordene i programmet. Det er gratis at komme i gang med Katalon Studio, men for at få gavn af nogle af de spændende innovative teknologier skal du opgradere eller købe betalte plugins.
Selenium IDE
Designet til:
Selenium IDE
Designet til: Brugere, der er på udkig efter et brugerflade-drevet optagelses- og afspilningsværktøj.
Selenium IDE er et open source-projekt, der udnytter kraften i Selenium til et Chrome-plugin og gør det gratis tilgængeligt. At komme i gang med Selenium IDE kræver ingen yderligere opsætning ud over at installere udvidelsen i din browser, hvilket stemmer overens med projektets drivende filosofi om at levere et værktøj, der er let at bruge og giver øjeblikkelig feedback.
Prissætning:
Pros: Gratis
Pros:
- Brugere kan eksportere enhver oprettet test til et script, hvilket gør det til et utroligt kraftfuldt værktøj til oprettelse af UI-test
- Får flere lokaliseringsstrategier for hvert element, der registreres
- Har en selvhelbredende funktion (men virker ikke på Selenium-scripts uden for Selenium IDE, og er ikke så pålidelig som selvhelbredende funktioner fra andre løsninger)
Cons:
-
- Passer ikke direkte ind i din CI/CD-proces
- Buggy og en blackbox (når noget ikke bliver registreret, er du temmelig fastlåst og skal eksportere ud i kode for at finde ud af, hvad der foregår)
- Anvender ikke sideobjektmodellen, når du bygger tests
- Mens du kan eksportere dine tests på mange forskellige sprog, er der ingen mulighed for at importere på dette tidspunkt
- Selv om de tilbyder CI-integrationer, er det ikke direkte integreret i dit eksisterende framework
- Ingen indbygget understøttelse af BDD
Nøgleudbytte: Selenium IDE er enkel at bruge og giver brugerne mulighed for hurtigt at oprette tests mod deres webbrugergrænseflader. Det er meget Selenium-venligt og vil føles naturligt for dem, der er vant til rammen.
mabl
Designet til:
mabl
Designet til: Teams, der ikke er interesserede i at skrive tests og ikke ønsker at etablere en praksis for UI-testning, hvilket betyder, at du overlader størstedelen af arbejdet til mabl.
mabl har en meget anderledes tilgang til UI-testning – det handler mindre om tests og mere om rejser. Du logger ind på deres hjemmeside, definerer en rejse gennem din applikation, og så er det det hele. De giver dig ikke rigtig en testcase eller noget, du virkelig skal arbejde på. Derefter giver de dig mulighed for med jævne mellemrum at køre denne test og modtage resultater om dens vellykkede udførelse.
Prisfastsættelse: Trinvis prissætning baseret på antallet af udførte rejser
Pros:
- Anbefaler smarte lokalisatorer (men det er lidt skjult for brugeren)
- Selvhelbredende funktion fungerer meget godt
- SaaS-løsning; let at få adgang til og komme i gang
- Skalerbar prismodel
Contras:
- Bruger ikke sideobjektmodellen ved registrering af rejser
- Bruger sit eget framework, og der er ingen import og eksport af testskripterne
- Men der findes CI-integrationer:
- kan du ikke integrere løsningen direkte i dit eksisterende framework
- Hvis noget ikke fungerer som du havde tænkt dig, er det virkelig svært at få adgang til “kode” for at konfigurere eller manipulere
- Fokus på “journeys” gør oprettelsen af “funktionel validering” (i.dvs. test med assertions) føles akavet
- SaaS-only løsning; ingen on-premise implementering og ingen mulighed for at få adgang til en applikation, der ikke er tilgængelig på det offentlige internet
- Ingen indbygget understøttelse af BDD
Nøglepunkter: mabl hjælper brugerne med at forbedre hastigheden og kvaliteten af deres release pipeline, med sofistikeret auto-healing, der holder automatiseringen stabil, uanset ændringer i applikationens brugergrænseflade. mabl gør, hvad den gør, og mennesket træder i baggrunden i forhold til dens foreskrevne analyser, så i bund og grund overlader du dine rejser til mabl og håber på det bedste. For nogle er det fantastisk, men for andre er det måske at afgive for meget kontrol.
TestIM
Designet til:
TestIM
Designet til:
TestIM er en SaaS-applikation, der er skabt af udviklere, som indså, at selv om de brugte tid og energi på at vedligeholde automatiserede testmiljøer, var de stadig bekymrede for, hvordan en simpel fejlrettelse kunne ødelægge en anden del af applikationen. Så de skabte denne utroligt brugervenlige løsning til UI-testning.
Prisfastsættelse: Årligt abonnement baseret på antal udførte tests
Pros:- Tests er utrolig nemme at oprette, med en intuitiv brugergrænseflade
- Anbefaler smart locators, sammen med en god strategi for vedligeholdelse af dem
- Har en imponerende selvhelbredende evne som en del af deres Smart Locator-teknologi
Cons:
- Har ikke brug for page object model i deres tests
- Mangler mulighed for at importere/eksportere testskripter
- Brugere kan ikke få adgang til kode eller tage tests ud af TestIM
- Vendor-locked framework – scripts er i TestIM framework
- Uklar understøttelse af BDD
Nøglepunkter:
- Det er meget nemt at få adgang til TestIM-teknologien, og det er meget nemt at oprette en testcase, der fungerer rigtigt, out-of-the-box. Den slanke brugeroplevelse får selvhelbredende til at ligne magi (hvis jeg vil have en løsning til at forbedre min egen brugeroplevelse, kan jeg nok stole på en løsning med en god brugeroplevelse, selv, ikke sandt?), men den største udfordring med TestIM er, at der ikke er nogen måde at få adgang til testene på. Da alle testene ligger i TestIM-rammen, er du overladt til deres infrastruktur, forretningsmodel, og hvad der sker med virksomheden i fremtiden.
Functionize
Designet til: Manuel testere eller ikke-tekniske testere, der er ved at sætte sig ind i BDD (de kalder det “ALP”) som en funktion af UI-testning.
Functionize giver alle de funktioner, du ville forvente af et komplet web UI-testværktøj, men med nogle yderligere fremskridt omkring lokaliseringsstrategi, herunder et autonomt testfelt, hvor test kan oprettes ved blot at bruge programmet. Dette er alt sammen udført i deres proprietære ramme.
Prisfastsættelse: Ingen prisoplysninger offentligt tilgængelige
Pros:
- Udmærket visuel visning af testflowet
- Anbefaler flere lokatorer til elementer
- Har en selvhelbredende evne
- Alternativ tilgang til traditionel BB (ved hjælp af proprietær NLP). Kan være en Con, hvis du ønsker at lave traditionel BDD (dvs. Cucumber)
Cons:
- Anvender ikke page object model
- Vendor-locked framework
- Ingen import/eksport af test scripts
Key takeaways: Functionize’s AI ser ud til at være i stand til at levere på organisationens løfte om at fjerne testchurn og øge testernes nøjagtighed og effektivitet. Men pas på med vendor-lock her, når du overvejer, hvordan du kan bringe den ind i flowet.
Perfecto
Designet til:
Perfecto
Designet til: Brugere, der leder efter en one-stop-shop til UI- og mobiltest. Fordi den er scriptløs, er den bedst egnet til dem, der ikke ønsker at skrive kode.
Perfecto har eksisteret i et stykke tid, og de har fokuseret meget på mobiltest, men de har et fint økosystem til UI-testning, der muliggør oprettelse, vedligeholdelse, udførelse i skyen og rapportering.
Pris:
Pris: Mellem $99 og $3588+ for et årsabonnement
- Anvender page object model (men kun i deres genererede tests)
- Giver flere lokalisatorer til registrerede webelementer
- Indførte for nylig self-healing (selvom det er lidt uklart, hvad det gør, eller hvor godt det fungerer, og derfor hvor nyttigt det er)
Cons:
- Test scripts er i et proprietært TCL-baseret sprog
- Du kan ikke importere dine egne Selenium scripts
- Selv om de tilbyder CI-integrationer, er det ikke direkte integreret i dit eksisterende framework
- BDD understøttet gennem 3. parts implementering, Project Quantum
Nøglepunkter:
Nøglepunkter:
- Perfecto tilbyder løsninger omkring vedligeholdelse og skrivning af testskripter, styring og validering af tests og fejlfinding af fejl. Perfectos UI-testløsning giver brugerne mulighed for scripted eller scriptløs oprettelse, og de har for nylig tilføjet nye funktioner omkring vedligeholdelse og selvhelbredelse.
TestCraft
Designet til:
TestCraft
Designet til:
TestCraft er en kodeløs Selenium-testautomatiseringsplatform med AI-teknologi og unik visuel modellering, der hævder at muliggøre hurtigere testoprettelse og -udførelse og samtidig eliminere overhead til vedligeholdelse af test.
Prissætning: Brugere, der ikke ønsker at skrive kode og er på udkig efter avancerede analyser til løbende at validere deres tests: Ingen prisoplysninger offentligt tilgængelige
Pros:
- Anvender page object model (men kun i deres genererede tests)
- Anbefaler smart locators, kaldet “smart bindings”
- Self-healing er en del af deres smart binding teknologi
- En indbygget scheduler giver brugerne mulighed for at udføre test flows periodisk over tid
Cons:
- Anvender en proprietær ramme
- Du kan ikke importere/eksportere testskripter
- Kan ikke integreres direkte i din eksisterende ramme (CI-integrationer er tilgængelige som plugins)
- BDD understøttes gennem implementering fra tredjepart, Project Quantum
Nøglepunkter:
Nøglepunkter:
- TestCraft er en kraftfuld SaaS-applikation, der gør det muligt for testere at oprette fuldt automatiserede testscenarier uden kodning. Brugerne registrerer deres testcases på brugergrænsefladen, og ud fra det vil TestCraft skabe en model for hvert testflow med en visuel indikation af de forskellige veje, som din test vil udføre. Dette gør det tilgængeligt for brugere, der har komplekse brugsmønstre.
Squish
Designet til:
Squish
Designet til: Brugere, der har brug for at teste GUI’er og brugergrænseflader (HMI’er), især på tværs af flere platforme. Squish automatiserer testning til Windows, Java, QT, .NET, Web, iOS, Android og meget mere.
Priser: : En evig flydende licens kan købes for 4.990 €. Gratis prøveversion tilgængelig.
Pros:
- Udførlig støtte til testning på tværs af platforme
- Kraftige OCR-funktioner (optical character recognition)
- Pålidelig identifikation og verifikation af objekter uafhængigt af skærmlayouts
- God understøttelse af scriptingsprog
Cons:
- Der kan være behov for forbedringer i forbindelse med slutbrugeruddannelse og teknisk support, selv om de fleste tilbagemeldinger er positive
- Der er rapporteret om nogle problemer med at tilføje nye objekter til objektkortet
Nøglepunkter:
Nøglepunkter: Med understøttelse af både GUI- og regressionstest bruger Squish egenskabsbaseret objektidentifikation til at evaluere webbrugergrænsefladen. Hvis du bruger en BDD-arbejdsgang, kan du integrere Squish i dit IDE. Automatiseringsunderstøttelse for Chromium er også tilgængelig.
AutonomIQ
Designet til:
AutonomIQ
Designet til: Brugere, der leder efter en interessant hybrid mellem kode og kodeløse løsninger. (Der er kode, men den er hjulpet af naturlig sprogbehandling.)
AutonomIQ har et stærkt budskab omkring AI og maskinlæring, men hvad gør den? Værktøjet giver en tretrins proces til automatisering af UI-tests. Det begynder med at opdage din applikation gennem dens AI og bygger derefter testtilfælde ud fra denne opdagelsesproces. Det tredje trin er at bruge deres analysemotor til at overvåge og vedligeholde testcases.
Prisfastsættelse: Ingen prisoplysninger offentligt tilgængelige
Pros:
- Stærk NLP, AI og ML
- Anvender sideobjektmodellen (men kun i deres genererede tests)
- Anbefaler smarte lokalisatorer, gennem deres Chrome Plug-in
- Selvhelbredende i deres udførelse
- Alternativ tilgang til traditionel BDD (ved hjælp af proprietær NLP). Kunne være en Con, hvis du ønsker at lave traditionel BDD (dvs. Cucumber)
Cons:
- Bruger en proprietær ramme
- Du kan ikke importere testskripter
- Kan ikke integreres direkte i din eksisterende ramme (CI-integrationer er tilgængelige som plugins)
- Nej helt gennemprøvet teknologi
Nøgleudbytte: Det ser ud til, at denne teknologi har det hele og gør det hele. Så hvorfor er den helt i bunden af min liste? Fordi jeg ikke har været i stand til at finde en kunde af dem med nogen reelle casestudier eller brug. Men hvis deres løsning kan komme til de potentielle resultater, kan den være ganske forstyrrende.
Test Parasoft Selenic i dag!
Start gratis prøveversion nu