De ervaringen van: Christian
Mijn eerste taak met Operator was het beheren van toegang tot verschillende Google Analytics-accounts. Een paar weken geleden zijn we gerebrand van @rooza.nl naar @dofollow.nl, maar we hadden nog niet overal toegang tot de accounts met ons nieuwe e-mailadres. Als we dit handmatig zouden doen, waren we daar zeker een paar uur mee bezig geweest – en echt leuk werk is het niet. Dus ik dacht: perfecte taak voor Operator!
Operator werkt gebruiksvriendelijk. Het is vergelijkbaar met ChatGPT, maar opent na je eerste prompt een virtuele machine die draait op Linux, met Chrome als browser (en uiteraard Bing als standaardzoekmachine). Voor mijn taak moest ik inloggen op Google Analytics. Dat ging probleemloos: Operator vraagt je op een gegeven moment om het scherm over te nemen zodat je inloggegevens kunt invoeren. Daarna geef je de controle terug en blijf je ingelogd – zelfs in andere chats.
Mijn eerste (sub)taak was om een volledige lijst van accounts waar we toegang toe hebben op te vragen. Dat ging redelijk goed. Wat direct opviel, was dat Operator traag is – ongeveer één klik of actie per drie seconden (je kunt live meekijken). In eerste instantie kreeg ik een kleine lijst terug, maar na bevestiging dat ik écht alle accounts wilde, leverde Operator na ongeveer 10 minuten een volledige lijst met accountnamen op.
Tot zover ging het prima. Ik had weer even zo’n “WOW”-moment zoals de eerste keer dat ik ChatGPT gebruikte.
Daarna vroeg ik Operator om de toegang voor een gefilterde lijst met accounts over te zetten. Dit ging een stuk moeizamer. Operator vroeg regelmatig om bevestiging, liep bij de eerste accounts vast, had extra instructies nodig en stopte telkens. Pas na meerdere keren aangeven dat hij de hele lijst moest doorlopen, ging hij zelfstandig aan de slag. Ik liet Operator een paar uur draaien en kreeg af en toe mailtjes dat we weer toegang hadden tot een nieuw account. Na ongeveer 4 uur waren er zo’n 40 accounts verwerkt.
De volgende ochtend bleek dat Operator op één account was blijven hangen en verder niets had gedaan. Na wat extra aanwijzingen viel de chat volledig stil en kon ik die sessie niet meer gebruiken.
Omdat ik wist waar hij gebleven was, probeerde ik in een nieuwe chat het proces voort te zetten. Helaas moest ik weer alles vanaf het begin bevestigen, en ook toen liep Operator opnieuw vast.
Samenvattend: Operator heeft nog veel bugs, loopt regelmatig vast en heeft continu bevestiging nodig. Daardoor kun je hem (nog) niet betrouwbaar op de achtergrond laten draaien. De potentie is er zeker: eenvoudige taken kan hij uitvoeren, maar door de huidige snelheid en het vele bevestigen duurt het in de praktijk vaak langer dan wanneer je de taak zelf uitvoert. Met meer serverkracht zal Operator in de toekomst waarschijnlijk een stuk sneller zijn – misschien zelfs sneller dan wij zelf. Als de stabiliteit verbetert en de bugs worden opgelost, zou Operator ook geschikt zijn voor complexere en langdurigere taken. Daar zie ik de echte meerwaarde. Ik denk dat het een kwestie van maanden is voordat we Operator ook daarvoor gaan inzetten, maar op dit moment is het daar nog niet klaar voor.
Overigens heb ik ook enkele weken geleden geëxperimenteerd met de lokale versie van Claude’s Operator. Die was nog langzamer dan die van OpenAI en slaagde er niet in om zelfs de simpelste taken goed af te ronden.
De ervaringen van: Tim
Ik heb ChatGPT Operator nu een paar keer uitgeprobeerd, maar eerlijk gezegd was elke keer een beetje een teleurstelling.
Eerste keer vroeg ik ‘m om een document in Canva aan te passen zodat het bij een website zou passen. Misschien wel een lastige vraag, maar toch het proberen waard. In het begin was ik best onder de indruk – ik kon zien hoe de Operator probleemloos de website opende en in Canva aan de slag ging. Maar toen ging het bergafwaarts. Operator werkt enorm traag en loopt steeds vast. Zelfs bij iets simpels als een kleurtje veranderen liep hij al tegen problemen aan.
Toen dacht ik: laat ik iets makkelijkers proberen, iets wat voor mij gewoon tijdrovend is. Ik wil deze zomer een weekje naar Zwitserland, maar had nog niks geboekt. Perfect klusje voor Operator? Dus ik legde uit wat ik zocht en hij ging aan de slag. Hij bezocht netjes allerlei camping-websites en stelde de filters goed in om te zien wat er beschikbaar was. Uiteindelijk kreeg ik een lijstje met campings waar nog plek was en wat de prijzen waren. Op zich prima.
Maar toen zei ik: ‘Een huisje, appartement of Airbnb zou ook wel leuk zijn.’ En toen ging het mis. Hij liet me wel opties zien van Booking.com en Airbnb, maar zo chaotisch gepresenteerd dat ik totaal het overzicht kwijt was. De Operator zelf leek ook verdwaald, met wel honderd tabbladen open. Uiteindelijk ben ik zelf maar gaan zoeken.
Samenvattend: Maakt Operator de beloftes waar? Nope. Het is een leuke gadget, maar in de praktijk nog niet echt bruikbaar. Hij loopt te vaak vast en maakt taken maar half af. Wel cool om te zien wat er in de toekomst mogelijk is. Dit is ‘het slechtste wat het ooit zal zijn’, dus het is gewoon een kwestie van tijd voordat Operator echt als een collega of persoonlijk assistent met je meewerkt.
De ervaringen van: Kay
Inmiddels heb ik de Operator drie keer geprobeerd. De eerste twee keren liep het meteen vast: verbindingsproblemen, zonder duidelijke foutmelding of oplossing. Best frustrerend, want als er íets is wat je hoopt van een digitale assistent, is het dat ‘ie gewoon opstart.
Vandaag probeerde ik het voor de derde, en eigenlijk laatste, keer. Tot mijn verbazing werkte het ineens wél. Mijn taak: retourvluchten zoeken voor 2 personen van 4 tot en met 7 juli, met een budget van maximaal 500 euro per persoon. Klinkt eenvoudig, toch?
Ik begon breed, met de opdracht om gewoon vluchten te zoeken binnen dat budget. Dat ging verrassend goed. Daarna probeerde ik het wat specifieker te maken, bijvoorbeeld gericht op bepaalde landen. Ook dat lukte, al bleef het tempo traag. Je ziet alles live gebeuren en Operator heeft duidelijk tijd nodig; één klik, wachten, volgende klik, weer wachten.
Wat me opviel: de ene keer accepteerde Operator automatisch cookies op websites, de andere keer moest ik dat ineens zelf doen, zonder dat ik iets aan mijn prompt had veranderd. Vreemd, vooral omdat het in een later stadia was tijdens het gebruiken van de Operator.
Samenvattend: Operator is traag, fragiel, en (nog) niet klaar om zelfstandig grote taken over te nemen. Maar… hij kan simpele zoekopdrachten uitvoeren en je ziet waar dit naartoe zou kunnen gaan. Ik had geen hoge verwachtingen, dus ik werd eigenlijk positief verrast. Operator is nog lang geen Jarvis uit Iron Man. Maar dat beeld, een digitale assistent die écht werk van je overneemt, voelt ineens een stuk minder futuristisch.
De ervaringen van: Emma
Operator heeft veel potentie. Echter, op dit moment vallen de resultaten van de tests die ik draaide nog tegen. Zo vergeleek ik de output/het gebruiksgemak van ChatGPT-4o en Operator. Specifiek gebruikte ik beide modellen om SEO-onderzoek te doen naar concurrerende pagina’s die ranken voor een specifiek zoekwoord. ChatGPT kan niet altijd alle websites crawlen en daarom was ik benieuwd of Operator dit wél zou kunnen. Verder verwachtte ik dat Operator wellicht de pagina beter zou kunnen begrijpen, omdat deze echt bezocht wordt.
De prompts die ik gebruikte, waren identiek. Zowel ChatGPT-4o (met web search) als Operator gaan in op andere pagina’s dan de pagina’s die uit mijn eigen onderzoek naar voren komen. Die pagina’s verschillen onderling ook. Daarmee is meteen het voordeel bij deze specifieke toepassing weg, aangezien ik zelf de pagina’s zal moeten aanleveren. Verder bleek de output vanuit ChatGPT-4o uitgebreider en diepgaander dan die van Operator. Interessant is ook dat Operator met een Engelse prompt in het Engels reageert, waar ChatGPT-4o in het Nederlands antwoordt.
Ook testte ik Operator voor een andere toepassing die wordt voorgesteld in hun eigen interface: “Zoek een makkelijk recept voor een maaltijd voor vier personen.” Nu viel extra op dat Operator erg traag is vergeleken met ChatGPT-4o. Operator levert uiteindelijk als output één recept aan. ChatGPT geeft vijf opties. Interessant is hier dat ChatGPT en Operator beide als eerste op dezelfde website gaan zoeken en met dezelfde suggestie komen. Voor verdere stappen (bijvoorbeeld de ingrediënten uit het recept bestellen) heeft Operator veel coaching en instructies nodig.
Samenvattend: Op dit moment is het gebruiksgemak en de output van Operator nog niet op niveau. Als je constant het scherm moet overnemen of letterlijk moet uitleggen waar geklikt moet worden, is het veel sneller om dit zelf te doen. Wel ben ik benieuwd hoe Operator zich gaat ontwikkelen. Mijn voorspelling is dat er op korte termijn veel verbetering zal zijn, voornamelijk op het gebied van interpretatievaardigheden en snelheid. Er zullen ongetwijfeld nu ook al wel (laagdrempelige en praktische) toepassingen te vinden zijn waarbij Operator prima te gebruiken is.
De ervaringen van: Nino
Ter aanvang was ik enthousiast over de mogelijkheden met Operator. Ik heb het gevraagd met te helpen met verschillende – alledaagse – taken.
De eerste was het opstellen van een campagnestructuur. In de basis is dit ook iets wat reguliere modellen van ChatGPT kunnen. Maar ik was vooral benieuwd hoe hij omging met het browsen van de website. Ook heb ik Operator gevoerd met een gedeelte van een transcript over het opzetten van campagnes voor deze site. Het duurde erg lang voordat ik output kreeg, die ook foutief was.
Daarnaast heb ik het gevraagd om een website langs te lopen op alle mogelijke (soft) conversies die een gebruiker kan uitvoeren. Hierbij wilde ik graag code instructies ontvangen. Ook hier bleek dat het erg veel miste. Na veel prompten had ik uiteindelijk geschikte conversie-acties, maar in deze tijd had ik het net zo goed zelf kunnen doen 😉
Ten slotte heb ik Operator de opdracht gegeven om op basis van concurrentieanalyse concrete SEO-verbeterpunten op te stellen voor een pagina. Je krijgt veel output terug, maar weinig concreets.
Samenvattend: Ik zie de potentie in het uitbesteden van simpele taken. Helaas komt er nog weinig concreets uit. Wel tof om te zien, aangezien het alleen maar beter kan worden. Erg benieuwd naar de toekomst dus!
Conclusie
Na ons uitgebreide avontuur met OpenAI’s Operator kunnen we eigenlijk maar één ding concluderen: wow, wat een potentie… maar nope, nog niet klaar voor onze dagelijkse werkzaamheden. Ja, Operator kan echt coole dingen doen die andere AI-tools niet kunnen – vliegtickets zoeken, Google Analytics-accounts beheren, noem maar op. Dat gaf ons allemaal zo’n “WOW”-moment zoals Christian beschreef, vergelijkbaar met de eerste keer dat we ChatGPT gebruikten.
Maar laten we eerlijk zijn: de uitvoering laat nog te wensen over. Operator is traag (echt traag), loopt vast bij complexere taken en vraagt zoveel bevestigingen dat je uiteindelijk sneller bent als je het gewoon zelf doet. Frustrerend? Jazeker. Maar ook fascinerend, want dit is duidelijk nog maar het begin.
EN
