Week 19: Fine tuning. Jim en ik zoeken de perfecte snaar

Mijn AI Bedrijf, Orkestra AI Academy, richt zich op mensen en teams die willen blijven leren. zij kennen de basis al, maar weten dat je voor echt gebruik van AI moet bijblijven.

Maar hoe doe je dat? Tijd is schaars, daarom help ik hen gestructureerd en slim up-to-date te blijven met drie vormen:

1. AI-Snacks, korte, hapklare updates met mini-oefeningen.

2. AI-Ambassadeurspro

   gramma’s, leermodules voor interne ambassadeurs.

3. Workshops en inspiratiesessies, praktisch leren door te doen.

De vaste thema’s zijn ethiek, nieuwe tools, nieuwe functionaliteiten van bestaande tools, AI-nieuws, en prompt engineering.

Deze week, kwaliteit boven alles

De basis draait. Jim (een van mijn AI collega's)  leest AI-nieuwsbrieven, koppelt inhoud aan de vijf thema’s, matcht die met bedrijfsprofielen en maakt daaruit gepersonaliseerde AI-Snacks. Technisch werkt het, inhoudelijk is het nog niet altijd spot on.

Een AI-Snack is pas goed als iemand hem leest en denkt: hé, dit is precies wat ik nu nodig heb. En daar zat Jim er nog te vaak nét naast. Dus deze week stond in het teken van quality control. Ik heb gesleuteld aan de prompts waarmee Jim zijn werk doet. Wanneer is een nieuwsbericht interessant genoeg? Wanneer is iets over ethiek relevant voor een specifieke organisatie? En hoe voorkom ik dat het te algemeen blijft?

Alle bekende prompt engineering technieken worden door mij uit de kast gehaald om dit voor elkaar te krijgen. Chain of verification prompting (leg uit wat het is), chain of thought prompting (leg uit wat het is), rereading prompting en ga zo maar door. Nu laat ik Jim weer even een paar dagen zijn werk doen om te zien of de kwaliteit van de output verbetert.

En zo niet, begin ik weer van voor af aan. Waar kan het beter, hoe doe ik dat? Vraag ik teveel? Moet ik de AI vragen opsplitsen en de antwoorden daarna via een andere workflow weer samenvoegen? We gaan net zo lang door totdat het goed genoeg is. Ik hoop dat dat ook echt kan. Ik heb er vertrouwen in.

Langzaam begin ik na te denken aan al die andere dingen die ik mezelf nog had beloofd te gaan doen in dit experiment. Kosten, ethiek, veiligheid, maar eerst die kwaliteit omhoog. En daarna de pilot!