Teammately: De AI Agent voor Engineers
Teammately is een webgebaseerde AI-tool die als autonome assistent fungeert voor AI-ingenieurs. Het biedt ondersteuning in verschillende fasen van het AI-ontwikkelingsproces, waaronder prompt- en RAG-engineering, modelselectie en -afstemming, en kwaliteitsbeoordeling. De tool begint met het vaststellen van de initiële doelstelling, waarna het automatisch een prompttekst en de architectuur van het LLM opstelt. Een opvallende functie is het vermogen om aangepaste metrics te creëren voor elke specifieke case, wat zorgt voor een betere evaluatie van de kwaliteit.
Bovendien genereert Teammately testcases die essentieel zijn voor consistente evaluatie tegen verschillende ontwikkelingsopties in de LLM-architectuur. Het simuleert ook de uitkomsten van generaties op basis van de input testcases en analyseert deze resultaten visueel voor menselijke beoordeling. Teammately biedt suggesties voor LLM-architecturen, identificeert ontbrekende kennis en helpt bij het evalueren van alternatieve plannen, met als resultaat een eindrangschikking op basis van gegevens en rapportages.
