Naučili jsem se spoustu o tom, jak LLM fungují v reálném životě, když implementujete sadu heuristik pro výpočet něčeho a používáte k tomu kódovacího agenta. Mým případem použití je určení odhadované hodnoty domény webu. Zde je (bezplatný) agent, na kterém pracuji: Hodnota domény .com POUČENÍ Z DNEŠNÍHO DNE: * Nemůžete jen tak nechat LLM vytvořit ocenění – dokonce i s těmi nejpokročilejšími modely, které uvažují. Ocenění příliš kolísají s širokým rozsahem čísel. * Lepší je vzít si odborné znalosti domény a poskytnout heuristiku na vyšší úrovni, kterou může použít k informování o své analýze. * Můžete pomoci objevit užitečnou heuristiku tím, že "vyzpovídáte" kódujícího agenta a zeptáte se ho, proč je ocenění tak nízké/vysoké. * Musíte být opatrní při pošťuchování, abyste vyřešili problém s konkrétním oceněním, které je "vypnuto". Někdy se "přeučí" (čímž aktualizuje výzvu k řešení pro tento konkrétní příklad namísto zobecňování). * Je užitečné určit rozměry, na které by se měl dívat. Ty neintuitivně nevnímá. Příklad, zda se doména skládá výhradně z anglických slov zřetězených dohromady. Každý další znak hodnotu snižuje. Slovní hříčky .com jsou tedy mnohem cennější než slovní hříčky .com nebo slovní hříčky2 .com. --- Někteří z vás se možná diví, proč trávím tolik času oceňováním doménových jmen. Odpověď: Nejde o tento případ použití, ale o využití tohoto případu k rozvoji mého porozumění umělé inteligenci a ke zlepšení platformy AgentAI pro vytváření agentů. Používání vlastního produktu/platformy má opravdu vysokou hodnotu a pákový efekt.