Zvýrazňovač klišé v textech generovaných LLM
Simon Willison vytvořil jednoduchou redakční pomůcku, která v textu zvýrazňuje opakující se fráze spojované se současnými jazykovými modely.
Simon Willison narazil na další text s opakujícími se formulacemi, které často vídá ve výstupech jazykových modelů. Jako příklad uvádí konstrukci „no fluff, no filler, no jargon“.
Na základě této zkušenosti nechal pomocí modelu Claude Fable 5 vytvořit jednoduchou aplikaci LLM cliché highlighter. Nástroj v vloženém textu zvýrazňuje předem definované fráze a větné konstrukce.
Jaké vzory nástroj hledá
Mezi sledované formulace patří například:
- „no X, no Y“,
- „sit with that“,
- „you already know“,
- „worth naming“.
Willison uvádí, že aplikaci původně vytvořil pro deset častých vzorů. Aktuální rozhraní nástroje jich zobrazuje jedenáct. Uživatel může jednotlivé vzory zapínat a vypínat a nalezené formulace vidí v kontextu celé věty.
Nejde o detektor AI textu
Nástroj neurčuje, zda text skutečně napsal jazykový model. Pouze hledá konkrétní fráze a konstrukce, které Willison považuje za typické pro současné AI texty.
Stejné obraty mohou používat i lidé. Text vytvořený modelem je naopak nemusí obsahovat vůbec.
Jde proto spíš o praktickou redakční pomůcku. Autorovi může ukázat opakující se nebo mechanicky působící formulace, které stojí za ruční kontrolu a případné přepracování.