AI-alapok és promptolás
Miért nem ugyanaz a 100 szó és a 100 token?
Miért nem mindig pontos az AI által készített szöveg terjedelme? Ismerd meg a szavak és a tokenek közötti különbséget, és egy egyszerű tippet a szószám ellenőrzéséhez.
Olvasási idő: 1 perc · Dokumentumból generált segédanyagok
Megjelent:
Ha azt kéred egy AI-asszisztenstől, hogy „írj kb. 150 szavas összefoglalót”, a mai modellek már többnyire jól követik a terjedelmi kéréseket. A pontos szószám azonban továbbra sem garantált. Ennek megértéséhez érdemes megismerni egy alapfogalmat: a tokent.
Mi az a token?
A „100 szó” és a „100 token” tehát két különböző mennyiség. Egy hosszabb vagy ritkábban használt szó több tokenből is állhat, míg egy rövid szó lehet akár egyetlen token. A kettő nem fedi egymást.
A tokenek használata azonban önmagában nem jelenti azt, hogy az AI ne tudna szavakat számolni.
Ha fontos a terjedelem
KIEGÉSZÍTŐ MONDAT A KÉRÉSHEZ"A szöveg elkészítése után ellenőrizd a szavak számát. Ha eltér a kért terjedelemtől, módosítsd a szöveget, majd ellenőrizd újra."Ez javíthatja az eredményt, de a modell által megadott szószám sem feltétlenül pontos. Ha szigorú terjedelmi korlátnak kell megfelelned – például egy pályázatnál vagy hivatalos dokumentumnál –, érdemes külön szószámlálóval is ellenőrizned a kész szöveget.