Kuidas võrrelda AI-esitlusriistade jõudlust: avatud metoodika

Kiire vastus (≤60 sõna): Õiglane AI-esitluste võrdlusuuring hindab tööriistu viie mõõdetava dimensiooni alusel — genereerimise kiirus, ekspordi täpsus, muudetavus, keeletugi ja maksumus deki kohta — kasutades kõikides tööriistades ühte identset päringut, korduvaid käivitusi ajastuse jaoks ning avaldatud hindamiskriteeriumeid. See artikkel esitab täieliku metoodika ja avatud lähtekoodiga tööriista, et igaüks (sealhulgas konkurendid) saaks numbreid taastekitada või vaidlustada.

Enamik "parim AI-esitlusriist" nimekirju on arvamus. See on meetod: reprodutseeritav, läbipaistev viis AI-esitlusriistade mõõtmiseks, nii et tulemusi saab auditeerida, uuesti käivitada ja vaidlustada. Avaldame kriteeriumid ja tööriista enne numbreid, et metoodika püsiks iseseisva. (Tulemused pärinevad tegelikust käivitusest; vaata staatuse märkust artikli lõpus.)

Viis mõõdet

Testprotokoll (reeglid)

1. Üks identne viip iga tööriista jaoks: fikseeritud 10-slaidine äriteemat käsitlev esitlus ühe diagrammi ja ühe mitte-ladina pealkirjaga. Avaldatud sõna-sõnalt testikeskkonnas.
2. Korduvad ajamõõtmised. Kiirus on 50 mõõtmise mediaan tööriista kohta (mitte üks õnnelik katse), mõõdetuna seina-kellaajaga päringust allalaaditava failini.
3. Töölaua verifitseerimine. Iga eksport avatakse töölaua PowerPoint'is; täpsust/muudetavust hinnatakse tegelike objektide klõpsamisega, mitte pisipildi pilguga vaatamisega.
4. Ainult avalik hinnakiri. Maksumus kasutab iga pakkuja avaldatud hinda ühe 10-slaidise esitluse kohta, normaliseerituna (krediidid → dollariteks).
5. Metoodika enne tulemusi. Hindamisjuhend ja testikeskkond fikseeritakse enne hindamist, et vältida valikulist lähenemist.
6. Avatud väljakutse. Konkurente kutsutakse testikeskkonda uuesti käivitama ja parandusi esitama.

Hindamismaatriks (ekspordi täpsus, näitena)

• 5 — Identne eelvaatega: fondid põimitud, paigutus täpne, diagrammid muudetavad, üleminekud puutumatud.
• 4 — Väike nihe: üks font asendatud või üks üleminek puudu.
• 3 — Märgatav nihe: mõningane ümberpaigutus/kattumine, diagrammid teisendatud piltideks.
• 2 — Suur nihe: mitu kattumist, enamik objekte pole muudetavad.
• 1 — Eksport on sisuliselt iga slaidi ekraanipilt.
• 0 — Puudub toimiv
  .pptx
  eksport.

Avatud lähtekoodiga testimisraamistik

Kaasasolev skript

(avalikus repositooriumis):

• Mõõdab automaatselt native-API tööriistade aega N käivituse jooksul ja arvutab mediaani.
• Genereerib struktureeritud
  results.csv
  malli (tööriistad × dimensioonid) käsitsi hinnatavate tööriistade jaoks (need, millel API puudub).
• Väljastab reprodutseeritavuse päise (kuupäev, prompti räsi, käivituste arv), et iga tulemust saaks jälgida tagasi selle sisendite juurde.

Käivita see ise:

node scripts/benchmark/ai-presentation-benchmark.mjs --runs=50 --out=results.csv

Tulemused

Avaldame metoodika ja avatud lähtekoodiga tööriista esimesena, sihilikult — nii saab numbrite tootmise viisi auditeerida enne, kui mingit numbrit tsiteeritakse. See on aus järjekord: reprodutseeritav võrdlusalus on väärt rohkem kui edetabel, mida tuleb lihtsalt usaldada. Allpool on see, mida seni on mõõdetud; kiiruse ja tööriistapõhise täpsuse veerud täidetakse järk-järgult ja need on selgesõnaliselt märgitud ootel olevaks, mitte hinnanguliseks.

Hind esitluse kohta (kõik 10 tööriista — avalik hinnakiri, kontrollitud 2026-06)

Tellimuspõhised tööriistad hinnastatakse kuu kaupa, seega range "esitluse kohta" number sõltub mahust; loetleme sisseastumise tasulise astme ja seal, kus tööriist hindab genereerimise kohta, esitluse kohta arvu.

Allikad: müüjate hinnalehed ja 2Slides'i hinnavõrdlus, 2026-06.

2Slides — mõõdetud tulemused (salvestatud käivitus 2026-06-03)

Need numbrid pärinevad reaalsest, korratavast käivitusest 2Slides API vastu: 10 korda genereeriti 10-slaidine esitlus ühest fikseeritud küsimusest, pluss üks jaapanikeelne käivitus, kusjuures iga väljund

kontrolliti läbi teegi.

• Genereerimise kiirus: mediaan 30,4 s täieliku 10-slaidise esitluse jaoks (n=10; min 21,5 s, max 40,8 s; iga käivitus tootis kõik 10 lehte).
• Ekspordi täpsus / muudetavus: natiivne OOXML, mitte ekraanipildi eksport. Iga esitlus sisaldab 10 päris
  ppt/slides/*.xml
  osa ja 97 muudetavat tekstiraami objekti päris fondi viidetega — tekst ja kujundid on esmaklassilised PowerPoint objektid, mida saab muuta, mitte lamestatud pildid. (Märkus: need käsu käivitused tootsid teksti-ja-pildi paigutusi; üheski valimis ei genereeritud natiivset diagrammi objekti, seega me ei väida siin muudetava diagrammi tulemust.)
• Keel (CJK): läbitud. Jaapani keele käivitus tootis natiivse esitluse 57 tekstikujundiga, mis sisaldavad muudetavaid jaapani tähemärke (näidispäis: 「2026年リモートワーク現状」). (Aus nüanss: fondi viide laheneb "Inter"-i, seega CJK glüüfid renderduvad PowerPointi süsteemi fondi tagavarana, mitte põimitud CJK kirjatüübi kaudu — tekst on natiivne ja muudetav, kuid spetsiaalne CJK font ei ole põimitud.)

Tulemuste maatriks

Ulatuse märkus (aus): see käik mõõtis 2Slides otse selle avaliku API kaudu. Üheksat muud tööriista võrreldakse siin ainult avaliku hinnakirja alusel — nende kiirust, ekspordi täpsust ja keeletulemusi on sihilikult jäetud mõõtmata, mitte hinnata, sest enamikul puudub avalik API ja õiglane täpsuse hindamine nõuab iga tööriista ekspordi avamist desktop PowerPointis käsitsi. Testiraamistik ja fikseeritud päring on avalikus repositooriumis; igaüks saab teha sama mõõtmise mis tahes tööriista peal ja esitada tulemused.

KKK

K: Kuidas võrdlete AI esitlusvahendeid õiglaselt? V: Kasutage kõigis tööriistades üht identset viipa, hindake viit mõõdetavat mõõdet (kiirus, ekspordi täpsus, redigeeritavus, keeltugi, maksumus), võtke korduvate käivituste ajastamisel mediaan, kontrollige eksporte töölaua PowerPointis ja avaldage hindamissüsteem ning testimiskeskkond enne numbrite avaldamist.

K: Miks 50 käivituse mediaan kiiruse puhul? V: Üksikud käivitused on mürarohked — serveri koormus ja külmkäivitused moonutavad neid. 50 käivituse mediaan on stabiilne, kaitsetav arv.

K: Kas ma saan neid tulemusi reprodutseerida või vaidlustada? V: Jah. Testimiskeskkond on avatud lähtekoodiga ja viip on avaldatud sõna-sõnalt. Käivitage see uuesti ja esitage parandused; see ongi avatud metoodika mõte.

Allikad ja edasine lugemine

• Aysenne / Princeton GEO uurimus — allikate ja statistika tsiteerimine parandab AI nähtavust 30–40%
• 2Slides: Miks AI slaidiriistad PowerPointi eksportimisel kokku kukukvad · AI esitluse kiiruse võrdlusuuring

---

Viimati üle vaadatud: 2026-06-03 2Slides meeskonna poolt. Metoodika külmutatud sellel kuupäeval; tulemused lisatud pärast salvestatud käivitust.