Trace2World crea ambienti browser per app da tracce di interazione
In parole semplici
Trace2World è un metodo che trasforma le registrazioni di persone che usano app reali in versioni browser ripristinabili, per addestrare agenti software. Combina le tracce per ricostruire pagine condivise, stato dell'app, dati e casi in cui le azioni producono effetti diversi.
Il comportamento che le tracce lasciano ambiguo resta senza supporto. Dopo aver costruito l'app browser, un verificatore indipendente riproduce i workflow registrati e segnala le discrepanze da correggere.
Su 200 workflow di dieci app, il 91,1% ha superato tutti e sei i controlli, contro il 59,8% con un metodo di costruzione locale al compito.
La ricerca
Le registrazioni parziali di persone che usano un'app possono bastare per creare un ambiente di addestramento che rispetti il comportamento registrato dell'app, anziché limitarsi a raggiungere la stessa schermata finale?
Un percorso può terminare correttamente pur avendo modificato lo stato in un modo che l'app reale non avrebbe seguito.
Trace2World trasforma le tracce di app reali in ambienti browser ripristinabili: prima riconcilia i comportamenti condivisi, poi li compila e li verifica riproducendo i workflow della fonte.
Trace2World combina le tracce in un modello condiviso dell'app, collegato alle fonti, prima di compilare un ambiente browser.
Un verificatore riproduce i workflow originali rispetto a quel modello fisso e confronta schermate, stato, effetti delle azioni, risultati e dati; le riparazioni del pacchetto non possono modificare il modello.
Sugli stessi 200 workflow di dieci app, il 91,1% ha superato tutti e sei i controlli, contro il 59,8% con un metodo di costruzione locale al compito. Poiché è necessario superare ogni controllo, la misura riguarda i workflow preservati e non soltanto la raggiungibilità del punto finale.
Le evidenze provengono da workflow registrati e da versioni browser di app mobili. Il confronto su dispositivi reali riguarda le app usate per addestrare le policy; lo studio non misura il trasferimento ad app non viste su dispositivi reali.
Analisi
Dettagli
- Autori del paper originale
- Zezhou Wang, Hanzhang Zhou, Panrong Tong, Quyu Kong, Pengxiang Li
- Inviato ad arXiv
- Licenza
- arXiv non-exclusive