LLMs for performing transactions on the Web through voice interaction

ConWeb is a framework enabling Web Navigation by voice (https://hintlab.polimi.it/projects/). The framework leverages conversational AI and LLMs to build an inclusive interaction paradigm that allows people with different disabilities and different situational needs to interact with web pages in a way that does not depend on mouse interaction and on content’s visual presentation. Currentky, the framework effectively supports reading and navigation tasks. 

This project aims to understand how LLMs can be used to extend ConWeb for:

  • Handling long transactions that require negotiation between the AI system and the user conversationally
  • Perform complex actions on the web, such as signing in or filling out forms, securely.

The student undertaking this project will be required to:

  • Understand the user privacy implications that may arise when interacting conversationally through voice interaction to transmit sensitive information.
  • Understand how to build user trust in the system when negotiation with a Conversational Agent happens to gather sensible data.

Front-end per un’applicazione mobile per l’organizzazione dello studio

Il progetto riguarda lo sviluppo del front-end di un’applicazione per il supporto agli studenti nella pianificazione intelligente dello studio universitario. L’obiettivo principale è quello di fornire uno strumento in grado di organizzare e gestire il tempo dedicato allo studio in modo efficace, tenendo conto delle esigenze e delle abitudini di ciascuno studente. Il front-end dell’applicazione sarà sviluppato utilizzando Flutter e Dart. Flutter è un framework open-source per lo sviluppo di applicazioni mobili, che permette di creare interfacce utente native per iOS e Android utilizzando un unico codice sorgente. Dart è il linguaggio di programmazione utilizzato per lo sviluppo di applicazioni Flutter.