Aggiungere strumenti autonomi per l'uso del computer agli agenti e ai flussi di agenti (anteprima)

[Questo articolo fa parte della documentazione non definitiva, pertanto è soggetto a modifiche.]

Lo strumento standalone per l’uso del computer è una versione modulare dello strumento locale per l’uso del computer integrato nell’agente (ospitato da un agente e ad esso associato). È possibile copiarlo come strumento locale in un agente o aggiungerlo come nodo a un flusso dell'agente. Usando questo strumento autonomo, è possibile creare, testare e gestire le automazione guidate dall'intelligenza artificiale che interagiscono con le interfacce digitali. Dopo aver pubblicato lo strumento autonomo per l'uso del computer, è possibile riutilizzarlo tra più agenti e flussi di agenti, offrendo un modo centralizzato per gestire attività complesse basate sull'interfaccia utente.

Utilizzando lo strumento autonomo per l'uso del computer, è possibile:

  • Creare blocchi predefiniti di automazione modulari e riutilizzabili.
  • Eseguire interazioni intelligenti dell'interfaccia utente in base alle istruzioni del linguaggio naturale.
  • Centralizzare la governance definendo applicazioni e siti Web consentiti.
  • Monitora l'esecuzione con replay delle sessioni ad alta fedeltà e log delle attività dettagliati.
  • Integra una supervisione con intervento umano per attività sensibili o complesse.

Importante

Questo articolo contiene la documentazione sull'anteprima di Microsoft Copilot Studio ed è pertanto soggetto a modifiche.

Le funzionalità di anteprima non sono destinate all'uso in produzione e potrebbero avere funzionalità limitate. Queste funzionalità sono disponibili prima di una versione ufficiale in modo che sia possibile ottenere l'accesso iniziale e inviare commenti.

Se stai creando un agente destinato alla produzione, vedi Panoramica di Microsoft Copilot Studio.

Creare uno strumento standalone per l'uso del computer

Note

L'uso del computer come strumento autonomo è attualmente in fase di implementazione nelle aree supportate e potrebbe non essere ancora disponibile nell'area.

  1. In Copilot Studio selezionare Tools sulla barra laterale. Verrà visualizzata la pagina Strumenti . Per altre informazioni, vedere Usare gli strumenti condivisi dalla pagina Strumenti.

  2. Selezionare Nuovo strumento. Viene visualizzato il pannello Nuovo strumento .

  3. Seleziona Utilizzo del computer. Viene visualizzata la pagina di configurazione, con la relativa scheda Progettazione in stato attivo.

  4. Passare alla scheda Panoramica .

    1. Selezionare Modifica nel riquadro Dettagli . Viene visualizzato il pannello Modifica dettagli utilizzo computer .

    2. Immettere un nome e una descrizione per lo strumento. Questi dettagli consentono ad altri creatori di comprendere quando usare questo strumento nei flussi.

    3. Seleziona Salva.

  5. Passare alla scheda Progettazione .

    1. Selezionare il modello desiderato per questo strumento.

    2. Immettere le istruzioni e definire i parametri.

  6. Al termine della configurazione, selezionare Pubblica. In alternativa, selezionare Salva bozza se non si è pronti per pubblicare questo strumento.

Configurare uno strumento per l'uso di un computer autonomo

L'interfaccia per la configurazione di uno strumento per l'uso di un computer autonomo è organizzata in tre schede che consentono di gestire il ciclo di vita e l'osservabilità dell'automazione.

Overview

La scheda Panoramica funge da carta di identità per lo strumento. Usare questa scheda per:

  • Gestire i metadati dello strumento, ad esempio il nome e la descrizione.
  • Visualizzare lo stato della pubblicazione corrente.
  • Monitorare le esecuzioni recenti per vedere rapidamente come viene eseguito lo strumento nelle esecuzioni più recenti.

Progettista

La scheda Progettazione consente di compilare la logica dello strumento.

  • Modello: selezionare il modello che supporta l'automazione.
  • Istruzioni: Scrivi le istruzioni in linguaggio naturale che l'IA segue per eseguire attività nell'interfaccia utente.
  • Test: usare la sandbox predefinita per eseguire le istruzioni e vedere in che modo l'intelligenza artificiale reagisce in tempo reale.
  • Parametri: definire i parametri di input e output per passare i dati nello strumento o estrarre i risultati per i passaggi downstream in un flusso.
  • Credenziali archiviate: configurare in modo sicuro l'autenticazione per i siti Web o le app a cui lo strumento deve accedere.
  • Siti Web consentiti e app desktop: definire un elenco di siti e applicazioni specifici con cui lo strumento può interagire.
  • Supervisione umana: attivare le notifiche human-in-the-loop per i passaggi che richiedono la convalida manuale o altre informazioni.

Attività

La scheda Attività offre un'osservabilità approfondita per il debug e l'ottimizzazione. Elenca tutte le esecuzioni degli ultimi 28 giorni. Per ogni esecuzione, è possibile visualizzare:

  • Riproduzione della sessione: guardare una registrazione dell'interazione dell'intelligenza artificiale con l'interfaccia.
  • Screenshot: Esaminare ogni schermata acquisita durante l'esecuzione.
  • Log dei passaggi: vedere la sequenza esatta di azioni eseguite dallo strumento.
  • Metriche: analizzare i tempi di esecuzione e le percentuali di esito positivo.

Comportamento di integrazione

È possibile usare uno strumento per l'uso di computer in diverse parti della piattaforma. Il comportamento dello strumento dipende dalla modalità di aggiunta.

Metodo di integrazione Behavior Lifecycle
Aggiungi a un agente (come strumento locale) Lo strumento viene duplicato negli strumenti locali dell'agente Indipendente: le modifiche apportate allo strumento standalone originale non hanno effetto sulla versione dell'agente.
Aggiungi a un flusso dell'agente (come nodo) Lo strumento è indicato come nodo modulare. Collegato: il flusso usa sempre l'ultima versione pubblicata dello strumento autonomo.

Aggiungere uno strumento autonomo per l'utilizzo del computer a un flusso dell'agente

Note

I flussi agente possono accedere solo al computer pubblicato usando strumenti autonomi. I flussi dell'agente attivano sempre la versione pubblicata più recente.

  1. In Copilot Studio selezionare Flows sulla barra laterale.

  2. Selezionare il flusso dell'agente desiderato. Viene visualizzata la scheda Panoramica per il flusso dell'agente selezionato.

  3. Passare alla scheda Progettazione .

  4. Selezionare l'icona Inserisci una nuova azione nel punto nel flusso dell'agente in cui si desidera richiamare lo strumento di utilizzo del computer autonomo. Viene visualizzato il pannello Aggiungi un'azione .

  5. In Funzionalità di intelligenza artificiale selezionare Esegui uno strumento per l'uso di computer. Nel flusso appare il nodo di azione Esegui uno strumento di utilizzo del computer.

  6. Se non si ha ancora una connessione al computer, viene visualizzata la scheda Crea una nuova connessione :

    1. Per Connetti selezionare il tipo di connessione desiderato: Computer o Browser ospitato.
    2. Specificare le informazioni necessarie e selezionare Crea nuovo.

  7. Selezionare lo strumento di utilizzo del computer desiderato.

  8. Se lo strumento di utilizzo del computer selezionato include input, specificare valori statici o dinamici.

Tip

Nel nodo Esegui un'azione dello strumento per l'uso di un computer è possibile:

  • Creare un nuovo strumento per l'uso del computer selezionando Crea nell'elenco Degli strumenti per l'uso del computer .
  • Modificare lo strumento di utilizzo del computer selezionato selezionando Modifica.
  • Aggiornare l'elenco degli strumenti di utilizzo del computer selezionando l'icona Aggiorna .

Aggiungere uno strumento per l'uso di un computer autonomo a un agente

Note

Quando si aggiunge uno strumento per l'uso di un computer autonomo a un agente, si crea una copia indipendente incorporata all'interno di tale agente. Gli aggiornamenti allo strumento standalone non influiscono sulla copia dell'agente, e viceversa.

  • Dalla pagina Strumenti :

    1. In Copilot Studio selezionare Tools sulla barra laterale. Verrà visualizzata la pagina Strumenti .

    2. Selezionare i tre puntini (...) accanto allo strumento di utilizzo del computer desiderato e quindi selezionare Aggiungi all'agente. Viene visualizzato il pannello Aggiungi a un agente .

    3. Selezionare l'agente desiderato e selezionare Aggiungi. Viene visualizzato il riquadro Aggiungi strumento.

    4. Selezionare Aggiungi e configura. Viene visualizzata la pagina di configurazione per la copia locale dello strumento.

    5. Se necessario, modificare la configurazione e quindi selezionare Salva.

    6. Tornare alla pagina Strumenti per l'agente e notare che l'elenco include lo strumento per l'uso del computer appena aggiunto.

  • Dalla pagina Agente :

    1. In Copilot Studio selezionare Agenti sulla barra laterale. Verrà visualizzata la pagina Agenti .

    2. Selezionare l'agente desiderato.

    3. Vai alla pagina Strumenti per il tuo agente.

    4. Selezionare Aggiungi uno strumento. Viene visualizzato il riquadro Aggiungi strumento.

    5. Selezionare il filtro Strumento di utilizzo del computer.

    6. Selezionare lo strumento di utilizzo del computer desiderato e quindi selezionare Aggiungi e configura. Viene visualizzata la pagina di configurazione per la copia locale dello strumento.

    7. Se necessario, modificare la configurazione e quindi selezionare Salva.

    8. Tornare alla pagina Strumenti per l'agente e notare che l'elenco include lo strumento per l'uso del computer appena aggiunto.

Domande frequenti

Quando è consigliabile usare uno strumento autonomo rispetto a uno strumento agente locale?

Usa lo strumento autonomo per l’uso del computer quando vuoi creare un’unica fonte di attendibilità per l’automazione di uno specifico flusso di agenti che deve essere utilizzata da più flussi. Ad esempio, Invia rapporto spese. Usare uno strumento di utilizzo locale nel computer agente (duplicato) quando l'automazione richiede un'orchestrazione non deterministica governata dall'agente stesso.

In che modo lo strumento gestisce la sicurezza e l'accesso?

Lo strumento autonomo usa due livelli di protezione:

  • Credenziali: archiviazione crittografata per i dati di accesso.
  • Governance: restrizione rigida (elenco consenti) che impedisce all'intelligenza artificiale di passare a URL o applicazioni non autorizzati, indipendentemente dalle istruzioni fornite.

È possibile visualizzare le operazioni eseguite dall'intelligenza artificiale durante un'esecuzione del flusso?

Yes. La scheda Attività per lo strumento autonomo elenca le registrazioni di sessione per gli ultimi 28 giorni. Queste registrazioni mostrano ogni clic e sequenza di tasti eseguite dall'intelligenza artificiale, garantendo la trasparenza completa e semplificando il debug.

Perché un modello non è disponibile nell'area geografica?

I modelli Anthropic non sono attualmente disponibili in Cina. Gli utenti cinesi devono usare i modelli OpenAI.

Contenuti correlati

  • Last updated on