Strumento di controllo del computer

Claude può interagire con ambienti desktop attraverso lo strumento di controllo del computer, che fornisce capacità di screenshot e controllo del mouse/tastiera per l'interazione autonoma del desktop.

Panoramica

Il controllo del computer è una funzione beta che consente a Claude di interagire con ambienti desktop. Questo strumento fornisce:

• Acquisizione di screenshot: Vedi cosa è attualmente visualizzato sullo schermo
• Controllo del mouse: Fai clic, trascina e sposta il cursore
• Input da tastiera: Digita testo e utilizza scorciatoie da tastiera
• Automazione del desktop: Interagisci con qualsiasi applicazione o interfaccia

Sebbene il controllo del computer possa essere aumentato con altri strumenti come bash e editor di testo per flussi di lavoro di automazione più completi, il controllo del computer si riferisce specificamente alla capacità dello strumento di controllo del computer di vedere e controllare gli ambienti desktop.

Compatibilità dei modelli

Il controllo del computer è disponibile per i seguenti modelli Claude:

Considerazioni sulla sicurezza

Guida rapida

Ecco come iniziare con il controllo del computer:

Come funziona il controllo del computer

Ci riferiamo alla ripetizione dei passaggi 3 e 4 senza input dell'utente come il "ciclo di agenti" - cioè Claude che risponde con una richiesta di utilizzo dello strumento e la tua applicazione che risponde a Claude con i risultati della valutazione di quella richiesta.

Claude può interagire con ambienti informatici attraverso lo strumento di utilizzo del computer, che fornisce funzionalità di screenshot e controllo del mouse/tastiera per l'interazione autonoma del desktop.

Panoramica

L'utilizzo del computer è una funzione beta che consente a Claude di interagire con ambienti desktop. Questo strumento fornisce:

• Acquisizione di screenshot: Vedi cosa è attualmente visualizzato sullo schermo
• Controllo del mouse: Fai clic, trascina e sposta il cursore
• Input da tastiera: Digita testo e utilizza scorciatoie da tastiera
• Automazione del desktop: Interagisci con qualsiasi applicazione o interfaccia

Sebbene l'utilizzo del computer possa essere aumentato con altri strumenti come bash e editor di testo per flussi di lavoro di automazione più completi, l'utilizzo del computer si riferisce specificamente alla capacità dello strumento di utilizzo del computer di vedere e controllare gli ambienti desktop.

Compatibilità del modello

L'utilizzo del computer è disponibile per i seguenti modelli Claude:

Considerazioni sulla sicurezza

Avvio rapido

Ecco come iniziare con l'utilizzo del computer:

Come funziona l'utilizzo del computer

Ci riferiamo alla ripetizione dei passaggi 3 e 4 senza input dell'utente come il "ciclo di agenti" - cioè Claude che risponde con una richiesta di utilizzo dello strumento e la tua applicazione che risponde a Claude con i risultati della valutazione di quella richiesta.

L'ambiente informatico

L'utilizzo del computer richiede un ambiente informatico sandbox in cui Claude possa interagire in sicurezza con applicazioni e il web. Questo ambiente include:

1. Display virtuale: Un server di visualizzazione X11 virtuale (utilizzando Xvfb) che esegue il rendering dell'interfaccia desktop che Claude vedrà attraverso gli screenshot e controllerà con le azioni del mouse/tastiera.

2. Ambiente desktop: Un'interfaccia utente leggera con gestore finestre (Mutter) e pannello (Tint2) in esecuzione su Linux, che fornisce un'interfaccia grafica coerente per Claude per interagire.

3. Applicazioni: Applicazioni Linux preinstallate come Firefox, LibreOffice, editor di testo e gestori di file che Claude può utilizzare per completare le attività.

4. Implementazioni di strumenti: Codice di integrazione che traduce le richieste di strumenti astratti di Claude (come "sposta il mouse" o "prendi uno screenshot") in operazioni effettive nell'ambiente virtuale.

5. Ciclo di agenti: Un programma che gestisce la comunicazione tra Claude e l'ambiente, inviando le azioni di Claude all'ambiente e restituendo i risultati (screenshot, output dei comandi) a Claude.

Quando utilizzi l'utilizzo del computer, Claude non si connette direttamente a questo ambiente. Invece, la tua applicazione:

1. Riceve le richieste di utilizzo dello strumento di Claude
2. Le traduce in azioni nel tuo ambiente informatico
3. Acquisisce i risultati (screenshot, output dei comandi, ecc.)
4. Restituisce questi risultati a Claude

Per la sicurezza e l'isolamento, l'implementazione di riferimento esegue tutto questo all'interno di un contenitore Docker con mappature di porta appropriate per visualizzare e interagire con l'ambiente.

Come implementare l'utilizzo del computer

Inizia con la nostra implementazione di riferimento

Abbiamo costruito un'implementazione di riferimento che include tutto ciò di cui hai bisogno per iniziare rapidamente con l'utilizzo del computer:

• Un ambiente containerizzato adatto per l'utilizzo del computer con Claude
• Implementazioni degli strumenti di utilizzo del computer
• Un ciclo di agenti che interagisce con l'API Claude ed esegue gli strumenti di utilizzo del computer
• Un'interfaccia web per interagire con il contenitore, il ciclo di agenti e gli strumenti.

Comprensione del ciclo multi-agente

Il nucleo dell'utilizzo del computer è il "ciclo di agenti" - un ciclo in cui Claude richiede azioni dello strumento, la tua applicazione le esegue e restituisce i risultati a Claude. Ecco un esempio semplificato:

async def sampling_loop(
    *,
    model: str,
    messages: list[dict],
    api_key: str,
    max_tokens: int = 4096,
    tool_version: str,
    thinking_budget: int | None = None,
    max_iterations: int = 10,  # Aggiungi limite di iterazione per prevenire cicli infiniti
):
    """
    Un semplice ciclo di agenti per le interazioni di utilizzo del computer Claude.

    Questa funzione gestisce il dialogo tra:
    1. Invio di messaggi dell'utente a Claude
    2. Claude che richiede di utilizzare gli strumenti
    3. La tua app che esegue questi strumenti
    4. Invio dei risultati dello strumento a Claude
    """
    # Configura strumenti e parametri API
    client = Anthropic(api_key=api_key)
    beta_flag = "computer-use-2025-01-24" if "20250124" in tool_version else "computer-use-2024-10-22"

    # Configura strumenti - dovresti già averli inizializzati altrove
    tools = [
        {"type": f"computer_{tool_version}", "name": "computer", "display_width_px": 1024, "display_height_px": 768},
        {"type": f"text_editor_{tool_version}", "name": "str_replace_editor"},
        {"type": f"bash_{tool_version}", "name": "bash"}
    ]

    # Ciclo di agenti principale (con limite di iterazione per prevenire costi API incontrollati)
    iterations = 0
    while True and iterations < max_iterations:
        iterations += 1
        # Configura il parametro di pensiero opzionale (per Claude Sonnet 3.7)
        thinking = None
        if thinking_budget:
            thinking = {"type": "enabled", "budget_tokens": thinking_budget}

        # Chiama l'API Claude
        response = client.beta.messages.create(
            model=model,
            max_tokens=max_tokens,
            messages=messages,
            tools=tools,
            betas=[beta_flag],
            thinking=thinking
        )

        # Aggiungi la risposta di Claude alla cronologia della conversazione
        response_content = response.content
        messages.append({"role": "assistant", "content": response_content})

        # Controlla se Claude ha utilizzato degli strumenti
        tool_results = []
        for block in response_content:
            if block.type == "tool_use":
                # In un'app reale, eseguiresti lo strumento qui
                # Ad esempio: result = run_tool(block.name, block.input)
                result = {"result": "Tool executed successfully"}

                # Formatta il risultato per Claude
                tool_results.append({
                    "type": "tool_result",
                    "tool_use_id": block.id,
                    "content": result
                })

        # Se nessuno strumento è stato utilizzato, Claude ha finito - restituisci i messaggi finali
        if not tool_results:
            return messages

        # Aggiungi i risultati dello strumento ai messaggi per la prossima iterazione con Claude
        messages.append({"role": "user", "content": tool_results})

Il ciclo continua fino a quando Claude non risponde senza richiedere alcuno strumento (completamento dell'attività) o fino al raggiungimento del limite massimo di iterazione. Questa salvaguardia previene potenziali cicli infiniti che potrebbero causare costi API imprevisti.

Ti consigliamo di provare l'implementazione di riferimento prima di leggere il resto di questa documentazione.

Ottimizza le prestazioni del modello con i prompt

Ecco alcuni suggerimenti su come ottenere i migliori output di qualità:

1. Specifica attività semplici e ben definite e fornisci istruzioni esplicite per ogni passaggio.
2. Claude a volte assume i risultati delle sue azioni senza controllare esplicitamente i loro risultati. Per prevenire questo, puoi richiedere a Claude con Dopo ogni passaggio, prendi uno screenshot e valuta attentamente se hai raggiunto il risultato giusto. Mostra esplicitamente il tuo ragionamento: "Ho valutato il passaggio X..." Se non è corretto, riprova. Solo quando confermi che un passaggio è stato eseguito correttamente dovresti passare a quello successivo.
3. Alcuni elementi dell'interfaccia utente (come i menu a discesa e le barre di scorrimento) potrebbero essere difficili da manipolare per Claude utilizzando i movimenti del mouse. Se riscontri questo problema, prova a richiedere al modello di utilizzare le scorciatoie da tastiera.
4. Per attività ripetibili o interazioni dell'interfaccia utente, includi screenshot di esempio e chiamate di strumenti di risultati riusciti nel tuo prompt.
5. Se hai bisogno che il modello acceda, forniscigli il nome utente e la password nel tuo prompt all'interno di tag xml come <robot_credentials>. L'utilizzo dell'utilizzo del computer all'interno di applicazioni che richiedono l'accesso aumenta il rischio di risultati negativi a causa dell'iniezione di prompt. Consulta la nostra guida sulla mitigazione delle iniezioni di prompt prima di fornire al modello le credenziali di accesso.

Prompt di sistema

Quando uno degli strumenti definiti da Anthropic viene richiesto tramite l'API Claude, viene generato un prompt di sistema specifico per l'utilizzo del computer. È simile al prompt di sistema di utilizzo dello strumento ma inizia con:

Hai accesso a un set di funzioni che puoi utilizzare per rispondere alla domanda dell'utente. Questo include l'accesso a un ambiente informatico sandbox. Attualmente NON hai la capacità di ispezionare file o interagire con risorse esterne, se non invocando le funzioni seguenti.

Come con l'utilizzo regolare dello strumento, il campo system_prompt fornito dall'utente è ancora rispettato e utilizzato nella costruzione del prompt di sistema combinato.

Come implementare l'uso del computer

Inizia con la nostra implementazione di riferimento

Abbiamo costruito un'implementazione di riferimento che include tutto ciò di cui hai bisogno per iniziare rapidamente con l'uso del computer:

• Un ambiente containerizzato adatto all'uso del computer con Claude
• Implementazioni dei tool di uso del computer
• Un ciclo agente che interagisce con l'API Claude ed esegue i tool di uso del computer
• Un'interfaccia web per interagire con il container, il ciclo agente e i tool.

Comprendere il ciclo multi-agente

Il nucleo dell'uso del computer è il "ciclo agente" - un ciclo in cui Claude richiede azioni di tool, la tua applicazione le esegue e restituisce i risultati a Claude. Ecco un esempio semplificato:

async def sampling_loop(
    *,
    model: str,
    messages: list[dict],
    api_key: str,
    max_tokens: int = 4096,
    tool_version: str,
    thinking_budget: int | None = None,
    max_iterations: int = 10,  # Add iteration limit to prevent infinite loops
):
    """
    A simple agent loop for Claude computer use interactions.

    This function handles the back-and-forth between:
    1. Sending user messages to Claude
    2. Claude requesting to use tools
    3. Your app executing those tools
    4. Sending tool results back to Claude
    """
    # Set up tools and API parameters
    client = Anthropic(api_key=api_key)
    beta_flag = "computer-use-2025-01-24" if "20250124" in tool_version else "computer-use-2024-10-22"

    # Configure tools - you should already have these initialized elsewhere
    tools = [
        {"type": f"computer_{tool_version}", "name": "computer", "display_width_px": 1024, "display_height_px": 768},
        {"type": f"text_editor_{tool_version}", "name": "str_replace_editor"},
        {"type": f"bash_{tool_version}", "name": "bash"}
    ]

    # Main agent loop (with iteration limit to prevent runaway API costs)
    iterations = 0
    while True and iterations < max_iterations:
        iterations += 1
        # Set up optional thinking parameter (for Claude Sonnet 3.7)
        thinking = None
        if thinking_budget:
            thinking = {"type": "enabled", "budget_tokens": thinking_budget}

        # Call the Claude API
        response = client.beta.messages.create(
            model=model,
            max_tokens=max_tokens,
            messages=messages,
            tools=tools,
            betas=[beta_flag],
            thinking=thinking
        )

        # Add Claude's response to the conversation history
        response_content = response.content
        messages.append({"role": "assistant", "content": response_content})

        # Check if Claude used any tools
        tool_results = []
        for block in response_content:
            if block.type == "tool_use":
                # In a real app, you would execute the tool here
                # For example: result = run_tool(block.name, block.input)
                result = {"result": "Tool executed successfully"}

                # Format the result for Claude
                tool_results.append({
                    "type": "tool_result",
                    "tool_use_id": block.id,
                    "content": result
                })

        # If no tools were used, Claude is done - return the final messages
        if not tool_results:
            return messages

        # Add tool results to messages for the next iteration with Claude
        messages.append({"role": "user", "content": tool_results})

Il ciclo continua finché Claude non risponde senza richiedere alcun tool (completamento dell'attività) o finché non viene raggiunto il limite massimo di iterazioni. Questa salvaguardia previene potenziali cicli infiniti che potrebbero causare costi API imprevisti.

Ti consigliamo di provare l'implementazione di riferimento prima di leggere il resto di questa documentazione.

Ottimizza le prestazioni del modello con il prompting

Ecco alcuni suggerimenti su come ottenere i migliori output di qualità:

1. Specifica attività semplici e ben definite e fornisci istruzioni esplicite per ogni passaggio.
2. Claude a volte assume i risultati delle sue azioni senza verificarli esplicitamente. Per evitare questo, puoi invitare Claude con After each step, take a screenshot and carefully evaluate if you have achieved the right outcome. Explicitly show your thinking: "I have evaluated step X..." If not correct, try again. Only when you confirm a step was executed correctly should you move on to the next one.
3. Alcuni elementi dell'interfaccia utente (come i menu a discesa e le barre di scorrimento) potrebbero essere difficili da manipolare per Claude utilizzando i movimenti del mouse. Se riscontri questo problema, prova a invitare il modello a utilizzare i tasti di scelta rapida.
4. Per attività ripetibili o interazioni dell'interfaccia utente, includi screenshot di esempio e chiamate di tool di risultati riusciti nel tuo prompt.
5. Se hai bisogno che il modello acceda, forniscigli il nome utente e la password nel tuo prompt all'interno di tag xml come <robot_credentials>. L'utilizzo dell'uso del computer all'interno di applicazioni che richiedono l'accesso aumenta il rischio di risultati negativi a causa dell'iniezione di prompt. Consulta la nostra guida sulla mitigazione delle iniezioni di prompt prima di fornire al modello le credenziali di accesso.

Prompt di sistema

Quando uno dei tool definiti da Anthropic viene richiesto tramite l'API Claude, viene generato un prompt di sistema specifico per l'uso del computer. È simile al prompt di sistema di uso del tool ma inizia con:

You have access to a set of functions you can use to answer the user's question. This includes access to a sandboxed computing environment. You do NOT currently have the ability to inspect files or interact with external resources, except by invoking the below functions.

Come con l'uso regolare del tool, il campo system_prompt fornito dall'utente è ancora rispettato e utilizzato nella costruzione del prompt di sistema combinato.

Azioni disponibili

Il tool di uso del computer supporta queste azioni:

Azioni di base (tutte le versioni)

• screenshot - Cattura il display corrente
• left_click - Fai clic alle coordinate [x, y]
• type - Digita una stringa di testo
• key - Premi un tasto o una combinazione di tasti (ad es. "ctrl+s")
• mouse_move - Sposta il cursore alle coordinate

Azioni migliorate (computer_20250124) Disponibili nei modelli Claude 4 e Claude Sonnet 3.7:

• scroll - Scorri in qualsiasi direzione con controllo della quantità
• left_click_drag - Fai clic e trascina tra le coordinate
• right_click, middle_click - Pulsanti del mouse aggiuntivi
• double_click, triple_click - Clic multipli
• left_mouse_down, left_mouse_up - Controllo del clic granulare
• hold_key - Tieni premuto un tasto mentre esegui altre azioni
• wait - Pausa tra le azioni

Azioni migliorate (computer_20251124) Disponibili in Claude Opus 4.5:

• Tutte le azioni da computer_20250124
• zoom - Visualizza una regione specifica dello schermo a risoluzione completa. Richiede enable_zoom: true nella definizione del tool. Accetta un parametro region con coordinate [x1, y1, x2, y2] che definiscono gli angoli in alto a sinistra e in basso a destra dell'area da ispezionare.

Parametri del tool

Parametri del tool

Abilita la capacità di pensiero nei modelli Claude 4 e Claude Sonnet 3.7

Claude Sonnet 3.7 ha introdotto una nuova capacità di "pensiero" che ti consente di vedere il processo di ragionamento del modello mentre lavora su attività complesse. Questa funzione ti aiuta a comprendere come Claude sta affrontando un problema e può essere particolarmente preziosa per il debug o scopi educativi.

Per abilitare il pensiero, aggiungi un parametro thinking alla tua richiesta API:

"thinking": {
  "type": "enabled",
  "budget_tokens": 1024
}

Il parametro budget_tokens specifica quanti token Claude può utilizzare per il pensiero. Questo viene sottratto dal tuo budget complessivo di max_tokens.

Quando il pensiero è abilitato, Claude restituirà il suo processo di ragionamento come parte della risposta, che può aiutarti a:

1. Comprendere il processo decisionale del modello
2. Identificare potenziali problemi o malintesi
3. Imparare dall'approccio di Claude alla risoluzione dei problemi
4. Ottenere maggiore visibilità nelle operazioni multi-step complesse

Ecco un esempio di come potrebbe apparire l'output del pensiero:

[Thinking]
I need to save a picture of a cat to the desktop. Let me break this down into steps:

1. First, I'll take a screenshot to see what's on the desktop
2. Then I'll look for a web browser to search for cat images
3. After finding a suitable image, I'll need to save it to the desktop

Let me start by taking a screenshot to see what's available...

Parametri del tool

Aumentare l'uso del computer con altri tool

Il tool di uso del computer può essere combinato con altri tool per creare flussi di lavoro di automazione più potenti. Questo è particolarmente utile quando hai bisogno di:

• Eseguire comandi di sistema (tool bash)
• Modificare file di configurazione o script (tool editor di testo)
• Integrarsi con API personalizzate o servizi (tool personalizzati)

Parametri dello strumento

Abilita la capacità di ragionamento nei modelli Claude 4 e Claude Sonnet 3.7

Claude Sonnet 3.7 ha introdotto una nuova capacità di "ragionamento" che ti consente di vedere il processo di ragionamento del modello mentre affronta compiti complessi. Questa funzione ti aiuta a capire come Claude sta affrontando un problema e può essere particolarmente preziosa per il debug o scopi educativi.

Per abilitare il ragionamento, aggiungi un parametro thinking alla tua richiesta API:

"thinking": {
  "type": "enabled",
  "budget_tokens": 1024
}

Il parametro budget_tokens specifica quanti token Claude può utilizzare per il ragionamento. Questo viene sottratto dal tuo budget complessivo di max_tokens.

Quando il ragionamento è abilitato, Claude restituirà il suo processo di ragionamento come parte della risposta, che può aiutarti a:

1. Comprendere il processo decisionale del modello
2. Identificare potenziali problemi o malintesi
3. Imparare dall'approccio di Claude alla risoluzione dei problemi
4. Ottenere maggiore visibilità nelle operazioni complesse multi-step

Ecco un esempio di come potrebbe apparire l'output del ragionamento:

[Thinking]
Devo salvare un'immagine di un gatto sul desktop. Dividiamo questo in passaggi:

1. Per prima cosa, farò uno screenshot per vedere cosa c'è sul desktop
2. Poi cercherò un browser web per cercare immagini di gatti
3. Dopo aver trovato un'immagine adatta, dovrò salvarla sul desktop

Iniziamo facendo uno screenshot per vedere cosa è disponibile...

Potenziamento dell'utilizzo del computer con altri strumenti

Lo strumento di utilizzo del computer può essere combinato con altri strumenti per creare flussi di lavoro di automazione più potenti. Questo è particolarmente utile quando hai bisogno di:

• Eseguire comandi di sistema (strumento bash)
• Modificare file di configurazione o script (strumento editor di testo)
• Integrarsi con API personalizzate o servizi (strumenti personalizzati)

Costruisci un ambiente personalizzato di utilizzo del computer

L'implementazione di riferimento è pensata per aiutarti a iniziare con l'utilizzo del computer. Include tutti i componenti necessari per far usare un computer a Claude. Tuttavia, puoi costruire il tuo ambiente per l'utilizzo del computer per adattarlo alle tue esigenze. Avrai bisogno di:

• Un ambiente virtualizzato o containerizzato adatto all'utilizzo del computer con Claude
• Un'implementazione di almeno uno degli strumenti di utilizzo del computer definiti da Anthropic
• Un ciclo di agenti che interagisce con l'API Claude ed esegue i risultati di tool_use utilizzando le tue implementazioni di strumenti
• Un'API o un'interfaccia utente che consenta l'input dell'utente per avviare il ciclo di agenti

Implementa lo strumento di utilizzo del computer

Lo strumento di utilizzo del computer è implementato come uno strumento senza schema. Quando utilizzi questo strumento, non è necessario fornire uno schema di input come con altri strumenti; lo schema è integrato nel modello di Claude e non può essere modificato.

Gestisci gli errori

Quando implementi lo strumento di utilizzo del computer, possono verificarsi vari errori. Ecco come gestirli:

Segui le migliori pratiche di implementazione

Comprendi i limiti dell'utilizzo del computer

La funzionalità di utilizzo del computer è in beta. Sebbene le capacità di Claude siano all'avanguardia, gli sviluppatori dovrebbero essere consapevoli dei suoi limiti:

1. Latenza: la latenza attuale dell'utilizzo del computer per le interazioni uomo-IA potrebbe essere troppo lenta rispetto alle normali azioni dirette dal computer umano. Consigliamo di concentrarsi su casi d'uso in cui la velocità non è critica (ad es. raccolta di informazioni di background, test automatizzato del software) in ambienti affidabili.
2. Precisione e affidabilità della visione artificiale: Claude potrebbe fare errori o allucinare quando emette coordinate specifiche durante la generazione di azioni. Claude Sonnet 3.7 introduce la capacità di ragionamento che può aiutarti a comprendere il ragionamento del modello e identificare potenziali problemi.
3. Precisione e affidabilità della selezione dello strumento: Claude potrebbe fare errori o allucinare quando seleziona strumenti durante la generazione di azioni o intraprendere azioni inaspettate per risolvere i problemi. Inoltre, l'affidabilità potrebbe essere inferiore quando si interagisce con applicazioni di nicchia o più applicazioni contemporaneamente. Consigliamo agli utenti di richiedere attentamente il modello quando si richiedono attività complesse.
4. Affidabilità dello scorrimento: Claude Sonnet 3.7 ha introdotto azioni di scorrimento dedicate con controllo della direzione che migliora l'affidabilità. Il modello può ora scorrere esplicitamente in qualsiasi direzione (su/giù/sinistra/destra) di un importo specificato.
5. Interazione con fogli di calcolo: I clic del mouse per l'interazione con fogli di calcolo sono migliorati in Claude Sonnet 3.7 con l'aggiunta di azioni di controllo del mouse più precise come left_mouse_down, left_mouse_up e nuovo supporto per tasti modificatori. La selezione delle celle può essere più affidabile utilizzando questi controlli granulari e combinando i tasti modificatori con i clic.

Rivedi e verifica sempre attentamente le azioni e i registri di utilizzo del computer di Claude. Non utilizzare Claude per attività che richiedono una precisione perfetta o informazioni sensibili dell'utente senza supervisione umana.

Comprendi i limiti dell'utilizzo del computer

La funzionalità di utilizzo del computer è in beta. Sebbene le capacità di Claude siano all'avanguardia, gli sviluppatori dovrebbero essere consapevoli dei suoi limiti:

1. Latenza: la latenza attuale dell'utilizzo del computer per le interazioni uomo-IA potrebbe essere troppo lenta rispetto alle normali azioni dirette dal computer umano. Consigliamo di concentrarsi su casi d'uso in cui la velocità non è critica (ad es. raccolta di informazioni di background, test automatizzato del software) in ambienti affidabili.
2. Precisione e affidabilità della visione artificiale: Claude potrebbe fare errori o allucinare quando emette coordinate specifiche durante la generazione di azioni. Claude Sonnet 3.7 introduce la capacità di ragionamento che può aiutarti a comprendere il ragionamento del modello e identificare potenziali problemi.
3. Precisione e affidabilità della selezione dello strumento: Claude potrebbe fare errori o allucinare quando seleziona strumenti durante la generazione di azioni o intraprendere azioni inaspettate per risolvere i problemi. Inoltre, l'affidabilità potrebbe essere inferiore quando si interagisce con applicazioni di nicchia o più applicazioni contemporaneamente. Consigliamo agli utenti di richiedere attentamente il modello quando si richiedono attività complesse.
4. Affidabilità dello scorrimento: Claude Sonnet 3.7 ha introdotto azioni di scorrimento dedicate con controllo della direzione che migliora l'affidabilità. Il modello può ora scorrere esplicitamente in qualsiasi direzione (su/giù/sinistra/destra) di un importo specificato.
5. Interazione con fogli di calcolo: I clic del mouse per l'interazione con fogli di calcolo sono migliorati in Claude Sonnet 3.7 con l'aggiunta di azioni di controllo del mouse più precise come left_mouse_down, left_mouse_up e nuovo supporto per tasti modificatori. La selezione delle celle può essere più affidabile utilizzando questi controlli granulari e combinando i tasti modificatori con i clic.

Rivedi e verifica sempre attentamente le azioni e i registri di utilizzo del computer di Claude. Non utilizzare Claude per attività che richiedono una precisione perfetta o informazioni sensibili dell'utente senza supervisione umana.

Prezzi

Computer use follows the standard tool use pricing. When using the computer use tool:

System prompt overhead: The computer use beta adds 466-499 tokens to the system prompt

Computer use tool token usage:

Additional token consumption:

• Screenshot images (see Vision pricing)
• Tool execution results returned to Claude

Comprendi i limiti dell'utilizzo del computer

La funzionalità di utilizzo del computer è in beta. Sebbene le capacità di Claude siano all'avanguardia, gli sviluppatori dovrebbero essere consapevoli dei suoi limiti:

1. Latenza: la latenza attuale dell'utilizzo del computer per le interazioni uomo-IA potrebbe essere troppo lenta rispetto alle normali azioni dirette dal computer umano. Consigliamo di concentrarsi su casi d'uso in cui la velocità non è critica (ad es. raccolta di informazioni di background, test automatizzato del software) in ambienti affidabili.
2. Precisione e affidabilità della visione artificiale: Claude potrebbe fare errori o allucinare quando emette coordinate specifiche durante la generazione di azioni. Claude Sonnet 3.7 introduce la capacità di ragionamento che può aiutarti a comprendere il ragionamento del modello e identificare potenziali problemi.
3. Precisione e affidabilità della selezione dello strumento: Claude potrebbe fare errori o allucinare quando seleziona strumenti durante la generazione di azioni o intraprendere azioni inaspettate per risolvere i problemi. Inoltre, l'affidabilità potrebbe essere inferiore quando si interagisce con applicazioni di nicchia o più applicazioni contemporaneamente. Consigliamo agli utenti di richiedere attentamente il modello quando si richiedono attività complesse.
4. Affidabilità dello scorrimento: Claude Sonnet 3.7 ha introdotto azioni di scorrimento dedicate con controllo della direzione che migliora l'affidabilità. Il modello può ora scorrere esplicitamente in qualsiasi direzione (su/giù/sinistra/destra) di un importo specificato.
5. Interazione con fogli di calcolo: I clic del mouse per l'interazione con fogli di calcolo sono migliorati in Claude Sonnet 3.7 con l'aggiunta di azioni di controllo del mouse più precise come left_mouse_down, left_mouse_up e nuovo supporto per tasti modificatori. La selezione delle celle può essere più affidabile utilizzando questi controlli granulari e combinando i tasti modificatori con i clic.

Rivedi e verifica sempre attentamente le azioni e i registri di utilizzo del computer di Claude. Non utilizzare Claude per attività che richiedono una precisione perfetta o informazioni sensibili dell'utente senza supervisione umana.

Prezzi

Computer use follows the standard tool use pricing. When using the computer use tool:

System prompt overhead: The computer use beta adds 466-499 tokens to the system prompt

Computer use tool token usage:

Additional token consumption:

• Screenshot images (see Vision pricing)
• Tool execution results returned to Claude

Passaggi successivi

Infine, informi gli utenti finali dei rischi rilevanti e ottieni il loro consenso prima di abilitare il controllo del computer nei tuoi prodotti.

Infine, informi gli utenti finali dei rischi rilevanti e ottieni il loro consenso prima di abilitare l'utilizzo del computer nei tuoi prodotti.