{"title":"Computer-Control-API","slug":"computers","category":"api","summary":"Fernsteuerung registrierter Rechner — Commands in die Warteschlange stellen, Screenshots aufnehmen, Scripts auf Remote-Maschinen ausführen.","audience":["human","llm"],"tags":["api","computers","remote-control","automation"],"difficulty":"advanced","updated":"2026-06-27","word_count":316,"read_minutes":2,"llm_context":"Two sides: user-facing (Mind Key/JWT) and agent-facing (Computer Token)\nRegister agent: POST /computers/register { install_code } → returns computer_token\nList: GET /computers/list (Mind Key or JWT)\nQueue command: POST /computers/:id/commands { type, payload }\nCommand types: screenshot, click, move, type, key, scroll, drag\nAgent poll: GET /computers/me/poll?wait=5 (Computer Token)\nAgent result: POST /computers/me/commands/:cid/result (Computer Token)\nOne-shot screenshot: GET /computers/:id/screenshot (waits 30s for result)\nPattern: register agent on remote machine → user queues commands → agent polls and executes\n","lang":"de","translated":true,"requested_lang":"de","content_markdown":"\n# Computer-Control-API\n\nDie Computer-Control-API ermöglicht die Fernsteuerung registrierter Rechner. Ein\nkleiner Agent (`screen-remote-agent`) läuft auf der Zielmaschine, fragt Commands\nab, führt sie aus und postet Ergebnisse zurück. Das ermöglicht LLM-gesteuerte\nGUI-Automatisierung.\n\n## Architektur\n\n```\n┌─────────────┐ queue cmd ┌──────────┐ poll ┌─────────────────┐\n│ LLM Agent │ ───────────▶ │ Synapse │ ◀───── │ screen-remote │\n│ (user-side) │ │ Server │ ──────▶│ (on target PC) │\n└─────────────┘ └──────────┘ result └─────────────────┘\n ▲\n │\n ┌─────────────┐\n │ Human UI │\n │ (browser) │\n └─────────────┘\n```\n\n## Nutzerseitige Endpunkte (Mind Key oder JWT)\n\n### GET /computers/list\n\nAlle registrierten Rechner auflisten.\n\n```bash\ncurl -H \"Authorization: Bearer YOUR_MIND_KEY\" \\\n https://synapse.schaefer.zone/computers/list\n```\n\n### GET /computers/:id\n\nDetails eines einzelnen Rechners abrufen.\n\n```bash\ncurl -H \"Authorization: Bearer YOUR_MIND_KEY\" \\\n https://synapse.schaefer.zone/computers/comp_001\n```\n\n### POST /computers/install-code\n\nInstallationscode zur Registrierung eines neuen Rechners generieren.\n\n```bash\ncurl -X POST https://synapse.schaefer.zone/computers/install-code \\\n -H \"Authorization: Bearer YOUR_MIND_KEY\" \\\n -H \"Content-Type: application/json\" \\\n -d '{\"computer_name\": \"office-mac\"}'\n```\n\nAntwort: `{ \"install_code\": \"ic_xyz789\", \"expires_at\": \"...\" }`\n\n### POST /computers/:id/commands\n\nEin Command für den Remote-Agent in die Warteschlange stellen.\n\n```bash\ncurl -X POST https://synapse.schaefer.zone/computers/comp_001/commands \\\n -H \"Authorization: Bearer YOUR_MIND_KEY\" \\\n -H \"Content-Type: application/json\" \\\n -d '{\n \"type\": \"screenshot\",\n \"payload\": {}\n }'\n```\n\nAntwort: `{ \"command_id\": \"cmd_001\", \"status\": \"queued\" }`\n\n### GET /computers/:id/command (via Query)\n\nEin Command via GET einreihen (für einfache Fälle).\n\n```bash\ncurl -H \"Authorization: Bearer YOUR_MIND_KEY\" \\\n \"https://synapse.schaefer.zone/computers/comp_001/command?type=screenshot\"\n```\n\n### GET /computers/:id/commands\n\nLetzte Commands für einen Rechner auflisten.\n\n```bash\ncurl -H \"Authorization: Bearer YOUR_MIND_KEY\" \\\n \"https://synapse.schaefer.zone/computers/comp_001/commands?limit=50\"\n```\n\n### GET /computers/:id/commands/:cid\n\nStatus + Ergebnis eines bestimmten Commands abrufen.\n\n```bash\ncurl -H \"Authorization: Bearer YOUR_MIND_KEY\" \\\n https://synapse.schaefer.zone/computers/comp_001/commands/cmd_001\n```\n\n### GET /computers/:id/screenshot\n\nOne-Shot: ein Screenshot-Command einreihen und bis zu 30s auf das Ergebnis warten.\n\n```bash\ncurl -H \"Authorization: Bearer YOUR_MIND_KEY\" \\\n https://synapse.schaefer.zone/computers/comp_001/screenshot > screenshot.png\n```\n\n### POST /computers/:id/disable\n\nEinen Rechner deaktivieren (widerruft seinen Token, behält den Eintrag fürs Audit).\n\n```bash\ncurl -X POST -H \"Authorization: Bearer YOUR_MIND_KEY\" \\\n https://synapse.schaefer.zone/computers/comp_001/disable\n```\n\n### DELETE /computers/:id\n\nEinen Rechner dauerhaft löschen.\n\n```bash\ncurl -X DELETE -H \"Authorization: Bearer YOUR_MIND_KEY\" \\\n https://synapse.schaefer.zone/computers/comp_001\n```\n\n## Agentseitige Endpunkte (Computer-Token)\n\nDiese Endpunkte werden vom `screen-remote-agent` auf der Zielmaschine verwendet.\nSie verwenden einen Computer-Token (von `/computers/register` zurückgegeben),\nkeinen Mind Key.\n\n### POST /computers/register\n\nInstallationscode einlösen und einen Computer-Token erhalten.\n\n```bash\ncurl -X POST https://synapse.schaefer.zone/computers/register \\\n -H \"Content-Type: application/json\" \\\n -d '{\n \"code\": \"ic_xyz789\",\n \"computer_name\": \"office-mac\",\n \"platform\": \"darwin\",\n \"platform_release\": \"14.5.0\",\n \"python\": \"3.12.4\"\n }'\n```\n\nAntwort: `{ \"computer_id\": \"comp_001\", \"computer_token\": \"ct_...\" }`\n\n> [!CRITICAL]\n> Speichere den `computer_token` — er wird nur einmal angezeigt und wird für\n> alle agentseitigen Endpunkte benötigt.\n\n### GET /computers/me/poll\n\nLong-Poll für neue Commands. Der Agent ruft dies in einer Schleife auf.\n\n```bash\ncurl -H \"Authorization: Bearer ct_YOUR_COMPUTER_TOKEN\" \\\n \"https://synapse.schaefer.zone/computers/me/poll?wait=30\"\n```\n\nKehrt sofort zurück, wenn Commands ausstehen, sonst nach `wait` Sekunden.\n\n### POST /computers/me/commands/:cid/result\n\nDas Ergebnis der Ausführung eines Commands posten.\n\n```bash\ncurl -X POST https://synapse.schaefer.zone/computers/me/commands/cmd_001/result \\\n -H \"Authorization: Bearer ct_YOUR_COMPUTER_TOKEN\" \\\n -H \"Content-Type: application/json\" \\\n -d '{\n \"status\": \"done\",\n \"result\": { \"screenshot_b64\": \"iVBORw0KG...\" }\n }'\n```\n\n## Command-Typen\n\n| Typ | Payload | Beschreibung |\n|------|---------|--------------|\n| `screenshot` | `{}` | Bildschirm als PNG aufnehmen (base64) |\n| `click` | `{x, y}` | An Koordinaten klicken |\n| `move` | `{x, y}` | Maus zu Koordinaten bewegen |\n| `type` | `{text}` | Text am Cursor tippen |\n| `key` | `{keys: [\"Ctrl\",\"c\"]}` | Tastenkombination drücken |\n| `scroll` | `{deltaX, deltaY}` | Scrollrad |\n| `drag` | `{fromX, fromY, toX, toY}` | Drag-and-Drop |\n\n## Typisches Pattern: LLM-gesteuerte GUI-Automatisierung\n\n```python\n# LLM agent workflow\n1. List computers: GET /computers/list\n2. Take screenshot: GET /computers/:id/screenshot\n3. Analyze screenshot (vision model)\n4. Queue click: POST /computers/:id/commands {type:\"click\", payload:{x,y}}\n5. Wait for result: GET /computers/:id/commands/:cid\n6. Take new screenshot to verify\n7. Repeat until task done\n```\n\n## Nächste Schritte\n\n- [Browser-Proxy](/docs/api/browser) — separater Dienst für Browser-Automatisierung\n- [Self-Hosted-Agents-Guide](/docs/guides/self-hosted-agents)\n","content_html":"

Computer-Control-API

\n

Die Computer-Control-API ermöglicht die Fernsteuerung registrierter Rechner. Ein\nkleiner Agent (screen-remote-agent) läuft auf der Zielmaschine, fragt Commands\nab, führt sie aus und postet Ergebnisse zurück. Das ermöglicht LLM-gesteuerte\nGUI-Automatisierung.

\n

Architektur

\n
┌─────────────┐  queue cmd   ┌──────────┐  poll   ┌─────────────────┐\n│ LLM Agent   │ ───────────▶ │ Synapse  │ ◀───── │ screen-remote   │\n│ (user-side) │              │  Server  │ ──────▶│ (on target PC)  │\n└─────────────┘              └──────────┘ result  └─────────────────┘\n                                     ▲\n                                     │\n                              ┌─────────────┐\n                              │  Human UI   │\n                              │ (browser)   │\n                              └─────────────┘

Nutzerseitige Endpunkte (Mind Key oder JWT)

\n

GET /computers/list

\n

Alle registrierten Rechner auflisten.

\n
curl -H "Authorization: Bearer YOUR_MIND_KEY" \\\n     https://synapse.schaefer.zone/computers/list

GET /computers/:id

\n

Details eines einzelnen Rechners abrufen.

\n
curl -H "Authorization: Bearer YOUR_MIND_KEY" \\\n     https://synapse.schaefer.zone/computers/comp_001

POST /computers/install-code

\n

Installationscode zur Registrierung eines neuen Rechners generieren.

\n
curl -X POST https://synapse.schaefer.zone/computers/install-code \\\n  -H "Authorization: Bearer YOUR_MIND_KEY" \\\n  -H "Content-Type: application/json" \\\n  -d '{"computer_name": "office-mac"}'

Antwort: { "install_code": "ic_xyz789", "expires_at": "..." }

\n

POST /computers/:id/commands

\n

Ein Command für den Remote-Agent in die Warteschlange stellen.

\n
curl -X POST https://synapse.schaefer.zone/computers/comp_001/commands \\\n  -H "Authorization: Bearer YOUR_MIND_KEY" \\\n  -H "Content-Type: application/json" \\\n  -d '{\n    "type": "screenshot",\n    "payload": {}\n  }'

Antwort: { "command_id": "cmd_001", "status": "queued" }

\n

GET /computers/:id/command (via Query)

\n

Ein Command via GET einreihen (für einfache Fälle).

\n
curl -H "Authorization: Bearer YOUR_MIND_KEY" \\\n     "https://synapse.schaefer.zone/computers/comp_001/command?type=screenshot"

GET /computers/:id/commands

\n

Letzte Commands für einen Rechner auflisten.

\n
curl -H "Authorization: Bearer YOUR_MIND_KEY" \\\n     "https://synapse.schaefer.zone/computers/comp_001/commands?limit=50"

GET /computers/:id/commands/:cid

\n

Status + Ergebnis eines bestimmten Commands abrufen.

\n
curl -H "Authorization: Bearer YOUR_MIND_KEY" \\\n     https://synapse.schaefer.zone/computers/comp_001/commands/cmd_001

GET /computers/:id/screenshot

\n

One-Shot: ein Screenshot-Command einreihen und bis zu 30s auf das Ergebnis warten.

\n
curl -H "Authorization: Bearer YOUR_MIND_KEY" \\\n     https://synapse.schaefer.zone/computers/comp_001/screenshot > screenshot.png

POST /computers/:id/disable

\n

Einen Rechner deaktivieren (widerruft seinen Token, behält den Eintrag fürs Audit).

\n
curl -X POST -H "Authorization: Bearer YOUR_MIND_KEY" \\\n     https://synapse.schaefer.zone/computers/comp_001/disable

DELETE /computers/:id

\n

Einen Rechner dauerhaft löschen.

\n
curl -X DELETE -H "Authorization: Bearer YOUR_MIND_KEY" \\\n     https://synapse.schaefer.zone/computers/comp_001

Agentseitige Endpunkte (Computer-Token)

\n

Diese Endpunkte werden vom screen-remote-agent auf der Zielmaschine verwendet.\nSie verwenden einen Computer-Token (von /computers/register zurückgegeben),\nkeinen Mind Key.

\n

POST /computers/register

\n

Installationscode einlösen und einen Computer-Token erhalten.

\n
curl -X POST https://synapse.schaefer.zone/computers/register \\\n  -H "Content-Type: application/json" \\\n  -d '{\n    "code": "ic_xyz789",\n    "computer_name": "office-mac",\n    "platform": "darwin",\n    "platform_release": "14.5.0",\n    "python": "3.12.4"\n  }'

Antwort: { "computer_id": "comp_001", "computer_token": "ct_..." }

\n
Speichere den `computer_token` — er wird nur einmal angezeigt und wird für\nalle agentseitigen Endpunkte benötigt.

GET /computers/me/poll

\n

Long-Poll für neue Commands. Der Agent ruft dies in einer Schleife auf.

\n
curl -H "Authorization: Bearer ct_YOUR_COMPUTER_TOKEN" \\\n     "https://synapse.schaefer.zone/computers/me/poll?wait=30"

Kehrt sofort zurück, wenn Commands ausstehen, sonst nach wait Sekunden.

\n

POST /computers/me/commands/:cid/result

\n

Das Ergebnis der Ausführung eines Commands posten.

\n
curl -X POST https://synapse.schaefer.zone/computers/me/commands/cmd_001/result \\\n  -H "Authorization: Bearer ct_YOUR_COMPUTER_TOKEN" \\\n  -H "Content-Type: application/json" \\\n  -d '{\n    "status": "done",\n    "result": { "screenshot_b64": "iVBORw0KG..." }\n  }'

Command-Typen

\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n
TypPayloadBeschreibung
screenshot{}Bildschirm als PNG aufnehmen (base64)
click{x, y}An Koordinaten klicken
move{x, y}Maus zu Koordinaten bewegen
type{text}Text am Cursor tippen
key{keys: ["Ctrl","c"]}Tastenkombination drücken
scroll{deltaX, deltaY}Scrollrad
drag{fromX, fromY, toX, toY}Drag-and-Drop
\n

Typisches Pattern: LLM-gesteuerte GUI-Automatisierung

\n
# LLM agent workflow\n1. List computers: GET /computers/list\n2. Take screenshot: GET /computers/:id/screenshot\n3. Analyze screenshot (vision model)\n4. Queue click: POST /computers/:id/commands {type:"click", payload:{x,y}}\n5. Wait for result: GET /computers/:id/commands/:cid\n6. Take new screenshot to verify\n7. Repeat until task done

Nächste Schritte

\n\n","urls":{"html":"/docs/api/computers","text":"/docs/api/computers?format=text","json":"/docs/api/computers?format=json","llm":"/docs/api/computers?format=llm"},"translations_available":["en","zh","hi","es","fr","ar","pt","ru","ja","de","it","ko","nl","pl","tr","sv","vi","th","id","uk"]}