IT뉴스모아news terminal

article detail

Show GN: Sidehand - 내가 타이핑하는 동안 창 뒤의 Windows 앱을 AI 에이전트가 조작하는 MCP 서버

GeekNews
2026. 11. 18. 오후 10:13
Show GN: Sidehand - 내가 타이핑하는 동안 창 뒤의 Windows 앱을 AI 에이전트가 조작하는 MCP 서버

AI 요약

Sidehand는 Windows 10/11용 MCP 서버로 Claude Code, Codex, Cursor 같은 MCP 클라이언트가 사용자가 보는 창 뒤에 있는 앱을 읽고 조작하게 하며 마우스 커서는 움직이지 않고 키보드도 가져가지 않고 화면을 스크린샷 대신 텍스트로 읽으며 컨트롤 하나가 한 줄입니다. 벤치마크에서 한 작업에 277토큰이 들었고 비교한 다른 도구는 2,488에서 13,425토큰이었으며 같은 작업을 2.0초에 끝내 다른 두 도구(Windows-MCP, Terminator)는 65.5초와 68.0초였고 실제 화면에서 잰 값은 11에서 13ms였습니다. 한계로 WPF에서는 우클릭·호버·드래그가 백그라운드로 안 되고 브라우저의 일부 키와 단축키는 포커스 허락이 필요하며 raw 마우스 입력은 무시되고 관리자 권한 앱은 에이전트도 관리자 권한이어야 하며 Windows 전용이고 라이선스는 PolyForm Shield 1.0.0입니다.

원문보기