Pymcpautogui

🚀 PyMCPAutoGUI 🖱️⌨️🖼️ - MCPを通じたグラフィカルユーザーインターフェイス自動化

あなたのAIエージェントの能力をさらに高めましょう！ ✨ PyMCPAutoGUIは、あなたのAIエージェント（CursorなどのMCP互換環境）とコンピューターのグラフィカルユーザーインターフェイス（GUI）の間に架ける橋となります。エージェントが画面を見ることができ、マウスとキーボードを操作し、ウィンドウと対話できるようになります。人間のユーザーと同じです！

面倒な手動のGUIタスクをやめ、AIに重い作業を任せましょう 💪。繰り返しのアクションの自動化、GUIのテスト、強力なAIアシスタントの構築に最適です 🤖。

🚀 クイックスタート

PyMCPAutoGUIは、あなたのAIエージェントとコンピューターのGUIの間に橋を架けます。これにより、エージェントは画面を見ることができ、マウスとキーボードを操作し、ウィンドウと対話できます。

✨ 主な機能

• エージェントがMCPプロトコルを通じて直接PyAutoGUIとPyGetWindowの機能を呼び出せるようにする。
• 完全に非侵入的な設計で、基盤となるライブラリを変更しない。
• マルチスレッド処理をサポートし、安定した動作を保証する。
• 詳細なログ記録とエラー処理メカニズムを提供する。
• さまざまなニーズに合わせてカスタム設定をサポートする。

📦 インストール

pip install pymcpautogui

🔧 技術詳細

PyMCPAutoGUIは以下のような設定可能なパラメータを提供します。

💻 使用例

基本的な使用法

# 基本的なマウス操作
@PyMCPAutoGUI move_to(x=100, y=200)
@PyMCPAutoGUI click(button='left')
@PyMCPAutoGUI drag_to(x=300, y=400)

# キーボード入力の例
@PyMCPAutoGUI write(text='Hello AI!', interval=0.1)
@PyMCPAutoGUI hotkey('ctrl', 'c')

# ウィンドウ管理
@PyMCPAutoGUI get_all_titles
@PyMCPAutoGUI activate_window(title='Notepad')
@PyMCPAutoGUI minimize_window()

# スクリーンショット機能
@PyMCPAutoGUI screenshot(filename='snapshot.png')

📄 ライセンス

このプロジェクトはMITライセンスの下でライセンスされています。詳細については、LICENSE ファイルを参照してください。

PyMCPAutoGUIを使って、あなたのAIエージェントがコンピューターとよりスマートに対話できるようにしましょう！ 😄