सीमित कार्रवाई लूप से AI द्वारा Android ऐप्स नियंत्रित करें
Android ऐप्स के AI नियंत्रण के लिए सुरक्षित आर्किटेक्चर: स्क्रीन देखें, एक कार्रवाई चुनें, स्थिति की पुष्टि करें, ड्रिफ्ट से रिकवर करें, और राइट्स को गेट करें।
AI से किसी Android ऐप को नियंत्रित करने के लिए, रीज़निंग मॉडल को एक प्रतिबंधित डिवाइस एक्ज़ीक्यूटर के साथ जोड़ें। ऐप को अनुमति सूची में रखें, एक छोटी जेस्चर शब्दावली उपलब्ध कराएं, हर कार्रवाई के बाद स्क्रीन की पुष्टि करें, और पब्लिशिंग, भुगतान, डिलीशन, या अन्य सुरक्षित राइट्स से पहले स्वीकृति अनिवार्य रखें।
कार्रवाई शब्दावली डिज़ाइन करें
सिमेंटिक कार्रवाइयों को प्राथमिकता दें, जैसे दिखने वाले टारगेट पर टैप करना, फ़ोकस्ड फ़ील्ड में टेक्स्ट डालना, सीमित दूरी तक स्क्रॉल करना, वापस जाना, और Melaya पर लौटना। मॉडल को सामान्य कमांड चैनल न दें जब एक छोटी शब्दावली से काम पूरा हो सकता हो।
स्थिति का इस्तेमाल करें, याद रखे गए निर्देशांकों का नहीं
तय निर्देशांक अलग-अलग डिवाइस, फ़ॉन्ट साइज़, कीबोर्ड स्थिति, बैनर, और ऐप रिलीज़ के बीच टूट जाते हैं। कार्रवाई को मौजूदा स्क्रीन पर आधारित रखें और गंतव्य की पुष्टि करें। निर्देशांक अंतिम एक्ज़ीक्यूशन प्रिमिटिव हो सकते हैं, लेकिन उन्हें वर्कफ़्लो का सोर्स ऑफ़ ट्रुथ नहीं होना चाहिए।
अंतिम कार्रवाई को सुरक्षित रखें
ड्राफ्टिंग को सबमिशन से अलग रखें। एजेंट को नेविगेट करने और कंटेंट तैयार करने दें, फिर सुरक्षित बटन एक्टिवेट होने से पहले सटीक पेलोड को समीक्षा के लिए तैयार करें। समीक्षित टेक्स्ट और निष्पादित परिणाम रिकॉर्ड करें।
- अनुमति-प्राप्त ऐप और खाता
- सटीक टारगेट या गंतव्य
- समीक्षक को दिखने वाला ड्राफ्ट
- स्वीकृत, संपादित, या अस्वीकृत करें
- कार्रवाई के बाद पुष्टि
अक्सर पूछे जाने वाले प्रश्न
क्या AI प्राकृतिक भाषा से Android फ़ोन नियंत्रित कर सकता है?
हां, जब अनुरोध को सीमित डिवाइस कार्रवाइयों में बदला जाए और मौजूदा स्क्रीन पर्याप्त एक्सेसिबल स्थिति दे। भरोसेमंदी ऐप और वर्कफ़्लो के अनुसार अलग-अलग होती है।
हर टैप के बाद पुष्टि क्यों करें?
एक टैप चूक सकता है, अलग टारगेट खोल सकता है, अनुमति डायलॉग ट्रिगर कर सकता है, या देर से हो सकता है। पुष्टि यह सुनिश्चित करती है कि अगली कार्रवाई गलत स्थिति के खिलाफ न चले।
क्या एजेंट अपनी ऐप अनुमति सूची बदल सकता है?
इसे ऐसा नहीं करना चाहिए। अनुमति नीति एजेंट के अपने कार्रवाई अधिकार क्षेत्र से बाहर ही रहनी चाहिए।
