מיקרוסופט השיקה זה עתה פיצ'ר חדש ב-Copilot Studio בשם "שימוש במחשב".
זה מאפשר לסוכני בינה מלאכותית לבצע פעולות על המסך שלך - כמו לחיצה על כפתורים, הקלדה בשדות, גלילה בדפי אינטרנט ומעבר בין אפליקציות.
אז אם התהליך שלכם פועל על פני חבורה של אתרים, חלונות קופצים וכלים חצי-עובדים ללא API - Copilot יכול עכשיו להתמודד עם זה.
📣 מה מיקרוסופט אומרת
מיקרוסופט מתארת זאת כשדרוג המאפשר לסוכנים לקיים אינטראקציה עם ממשקי משתמש גרפיים - מה שמאפשר להם להשלים משימות על ידי סימולציה של לחיצות עכבר וקלט מקלדת.
הם אומרים שזה נותן לסוכנים את היכולת "לפעול על פני מערכות חסרות ממשקי API או אינטגרציות ישירות".
במילים אחרות: אם התוכנה שלכם לא מדברת עם שום דבר, Copilot עדיין תעשה את העבודה.
הם גם מציינים שהמערכת משתמשת בהיגיון מעמיק כדי להבין מה מופיע על המסך ולהחליט כיצד להמשיך - גם כאשר הפריסה משתנה.
💬 במילים אנושיות
משמעות הדבר היא שסוכן הקופיילוט שלכם לא צריך שהכל יהיה מושלם.
זה יכול:
זיהוי דפי כניסה, גם אם הכפתור זז
מלאו טופס, גם אם התוויות מוזרות
השלם משימות מרובות שלבים, גם כאשר צץ משהו בלתי צפוי
מַדוּעַ?
כי הוא אומן לזהות דפוסים - ויכול להבין מה לעשות על סמך מה שראה בעבר.
זה לא משנן מסכים. זה קורא אותם.
הנה איך זה משתווה:
מְשִׁימָה | בוטים אוטומציה ישנים | התכונה החדשה של Copilot |
צריך פריסה מדויקת | ✅ כן | ❌ לא |
מטפל בשינויים חזותיים | ❌ הפסקות | ✅ ממשיך הלאה |
עובד ללא API | ❌ לא יכול | ✅ יכול |
מבין דפוסים | ❌ לא | ✅ כן |
מטפל בהפתעות (חלונות קופצים, עיכובים) | ❌ נתקע | ✅ מנסה דרך אחרת |
זו לא בינה מלאכותית שמחכה להוראות ברורות.
זה מתגלגל עם הבלגן.
🧪 מה שאף אחד לא אומר בקול רם: כאן אלגוריתמים של מחקר עמוק מתחילים להשפיע
עד כה, אלגוריתמים של מחקר מעמיק שימשו בעיקר ליצירת מסמכים חכמים - כתיבת דוחות, איסוף עובדות, סיוע ביצירת תוכן עתיר מחקר.
ראינו ספקים מקשטים את זה עם כותרות כמו "בינה מלאכותית ברמה אקדמית" או "צ'אטבוט עם תואר".
זה נשמע מרשים - אבל זה לא הראה מה אלגוריתם כזה באמת יכול לעשות.
עדכון זה משנה את זה.
כי הפעם, זה לא משמש כדי לכתוב על משהו - זה משמש כדי לעשות משהו.
זה לוחץ
זה סוג
הוא מנווט בין מערכות ללא הוראות
זה עובד גם כשהפריסה שונה בכל פעם
זה אפשרי מכיוון שאלגוריתם זה עובד מתבניות - לא מפקודות מחמירות.
זה לא צ'אט ברמה הבאה.
זה ניווט.
זוהי פעולה דיגיטלית.
בוטים ישנים היו זקוקים לתוויות מושלמות ומסכים מושלמים לפיקסלים.
זה לא.
זאת ההשפעה האמיתית.
מה זה עושה | שימוש באלגוריתמים עמוקים במסמכים/צ'אטים | השימוש החדש של מיקרוסופט ב-Copilot Studio |
כתיבה או סיכום של תוכן מחקר | ✅ כן | ❌ לא |
ניווט באתרי אינטרנט ואפליקציות | ❌ לא | ✅ כן |
עבודה ללא נתונים מובנים (API) | ❌ לא בנוי לזה | ✅ מטפל בזה |
הסתגל לשינויים במסך | ❌ לא רלוונטי | ✅ יכולות ליבה |
לפעול על סמך מידע בזמן אמת | ❌ לא יכול | ✅ האם |
כאן אנחנו רואים שינוי אמיתי - כי זה סוף סוף עושה את העבודה, לא רק מתאר אותה.
🔚 שורה תחתונה
עלות: כלול ב-Microsoft Copilot Studio
זמינות: זמין כעת
קרא עוד.
אם תהליך העבודה היומיומי שלכם כולל תוכנה מכוערת, פורטלים מוזרים ורגעים של "למה הכפתור הזה שם?" - Copilot אולי סוף סוף יוכל לעזור.
🧊 פרספקטיבה של צוות האור הקפוא
כולם עסוקים בלדבר על התכונה.
כן, זה שימושי.
כן, זה לוחץ על כפתורים ושולח חשבוניות.
אבל אנחנו בוחנים את האלגוריתם - כי זה החלק שאף אחד לא מדבר עליו מספיק בקול רם.
זהו אלגוריתם מחקר מעמיק - והוא עובד מחוץ למעבדה.
זה לא סיכום. זה לא כתיבה.
זה בעצם עושה את הדברים שאנחנו שונאים לעשות:
הגשת חשבוניות
כניסה למערכות מגושמות
העלאת קבצים דרך פורטלים שבורים
סיום הטמעה באפליקציות שאינן מתחברות
זו התקדמות אמיתית.
ואנחנו כאן בשביל זה.
אבל הנה הסיבה שאנחנו באמת שמים לב:
לפני מספר ימים, גוגל נתנה למוציאי אתרים אפשרות בחירה -
תנו לנו לאמן את אלגוריתם המחקר המעמיק שלנו על התוכן שלכם... או בטלו את הסכמתכם.
ונחשו מה?
רובם אמרו שלא.
האסימון של גוגל ירד - מהר.
זהו סוג ההשפעה שיש לאלגוריתמים האלה כשהם לא מקבלים גישה.
עכשיו הפוך את זה.
הגרסה של מיקרוסופט נמצאת בשטח, בתנועה, ומשתפרת - כי אנשים משתמשים בה.
והנה האמת הלא נעימה:
כאשר אנו משתמשים בכלים אלה, אנו חלק מההכשרה הזו.
אנחנו לא אומרים שזה טוב או רע.
אנחנו אומרים: זה התפקיד שמשתמשים ממלאים בבינה מלאכותית כרגע - בין אם נודה בכך ובין אם לא.
מיקרוסופט לא הכניסה את המודל הזה באופן אקראי ל-Copilot Studio.
ואנחנו לא מאמינים שהם אימנו את זה בבידוד.
אם אנחנו טועים? סליחה, מיקרוסופט.
אבל אנחנו לא חושבים שאנחנו כאלה.
אז לא - אתה לא חייב להסכים.
אתה לא חייב להשתתף.
אבל אנחנו נמשיך להדגיש את מה שאף אחד אחר לא אמר:
ההתקדמות מגיעה מהאלגוריתמים שמותר להם לשחק.
וזה משחק - חזק.
אנחנו מתרגשים.
כי זו לא עוד עלייה בפריון.
זוהי דרך חדשה לבצע דברים.
ואנחנו עוקבים אחר האופן שבו האלגוריתם הזה מתפתח אצל כל הספקים הגדולים.