איך לשאול AI על תמונה או צילום מסך ולבדוק מה הוא קרא

כדי לשאול AI על תמונה, צרפו תמונה ברורה של דבר אחד, בקשו ממנו להעתיק מילה במילה את מה שהוא רואה לפני שהוא עונה, ובדקו את ההעתקה בעצמכם. הרבה תשובות שגויות מתחילות ביום, במספר או ביחידה שנקראו לא נכון, ולא בחשיבה שגויה.

המדריך עוסק בתמונה, בהנחיה, בבדיקה ובמה שהאפליקציה שולחת, לא ביצירה או בעריכה של תמונות. Mono מבית Reunified מקבל תמונות בצ׳אט, אבל הוא עדיין לא זמין (הצטרפו לרשימת ההמתנה), אז השתמשו בשיטה הזאת עם כל עוזר שמקבל תמונות.

1. החליטו אם תמונה היא הקלט הנכון

תמונה עוזרת כשהפריסה נושאת משמעות: שלט רחוב, טופס נייר, תרשים או חלון שגיאה שאי אפשר להעתיק ממנו. כשיש לכם את הטקסט או הקובץ המקורי, השתמשו בהם במקום בתמונה. בטקסט מועתק אין טעויות קריאה.

אל תסמכו על AI בזיהוי פטרייה, כדור תרופה או כל דבר שבו טעות עלולה לפגוע במישהו. שאלו אדם מוסמך.

הדוגמה במדריך בדויה. אתם רוצים לחנות ביום ראשון מ־10:00 למשך שלוש שעות, ליד שלט שכתוב עליו:

2 HOUR PARKING
08:00-18:00 MON-SAT
ZONE B PERMIT HOLDERS EXCEPTED

כלומר: חניה לשעתיים, 08:00-18:00, משני עד שבת, ובעלי תו חניה של אזור B פטורים.

2. הכינו את התמונה

לפני שאתם מצלמים או שולחים את התמונה, בדקו:

• נושא אחד: חתכו את התמונה כך שתכלול רק את השלט, החלון או השורה בטבלה שאתם שואלים עליהם.
• תאורה וזווית: בלי השתקפויות, והמצלמה ישר מול הטקסט.
• מסכים: צלמו צילום מסך, לא תמונה של המסך.
• פרטים של אנשים אחרים: חתכו או כסו פנים, שמות ולוחיות רישוי.

תמונות מהטלפון יכולות גם לשמור את המיקום שבו צולמו. המדריך של Apple למטא־נתוני מיקום ב״תמונות״ מראה איך להסיר אותו ב־iPhone: פתחו את התמונה, בחרו ״עוד״, ואז ״שינוי המידע״, ״שינוי המיקום״ ו״ללא מיקום״. כדי שתמונות חדשות לא ישמרו אותו, הגדירו את ״הגדרות״ > ״פרטיות ואבטחה״ > ״שירותי מיקום״ > ״מצלמה״ ל״אף פעם״. ב־Android, Google Photos לא יכול להסיר מיקום שהמצלמה הוסיפה, אז כבו את הגדרת המיקום של המצלמה, למשל ״שמירת מיקום״ (Save location), לפני שאתם מצלמים.

רשימת הבדיקה לפרטיות ב־AI עוזרת לכם לבדוק מי מקבל את מה שאתם שולחים.

3. בקשו העתקה של הטקסט לפני התשובה

צרפו את התמונה ובקשו לראות קודם מה העוזר קרא. אחרת לא תוכלו לדעת אם התשובה נבעה ממילה שנקראה לא נכון:

First, transcribe every word and number on the sign exactly as written.
Write [unreadable] for anything you can't read with confidence.
Then answer: can I park here on Sunday from 10:00 for three hours?
Quote the line your answer depends on.

ההנחיה מבקשת להעתיק כל מילה ומספר בשלט בדיוק כפי שהם כתובים, לכתוב [unreadable] בכל מקום שאי אפשר לקרוא בביטחון, ורק אז לענות אם אפשר לחנות כאן ביום ראשון מ־10:00 למשך שלוש שעות, עם ציטוט של השורה שהתשובה נשענת עליה.

השורה המצוטטת אומרת לכם איזה חלק בתמונה לבדוק.

4. בדקו מה ה־AI קרא

הגדילו את התמונה המקורית, לא את התצוגה המקדימה בצ׳אט. השוו כל פריט שיכול לשנות את התשובה:

בהעתקה הראשונה נכתב ״MON-SUN״, ולכן התשובה אמרה ששלוש שעות יחרגו מהמגבלה. ויכוח עם ה־AI עלול להביא לכם התנצלות וניחוש נוסף. אם אתם מצליחים לקרוא את השורה, הקלידו אותה בצ׳אט. אם לא, או בכל מה שסומן [unreadable], צלמו שוב מקרוב יותר ובלי השתקפות. כאן, בצילום החוזר נקרא ״MON-SAT״, והתשובה משתנה: לא מופיעה מגבלה ליום ראשון.

בתמונה עמוסה, כמו תפריט מלא, שאלו על אזור אחד בכל פעם. ימים, שעות, נקודות עשרוניות, יחידות ותווים דומים (0 ו־O, 1 ו־l) דורשים את הבדיקה הקפדנית ביותר. מדריך בדיקת העובדות מחיל את אותן בדיקות על תשובות טקסט.

5. בדקו מה האפליקציה שולחת

צירוף קובץ לא תמיד אומר שה־AI קורא אותו. כדי לבדוק, בקשו ערך מדויק מהעמוד השני של הקובץ והשוו. אם התשובה לא מצטטת אותו נכון, ייתכן שהתוכן לא הגיע.

ב־Mono, תפריט הפלוס בצ׳אט מציע ״תמונות״ ו״קבצים״, וב־iPhone וב־Android גם ״מצלמה״. זה מה ש־Mono שולח בכל מקרה:

בקובץ PDF, הדביקו את הטקסט שאתם צריכים, או צרפו צילום מסך של העמוד. אם אתם משתמשים במודל טקסט משלכם, Mono שולח את התמונות למודל הזה, ויכול להיות שהוא לא מקבל אותן. המדריך לחיבור מודל מותאם מראה מה לבדוק.

6. שמרו את התוצאה ואמתו אותה

שמרו את ההעתקה שבדקתם עם המסקנה והתאריך: ״בשלט כתוב 08:00-18:00 MON-SAT. לא מופיעה מגבלה ליום ראשון. נבדק ב־11 באוקטובר.״ אם אתם מייצאים צ׳אט של Mono ל־Markdown, התמונה מוחלפת בסימן מקום ״תמונה״, כך שההעתקה שלכם היא ששומרת את התוכן. מדריך ייצוא הצ׳אט מפרט מה עוד הקובץ כולל.

כשלטעות יש מחיר, כמו קנס או מועד שהוחמץ, אמתו מול המקור הרשמי. בדוגמה, אלה כללי החניה של העירייה.

אחר כך מחקו תמונות שאתם כבר לא צריכים, במיוחד כאלה שמופיעים בהן אנשים אחרים או כתובות. Mono עדיין לא זמין, אבל אפשר להצטרף לרשימת ההמתנה ולהשתמש בשיטה הזאת בצ׳אט שלו כשתקבלו גישה.