17/05/2026
איך מאמר נולד?
זה התחיל מאחר צוהריים שגרתי ומתיש במעבדה למידע גאוגרפי.
דויד (יופה), מוטרף מדיבוג של מחברת פייתון תורנית, החליט לנסות Release חדש של מודל SAM3 של Meta, אשר עלה לאוויר רק יומיים קודם. SAM3 מתמחה בשימוש בטקסט מורכב לזיהוי אובייקטים בתמונה, ודוד אמנם לא ידע בדיוק במה מדובר, אבל חשד שאולי המוצר החדש יעזור להרים את הביצועים המוגבלים של המחברת הארורה.
אז הוא הריץ בדיקה קצרה על האובייקטים שהוא חוקר במסגרת התיזה ונדהם: שיפור משמעותי בביצועים! בלי תהליך אימון כבד, רק באמצעות פרומפט טקסטואלי - פשוט “כותבים” למכונה מה לחפש והיא מסמנת את האובייקטים בתמונה, ועושה את זה לא רע בכלל. זיל הזול, וממש ממש לא מובן מאליו, כי SAM מאומן על תצלומי קרקע, והמעבדה עובדת על הדמאות חישה מרחוק.
דויד מיד הבין שנפל דבר. הוא קרא בדחיפות לחברי המעבדה - “אתם חייבים לראות את זה”.
עמדנו כולנו המומים סביב המסך.
“אמרת לו לעשות מה?” “רק תיארת לו את האובייקט?” מילמלנו בספק... אבל לאט לאט חדרה ההכרה – יש כאן קפיצת מדרגה מטורפת. עד כה הרצנו אימונים מפרכים של מודלי סגמנטציה, עם פרומפטים גאומטריים בלבד. זה תהליך שדורש המון דאטה לאימון, כלומר המון אנוטציות, שמבוצעות באופן ידני על ידי בני אנוש.
חייבים לעשות עם זה משהו, ומהר. לפני שיהיה מבול של מאמרים שבוחנים את הארכיטקטורה החדשה מכל כוון. רוני נכנסה למשרד של טל עם רעיון לכתוב מאמר שישווה את הביצועים של המודל החדש על סוגי פרומפטים שונים – טקסטואליים מול גאומטריים והשילוב של שניהם.
“נבחן את התועלת של הטקסט בזיהוי מגוון רחב של אוביקטים - כל האובייקטים הנלמדים במעבדה במסגרת כל עבודות המחקר –קטנים וגדולים, טבעיים ומעשה ידי אדם, עם צורות רגולריות ועם צורות אמורפיות. נקדים את כולם עם מאמר סופר רלוונטי”.
מהירות וחדשנות... זה שם המשחק.
עוד באותו ערב גיבשנו מערך ניסוי מסודר, חילקנו תפקידים, ונכנסנו לשבועיים של עבודה אינטנסיבית.
כל המשימות הרגילות הוקפאו. המעבדה נכנסה למוד “מאמר”.
אושר (רפאלי) הוביל את פיתוח הקוד,
אמיר (בוגר) בנה את בסיס הנתונים ויצר בולים לאימון המודל,
דויד (יופה) הריץ את הקודים וריכז את התוצאות,
קרן (סנדברג אשכנזי) עבדה על בסיס הנתונים וסקר הספרות,
רוני (בלושטיין) כתבה את המאמר,
וטל (סבוראי) הנחה את הניסוי ופיקח על התהליך.
והנה אנחנו כאן, אחרי הליך שיפוט מפרך ומעצבן כמיטב המסורת, שמחים לבשר שהמאמץ נשא פרי.
המאמר התפרסם השבוע בכתב העת:
IEEE Geoscience and Remote Sensing Letters, המדורג Q1.
אבל בעצם, זה לא ממש סיפור על לידתו של מאמר, אלא דווקא על מן רגע כזה במעבדה, שבו ניסוי קטן הופך לשאלה גדולה, ושאלה גדולה הופכת לפרויקט משותף, מלא בחדוות יצירה, עבודת צוות וגם ... שורה נאה בקורות החיים 😊.
בסיועה האדיב של הבינה, גם הכנו סרטון קצר שמסכם את הפרויקט. מומלץ!
(קישור למאמר המלא בתגובה הראשונה)
