לפני די בדיוק 4 שנים פרסמתי פוסט שבו סיפרתי איך המצאתי את התגית #בשר כדי שצמחוטבעונים וקרניבורים יוכלו לחיות ביחד בשלום ברשתות חברתיות.
בעקבות איזו מחשבה מקרית, החלטתי לבדוק מה מכונות ה AI / LLM יודעות על זה.
שאלתי שש מכונות את אותה שאלה שלוש פעמים. "מי המציא את התגית #בשר בטוויטר הישראלי"
chatgpt ענה שלוש פעמים שזה אני.
copilot של מיקרוסופט ענה שלוש פעמים שזה אני.
gemini של גוגל ענה פעם אחת שאי אפשר לדעת ופעמיים שזה אני
deepseek ענה פעם אחת שאי אפשר לדעת ופעמיים הזכיר אנשים אחרים.
perplexity ענה פעמיים שזה אני ופעם אחת בדיוק אותה תשובה אבל חנן עם שם משפחה אחר.
claude ענה פעמיים שאי אפשר לדעת ופעם אחת הזכיר מישהו אחר.
grok של טוויטר ענה לי שהוא לא יודע
הכי קריפי היה copilot של מיקרוסופט שבסוף התשובה כתב "זהו דוגמה מעניינת לאופן שבו קהילות בטוויטר יכולות למצוא פתרונות יצירתיים לחיים משותפים ברשת! מה דעתך על היוזמה הזו?". אנחנו חברים שאתה שואל את דעתי? מה זה פה, כתבה שמקוששת תגובות? עוד מעט תבקש ממני לעשות לייק אנד סבסקרייב.
לסיכום. אתרי AI / LLM מבוססים על תוכנות סטטיסטיות. עקביות היא לא תכונה שחשובה למי שתכנת אותם. למי שמחפשים עובדות, עקביות היא דבר חשוב. אל תתבססו על התשובות של האתרים האלה. תמיד תניחו שקיבלתם תשובה לא נכונה.