» «
ווטסון
האם מחשב יכול להמציא מתכונים?



כמה שהדבר נראה אולי סתמי, המצאת מתכונים היא אחד הדברים המרתקים והקשים שמבצע המוח האנושי. אם זלזלתם בשף ההוא מהטלוויזיה או בחבר-טבח היצירתי שלכם, אז כדאי שתבינו שהמצאת מתכון היא פעולה מורכבת מאד. רק כדי שנדע - בניגוד ליצירה אמנותית שניתן ליהנות ממנה או להעריך אותה, גם אם היא מאד לא נעימה לנו, המתכון הלא-טעים יישפט אצלנו לחומרה בכל מקרה...

"ווטסון" מחשב העל של חברת IBM הוא מחשב חכם מאד, שזכה לפרסום עולמי לאחר שניצח מתחרים אנושיים בשעשועון ידע בטלוויזיה. אבל האם הוא יכול גם להיות יצירתי? - אם פעם יצירתיות נחשבה לתכונה של בני-אנוש ול"מותר האדם", הרי שההנחה הרווחת כיום בקרב מדעני המחשב היא שיצירתיות תושג בסופו של דבר בתוכנות ובמחשבים המתקדמים שמפותחים ויפותחו בעתיד, מחשבי-על שמצוידים בבינה מלאכותית.

אנשי חברת IBM התמקדו לאחרונה בתחום שהם מכנים "הבישול הקוגניטיבי". מרב המאמצים שלהם התרכז ביכולת לגרום לווטסון להמציא מתכונים טעימים. במסגרת הלימוד שווטסון יודע לבצע, הוא סרק מגוון עצום של מתכונים ורכיבי מזון שונים, ממטבחים רבים מכל קצוות תבל. ידע זה הצטרף לידע מדעי רב בתחום הכימיה, תורת המזון, פיזיולוגיה של בלוטות הטעם והעדפות אנושיות של טעמים.

בשלב הבא החל ווטסון להמציא מנות מקוריות משלו. אחרי זה יצא ספר מתכונים עם 65 מתכונים שהמציא ושנוסו בהצלחה על ידי שפים.

בכל מקרה, כל הפיתוח של מה שכבר זכה לשם "בישול קוגניטיבי" הוא ניסיון מרתק ליישם את הלמידה החישובית בתחום שבו היא מודגמת היטב ולהוציא מהמחשב יצירתיות, תכונה שעד ימינו הייתה שמורה רק לבני-אדם. דרך תחום שמוכר לכל אחד מאיתנו, מטבח ואוכל טוב, מוכיחים בחברת יבמ שגם בשלל תחומים אחרים ווטסון יאפשר הישגים מדהימים לא פחות ואולי אף הרבה יותר.


הנה אוטובוס שמחלק מנות שהמציא ווטסון ומתעניין בתגובות הציבור הרחב:

http://youtu.be/yrfMcNE0y9s


ווטסון ממציא שלל מתכונים חדשים:

https://youtu.be/CciMiJJrCd8


אם זה כך אז אין פלא שכבר פותח שף רובוטי דוגמת זה:

https://youtu.be/SNy6fEuPWbc


וגם בארץ - הנה תחרות בין שפית לצ'אט GPT (עברית):

https://youtu.be/8oxHS5qemAE?long=yes
אמן
מה עושה האמן וכיצד הוא יוצר אמנות?



צייר, פסל, מוזיקאי, שחקן או צלם - אלה הם חלק מסוגי האמנים הקיימים. האמן הוא מישהו שיוצר יצירה אמנותית.

האמן הוא בעל כישרון אבל אמנים בדרך כלל לומדים כיצד ליצור בתחום האמנותי שבו הם מתעניינים ויוצרים. יש מעטים שמתגלים כגאונים בתחום האמנותי, אותו לא למדו מעולם ובכל זאת הצליחו ומצליחים, אבל הם היוצאים מן הכלל.

בדרך כלל הכישרון אינו מספיק כדי להצליח, כי צריך להכיר את האמנות שבה רוצים ליצור, טכניקות שונות שבה ניתן ליצור, סגנונות וז'אנרים בתחום, דרכים מעניינות שבה יצרו ויוצרים אמנים גדולים בתחום האמנותי ועוד.

החשיפה לאמנות נעשית בדרך כלל בגיל צעיר. היא מתרחשת או נכון יותר לומר - ראוי שתתרחש, בבית הספר, בחוגים לאמנות, בביקורים במוזיאון, תיאטרון, מופעי מחול או קונצרטים וכדומה. רק כך יכול להיווצר הקליק שבין הילד והאמנות שמרתקת, מלהיבה ומושכת אליה.



שאלות קטנות:
=========
יש לך חלום להיות אמן? באיזה תחום? האם ידוע לך מה צריך ללמוד כדי לעסוק בזה?


הנה אמנים שונים עושים ביחד אמנות ברחוב (עברית):

http://youtu.be/W67luKdwCTc


לארי, אמן אוטיסט שמצא במחשב אפשרות לבטא את עצמו ובציור נחמה למצבו:

http://youtu.be/_ECrXMfHffM


רקדן שהחל לרקוד לאחר תאונה שגרמה להתפוצצות של צינור מים בתל אביב:

http://youtu.be/RXqsJ8awNQk


דוגמה למוסד בו לומדים אמנות (עברית):

https://youtu.be/gVNJmbni-uE


בחיוך שנון - למה ואיפה לא ללמוד אמנות? (עברית)

https://youtu.be/1fav5hVMi0I


ויש גם אמנים מעטים, שהם בכלל אנשי טכנולוגיה ומאוד מיוחדים - שיחת טלוויזיה על אחד כזה (מתורגם):

https://youtu.be/N0Xv3yPdG5o?long=yes
AARON
איזה מחשב מציג יצירות במוזיאון?



ציור ויצירה אמנותית בכלל הן פעולות מורכבות למחשב ולכן מחשבים המסוגלים לצייר בעצמם הם תופעה יחודית. את המחשב AARON מפתח האמן האמריקאי הרולד כהן כבר מעל 30 שנה, במעבדה לאינטליגנציה מלאכותית של אוניברסיטת סטנפורד. הוא תוכנת כך שיוכל לצייר תמונות בסגנונות ציור מגוונים. למחשב, סוג של רובוט מצייר, הוזן ידע אמנותי שמאפשר לו לצייר עצמים שונים, כמו בני אדם, צמחים ודומם. למחשב תוכנתו גם אלגוריתמים וכללים אמנותיים שבהם מצוייד הצייר, כמו העובדה שבסיסו של עצם רחוק הוא גבוה מבסיסו של עצם קרוב, שהוא קטן יותר מהקרוב, מוסתר על ידיו ועוד. בנוסף הגדיר האמן כללים שלקוחים מניסיונו כצייר ומורה פעיל לציור, בצירוף ידע מהתחום בתחומים כמו צבע, קומפוזיציה ופרספקטיבה.

יש ויכוח אמיתי מה מידת היצירתיות של המחשב הזה, שכן את היכולת לבצע הוראות שנלמדו יכול לבצע כל תלמיד ציור והרי אמן הוא אדם שמעבד את הידע שברשותו, מוסיף מהיצירתיות הטבעית שלו ופורץ את גבולות מה שכבר נעשה. ועדיין, הציורים של AARON הם כה מרשימים ומעוררי עניין, שחובבי אמנות רבים לא מצליחים להבחין ביניהם לבין ציורים שנעשו על ידי ציירים אנושיים. כיום מוצגים רבים מהם בתערוכות ובמוזיאונים בכל העולם ורבים מהם אף נרכשו במהלך השנים בידי אספני אמנות.


הנה הרולד כהן מספר על AARON:

https://youtu.be/MwHQx9BrHQc


הרצאה של הרולד כהן על העבודות של AARON:

https://youtu.be/RyIgu_GSS5g


הנה ציור שנוצר על ידי התוכנה של AARON:

https://youtu.be/3PA-XApZkso


דיון על המחשב המצייר AARON:

https://youtu.be/boKs9JzI1f4
HPR-4
איך רובוטית HPR-4 רוקדת ושרה?



Miim הוא הכינוי של רובוט HPR-4C. מדובר בנערה הומנואידית, רובוטית שיודעת לעשות דברים מדהימים כמו לרקוד ולשיר. זוהי אנדרואידית יפה שמצוידת ביכולות תנועה וסינטזה קולית שמאפשרות לה להיות ממש דמות שאפשר לחבב.

לרקוד זה יפה אבל איך היא שרה?

ובכן, הסינתסייזר הקולי שלה מצויד לא רק ביכולת להשמיע טקסט בדיבור, גם אל הדיבור רובוטי, אלא ממש לשיר אותו. כלומר, כל הברה מושרת על ידה בגובה אחר, כמו בזמרה אנושית.


הנה סרטון מרתק שמציג את HPR-4 שרה ורוקדת עם מלוות אנושיות:

http://youtu.be/xcZJqiUrbnI

בינה יצירתית

IAMUS
מהו המחשב המלחין?



המחשב IAMUS הוא מחשב שמלחין מוסיקה. IAMUS שהתוכנה שבו יוצרת מנגינות, הרמוניה ומרקמים מוסיקליים נעימים לאוזן, נבנה בידי מדענים באוניברסיטה של מאלגה בספרד.

אם היה מבחן טיורינג ליצירתיות, מעניין אם המוסיקה של המחשב יאמוס הייתה מסוגלת להטעות אנשים מיומנים לחשוב שהיא נכתבה בידי בני אדם. כלומר, האם מלחין וירטואלי היה מצליח להתחזות למלחין בן אנוש..

כמובן שיאמוס המחשב אינו יצירתי כמו בן-אנוש. בשלב הזה הוא בעיקר יודע לבצע את פעולת ההלחנה, על פי הכללים ה"נכונים" שאותם יודע כל מלחין מיומן שלמד וקיבל השכלה מוסיקלית. לגבי היופי והמקוריות של המוסיקה שיוצר המחשב הזה, יש מחלוקת רבה עד כמה הוא "יצירתי".


הכירו את מבחן לאבלייס שבוחן אם מכונה אכן ממציאה רעיונות מוסיקליים בעצמה:

https://youtu.be/Rh9vBczqMk0


למידת מכונה שמסייעת ליוצרים לחבר מקצבים ומהלכים בהיפ הופ:

https://youtu.be/mOjWyRqiDds


הבה נחקור את תוכנת IAMUS של המלחין הממוחשב:

https://youtu.be/KhiupLtyibs


הנה יצירה של יאמוס לקלרינט סולו:

https://youtu.be/FCsbEY9pxTU


להרכב קאמרי:

https://youtu.be/Uq3iKbCNDCM


קטעים מהתקליטור הראשון של יאמוס עם מוסיקה שלו:

https://youtu.be/cv4y_BRJokM


ומדריך מגניב להלחנה בעזרת קבצי MIDI שיוצר ChatGPT:

https://youtu.be/tV82Wy-tXRE?long=yes
רובוט הכינור
מהו הרובוט המנגן?



הנגינה בכינור אינה דבר קל. את זה יספר לכם כל מי שלמד פעם כינור, גם אם עזב אחרי מספר שיעורים.. רובוט הכינור שחשפה חברת טויוטה היפנית בשנת 2007 הוא רובוט שמסוגל לנגן בכינור. אמנם רמת הנגינה שלו אינה גבוהה במיוחד, אבל הוא בהחלט מרשים ביכולות שאליהן הגיע כמכונה לומדת ומדגים לאיזו רמה ניתן להגיע עם רובוט מודרני.

קצת מצחיק שהרובוט הזה קצת לועג למשפט האלמותי של ממציא המושג "רובוט", הסופר קארל צ'אפק, שכתב "אל לה למכונת העבודה לרצות לנגן בכינור"..

הרובוט המנגן בכינור יודע לנגן גם בחצוצרה ובעתיד הנראה לעין רובוטים יוכלו לנגן ברמה גבוהה הרבה יותר ובכלים נוספים. בעזרת האינטיליגנציה המלאכותית הם יצליחו ודאי להגיע ללמידה קרובה עוד יותר ללמידה האנושית ולהגיע לרמת ביצוע יפה ביותר.


הנה סיפורו של הרובוט המנגן כינור:

https://youtu.be/IW9Mk0Wf3kQ


קטע יפני מביצועיו:

https://youtu.be/eXNhs9q-p_Y


ב"קונצרט" מול קהל:

https://youtu.be/49u8n27zrSQ


ועוד מיכולותיו:

https://youtu.be/yhGg6WhmBJI
וובוט 2
האם רובוט יכול לנגן בפסנתר?



בעולם שבו רובוטים עושים המון דברים מתוחכמים, זה כבר לא מפתיע שהם גם מנגנים בכלי נגינה. כמה רובוטים גם מנגנים פסנתר.

אחד המשוכללים שבהם, הרובוט וובוט 2 (WABOT-2), מסוגל היה לנגן עם תווים, על גבי פסנתר או אורגן. הוא הצליח לנגן בצורה מרשימה מאד, עם אצבעות מכניות שחוברו למוח ממוחשב וניגנו ישירות על הקלידים.


הנה וובוט 2 מנגן:

http://youtu.be/ZHMQuo_DsNU


עוד אחד:

http://youtu.be/Qms5NjbhzaQ


המתחרה שלו שמנגן עם להקת רובוטים שלימה:

http://youtu.be/HHcgTbs7_Os


תיאו טרוניקו, רובוט שלא מנגן באצבעות אלא עם הולוגרמות:

http://youtu.be/hXrNCak63u0


והנה הוא עם תזמורת:

http://youtu.be/U5rKjrQ3JoE
סטנדאפ
מהו הרובוט הסטנדאפיסט שיודע לשחק ולהצחיק קהל?



הרובוט הסטנדאפיסט שפותח בארה"ב פותח בהתחלה כשחקן תיאטרון. הוא השתתף בכמה מחזות של ממש ואז משהו קרה לו.. בחברה התקינו לו תוכנה לזיהוי פנים והוא החל להתייחס למי שעומדים מולו, לזהות את הבעת פניהם, את המחוות שלהם, את גילם והאם הם גבר או אישה ואז הוא מגיב בהתאם ונוהג באופן שמזכיר בני אנוש - הוא עוקב במבטו או מקשיב ומגיב למדברים איתו..

ואז הציע אחד מעובדי החברה שהרובוט יהפוך לבדרן, יספר בדיחות, ימתין עד שיסיימו לצחוק או למחוא כפיים ויגיב לקהל המגיב לו.

והבדיחות שמספר הרובוט הן כאב ראש לא קטן - אם סטנדאפיסט ובדרן רגיל מחבר בדיחות ו"פאנצ'ים" על דברים מצחיקים שקורים בחייו ועם משפחתו, הרובוט אינו יכול לעשות זאת. לכן בונים לו חוויות אחרות שיצחיקו את הצופים.

האמת היא שיש כבר כמה רובוטים מצחיקים בעולם והמפגש ביניהם יהיה בהחלט אחד הדברים המצחיקים (או המציקים) שיכול להיות.


הנה סרטון של הרובוט המשעשע בעולם כרגע:

http://youtu.be/iLjQZsypGv0


והנה הרובוטספיאן משחק תפקידים דרמטיים:

http://youtu.be/e2jbQ8IRVZA


המצאה ממוחשבת
האם מחשב יכול להיות ממציא?



המצאה, או יצירה ממוחשבת (Computer creation), על ידי מכונות יוצרות, או ליתר דיוק תוכנות שיוצרות, היא פנטזיה של רבים מהמפתחים.

אם מחשבים יוכלו להמציא וליצור דברים חדשים לחלוטין, יתכן שתהיה כאן מכפלה מטורפת, אם כל המהפכות, משהו שלידו ייראו המהפכה המדעית של 500 השנים האחרונות, המהפכה התעשייתית, המהפכה הטכנולוגית ומהפכת המידע והאינטרנט - כמו שלל משחקי ילדים משעשעים.

דמיינו מאות ואלפי מחשבים משוכללים במיוחד ש"יישבו" לפתור את הבעיות שעומדות בפני המין האנושי ויתמקדו במה שהממציאים והמדענים ניסו לעשות במשך מאות או אלפי שנים, מאז החלה התרבות האנושית וגם לפניה, בעידן הפרהיסטורי.

אז כן. מחשבים יכולים תאורטית להמציא וליצור. וזו תהיה אחת המהפכות הבאות בעולם המחשוב. היא תתרחש כשהמחשב יוכל ממש לחשוב וממש להמציא דבר מה חדש, פתרון לבעיה, משהו שלא קיבל הוראות כיצד לבצע, אלא שנבע מתהליך חשיבה שהוא הוביל, אולי אפילו יזם.

הרי כל ההתפתחות האנושית החלה כשאנו, בני האדם, התחלנו להשתחרר מאותן מגבלות ביולוגיות שמגבילות אותנו. כל המצאה שחררה אותנו ממגבלה אחרת, מעיקה ומקשה על חיים נוחים יותר, בריאים ומהנים יותר.

דוגמאות? - לא חסר. השימוש באש אפשר לנו להפוך את המזון לקל יותר לעיכול וטעים יותר. הקירור איפשר לו לשרוד זמן רב יותר ולשמש אותנו כשאנו צריכים אותו ולא רק כשהוא זמין לנו. הבגדים שחררו אותנו מהקור, החיות המבויתות היו מכפלת כוח לחקלאות, ייצור ותחבורה. החקלאות שימשה לייצור של מזון בכמויות שאפשרו את צמיחת האנושות ושחרור ממגבלות הליקוט, הבתים שימשו למגורים במקומות הפוריים ולא רק במקומות שבהם יש מערות וכך הלאה.

עוד? - הגלגל שימש לייצור של מכונות רבות כוח ובעלות יכולת מכנית מדהימה, הערים יצרו לנו בטחון רב יותר והגנה מפני השבט השכן או משודדי דרכים שישדדו את מזוננו. כתב שימש אותנו לתקשורת והעברת הידע האנושי לאחרים, או לשימורו ולהעברתו מדור לדור. הדפוס הפיץ את הידע ויצר את ההשכלה, כך שהיא יצאה משליטתם של בעלי הממון והכוח בלבד. האנרגיה החשמלית, התעשייה והקיטור הניעו את המהפכה התעשייתית, בעוד מכשירי החשמל משרתים אותנו, המטוסים נושאים אותנו לכל פינה על פני כדור הארץ, החלליות אל החלל, חיסונים, תרופות, ניתוחים והשתלות שומרים את בריאותנו ומשמרים את גופנו לשנים רבות יותר...

ואלה רק דוגמאות בולטות.

אז כן. דמיינו מה ימציאו ואילו בעיות יוכלו לפתור מחשבים, שיהיו בעלי ידע בכל התחומים, ידע בפיזיקה, כימיה, רובוטיקה, ננוטכנולוגיה, ביוטכנולוגיה וכמובן מתמטיקה. דמיינו אילו בעיות בחיינו הם יוכלו לפתור עם הידע שיוזרם אליהם מכל קצוות המדע, הטכנולוגיה והפטנטים - ידע שבניגוד למדענים אנושיים, הם לא יוכלו לשכוח או להשמיט בהיסח הדעת, ידע שפרטיו יתחברו וייבדקו במיליארדי אפשרויות, איטרציות וקומבינציות ויוצלבו בביליוני דרכים, כך שחלק גדול ממה שהיום קורה בהברקה של רגע, או אפילו בזכות טעות שמביאה להמצאה - כל אלה יוכלו לקרות באמצעות חישוביות מאורגנת, שיטתיות ומסודרת וכמובן, מיחשוב מתוכנת היטב.

כל זה יקרה באמצעות אינטליגנציה מלאכותית, ודאי גם הבזקית, שחושבת פחות או יותר כמו ממציא, אבל בראש ובראשונה, בינה מלאכותית בעלת יכולות שיטתיות, סדרתיות, כמותיות בטירוף, שלא מאבדות או מפספסות דבר.

הרעיון של מחשב כזה, או תוכנה כזו, שימציאו או ישתמשו ביצירתיות מלאכותית, הוא ליצור מודל של המצאה, של קומפוזיציה ושל יצירה כמו אנושית. מודל כזה שניתן יהיה למחשב, או להזין כאלגוריתם לתוכנה, שתשחזר את התהליך. זה אפשרי ולכן אפשרית גם תוכנה שתמציא ותפתור בעיות קשות ברמה של מדענים וממציאים.

השאלה היא רק מתי זה יקרה.


הנה סיפורו של מבחן לאבלייס והאפשרות שמכונה יוצרת תוכל להמציא רעיונות אמנותיים בעצמה (מתורגם):

https://youtu.be/Rh9vBczqMk0


דיון על האפשרות שמחשבים יצרו בעצמם:

https://youtu.be/Sbd4NX95Ysc?long=yes


הרצאה על איך גורמים למחשבים להיות יצירתיים:

https://youtu.be/uSUOdu_5MPc?long=yes


והרצאת טד נהדרת על התקופה המרובדת שבפיתחה אנו ניצבים (מתורגם):

https://youtu.be/aR5N2Jl8k14?long=yes
האם רובוטים יכולים לצייר?



בהחלט. אמנם לרובוטים אין דמיון והיצירתיות שלהם היא רק בתחילת הפיתוח שלה, אבל רובוטים כבר מציירים.

כי על אף שהמרכיב היצירתי אצל הרובוטים הללו הוא חלקי והם אינם מסוגלים ליצור אמנות מורכבת ומופשטת כמו האמנים האנושיים, עולם הבינה המלאכותית מבטיח שרובוטים בעתיד יוכלו להגיע לרמות מדהימות של יצירה והמצאה, גם בתחום האמנות.

העניין הזה מעלה, אגב, לא מעט שאלות חשובות, הן אמנותיות והן פילוסופיות. אחת הראשונות שבהן תהיה מי ייחשב ליוצר של יצירת אמנות שיצר רובוט - האם האמן שיקבל את הכבוד יהיה יוצר הרובוט או שבעתיד נעמוד בתור לתערוכה מעבודתו של X512V, הרובוט של חברת גוגל.

אגב, את הכסף יקבלו בכל מקרה בעליהם החוקיים של הרובוטים, כך שזה לא עניין כלכלי. יוקרה וכבוד אולי לא ואולי כן, אבל הכסף בכל מקרה יגיע לידיהם.


הנה פול, רובוט פשוט שמצייר דיוקן של מי שמתייצב מולו:

https://youtu.be/bbdQbyff_Sk


אהרון, שהוא רובוט יצירתי שלא מצייר את מה שהוא רואה, אלא גם רעיונות ויצירות אישיות:

https://youtu.be/-U-lQYwzFAQ?t=15s


אולי עוד לא אמן אבל שוליה של אמן או משכתב - בינה מלאכותית נוסח "DALL-E" כבר יכולה לצייר דיוקנאות מתיאור מילולי בשפה טבעית של מה שיכיל הציור:

https://youtu.be/qTgPSKKjfVg


וכן - רובוטים יכולים להיות יצירתיים, בערך... (עברית)

https://youtu.be/Rh9vBczqMk0
מהם מנועי הציור הבינתי נוסח Dall-e ומידג'רני?



הבינה המלאכותית (AI) DALL-E היא מערכת המסוגלת לייצר תמונות ודימויים ויזואליים דמיוניים, המבוססים על פרומפטים - תיאורי מלל, אינפוטים טקסטואליים שכתב והזין לה המשתמש.

הכל הוא חלק מטכנולוגיה שנקראת "ג'נרטיב AI". זו בינה מלאכותית שבמקום לחשב ולנצח במשחקי טריוויה הפכה ליוצר AI, לצייר, צלם ועוד כל מיני אמנים - אבל באינטליגנציה מלאכותית.

באמצעות פרומפטים, תיאורים מילוליים דוגמת "אביר ימיבייניימי עשוי מחצילים" או "מגדל מודרני בנוי על שריון של צב בסגנון פיקאסו" מייצרת המערכת תמונות וציורים מרהיבים ולא פעם אף מדהימים.

ליצירת התמונות מהטקסט אחראית הבינה המלאכותית המבוססת על למידה עמוקה, מערכת הלומדת בעצמה רשתות נוירונים מלאכותיות, על סמך דפוסים שהיא מאתרת עצמאית, במיליוני תמונות וציורים המוזנים אליה על ידי המפעילים שלה.

להישג המקורי של DALL-E וגרסתה המשופרת DALL-E 2, תוצר של חברת OpenAI, קמו די מהר מתחרים ראויים נוספים ואיכותיים לא פחות, המייצרים עולם חדש וחסר תקדים של ציירים מכניים, שרק ממתינים לבקשות מהמשתמשים ומזדרזים לצייר מבחר טיוטות, מהן יכול המשתמש לבחור את התוצר הסופי שמועדף, שיבוצע באיכות גבוהה.

איש לא יודע בדיוק כיצד DALL-E פועל, גם לא היוצרים של המודלים שלפיהם הוא פועל. אבל זו העבודה המדהימה של הלמידה העמוקה שמעבדת בעצמה את הדאטה ממיליוני התמונות ומלמדת את עצמה לצייר ולפרש את הפרומפטים לפיקסלים ותמונות.

התוצאות של DALL-E 2 היכו די מהר גלים בעולם הבינה המלאכותית וחוץ מתחרות של חברות וקוד פתוח יצרו גם הרבה שיפורים, הן באיכות הטכנית של התמונות והן ביכולות האמנותיות. כך למשל הולכות התמונות ונעשות מפורטות, הרזולוציה גדלה, יכולות הריאליזם, עבודת הצל והתאורה, השימוש במרקמים וציור הנראה כמעט טבעי לחלוטין.


הנה הבינה המלאכותית נוסח "דאל-E" שכבר יכולה לצייר דיוקנאות מתיאור מילולי בשפה טבעית של מה שיכיל הציור:

https://youtu.be/qTgPSKKjfVg


כתבה על היכולת המופלאה של דאלי 2 ליצור אמנות:

https://youtu.be/hiSgpZUAy2c


הסבר אמנות ה-AI:

https://youtu.be/alJdw4JDJ4o


מנועי יצירת תמונות מתחרים ומקבילים ל-DALL-E:

https://youtu.be/rGbNJrywLhk


ה"אאוט פיינטינג" של דאלי2, בו הוא מרחיב תמונה:

https://youtu.be/G-Wsh1vUeVQ


מדריך להרחבת תמונות:

https://youtu.be/V1KLG159A2s


קליפ שכולו תמונות שנוצרו ממילות שיר של קינג קרימזון:

https://youtu.be/VR3AWdyVVdU


למה יש לבינה כל הזמן בעיה עם אצבעות?

https://youtu.be/24yjRbBah3w


גם למחוללי בינה כמו מידג'רני יש בעיות (עברית):

https://youtu.be/xUpUhHsAWlg?long=yes


ויוצר רשת שחודש שלם העלה לרשת החברתית תמונות אושר ואווירה שיצר AI - ואז גילה לעוקביו את האמת:

https://youtu.be/FRClNMC_z-s?long=yes
מה עושה הפרומפט בעולם הבינה המלאכותית הגנרטיבית?



מהו המקביל של מברשת של הצייר, מקלדת המלחין או הבוס של כותב המאמר, עורך הווידאו או המשורר בעולם הבינה המלאכותית הגנרטיבית? - מיהו זה שאומר מה הוא צריך והם יושבים לעבוד וליצור?

זהו הפרומפט (Prompt), ההנחייה הטקסטואלית שאנחנו נותנים למכונה, כלומר לכלי הבינה הגנרטיבי (Generative AI). את ההנחייה הזו אנו כותבים לו כדי שייצר לנו תוצר בינתי.

בפשטות, פרומפט הוא התיאור המילולי בשפה טבעית של התוצר שרוצים לקבל מהבינה.

היום הפרומפט הוא המלך של עולם הבינה המלאכותית מבוססת הדיאלוג וסוגי מודלים של שפה.

זה אמנם נשמע דומה לביטוי חיפוש, אבל הפרומפט הוא לא המקבילה הפשוטה של ביטוי החיפוש במנועי חיפוש, אלא בניסוח מאוד מוקפד של התוצר הרצוי, שיכול ללכת ולהשתבח במהלך הצ'אט עם הבוט, ככל שנרצה להשביח את התוצאה שקיבלנו.


#לג'נרט אהבה
הפעולה הזו ,של ניסוח הפרומפט, זכתה בעברית החדשה לשם הפעולה "לג'נרט" (To generate). היא זו שבמידה רבה תקבע את האיכות של התוצרים.

יש אפילו מקצוע חדש שהולך ומלבלב בעולם ה-AI. הוא נקרא, החזיקו חזק, "מהנדס פרומפטים" (Prompt Engineer). מדובר באדם שמיומנותו בניסוח של פרומפטים מוצלחים.


#הנשיא פרומפט, או איך להצליח בפרומפט?
כמה מרכיבים יוכלו לסייע בהנחיות טובות לבינה הגנרטיבית:

פירוט ודיוק - אמנם הפרומפט יכול להיות משפט פשוט כמו "כתוב סיפור לילדים על החתול שנעלם", או "מתכון לסלט חצילים". אבל במיטבו פרומפט מדויק ומפורט יותר, ישיג דיוק ואיכות טובים יותר. תיאור של התוצר המצופה, עם פרטי פרטים, יביא כמעט תמיד לתוצאות טובות יותר. הקפידו פרומפטים לכתוב:

ספציפיות - במקום לכתוב לצ'ט "צייר לי פרח" מומלץ לפרט ולבקש למשל "פרח אדום עם עלי כותרת גדולים שהקצה שלהם צהוב". אל תדאגו אם מה שאתם כותבים נשמע לכם לא הגיוני. אחד הדברים שהבינה מצויינת בהם זה יצירה של דברים שרק גאון או משוגע יכולים לחשוב עליהם וזו בדיוק היצירתיות שלכם שדרושה לג'ינרוט מוצלח. אל תבקשו מהצ'ט "מתכון לסלט" אלא בקשו "מתכון לסלט חצילים עם טחינה, מעט חריף ועם שמן זית". באופן דומה, הציבו גם מגבלות - מה לא ייכלל בתוצר. במקום לבקש "תכנית לטיול בלונדון" בקשו "תכנית לטיול של 3 ימים בלונדון, למשפחה עם בני נוער, שיהיה חינוכי ויכלול הליכה רגלית בלבד וללא שופינג".

שיפור בשלבים - את הפרומפט, בניגוד לחיפוש במנועי חיפוש, אפשר לשפר בשלבים. הצ'ט בוט של ChatGPT, למשל, זוכר את השיחה וההקשר של מה שאתם כותבים, כל עוד התכתבות היא באותו חלון שיחה. זה אומר שלמתחילים שווה לנסות ולהתחיל בפרומפט כללי ולא מפורט ובהדרגה, ככל שהשיחה והדיוק של התוצר מתקדם לכם וגם התיאבון לתוצר יותר מוצלח גדל, להמשיך ולשפר את הפרומפט ולהפוך אותו למפורט וספציפי יותר.

בקול או טון מתאימים - ניסוח של פרומפטים לטקסטים כדאי שיקל בחשבון את הטון והקול הנכונים. כמו שבפרומפט ויזואלי נוכל לבקש שהציור יהיה בסגנון של ון גוך, פיקסו או דאלי, בתיאור של טקסט החליטו אם אתם רוצים שיהיה מנוסח כרציני, מדעי, עיתונאי, רשמי, או בסגנון של מתבגרים או של החבר'ה. אפשר גם לבקש שהטקסט יהיה קצר או ארוך (כתוב לי שתי פסקאות על.. או "כתוב מאמר מלא על..." וכו').

הסבר כמו למתחיל - בקשו בפרומפט כך:

"Explain [subject] in simple terms. Explain to me as if I'm a beginner."


הנה השיעור הראשון בניסוח הפרומפט:

https://youtu.be/Qos2rG3zVAM


איך משתמשים ב- chatGPT כדי שהוא ינסח פרומפטים טובים למנוע תמונות, במקרה הזה Midjourney (עברית):

https://youtu.be/zFS7WtovYmo


יש תוכנה לעזרה בניסוח פרומפטים (עברית):

https://youtu.be/HLhRFaXQ0vQ


על הפרומפט שמייצר חדשות קוליות לגיק:

https://youtu.be/5TlsXXTamBs


מודלים לציור גנרטיבי מתיאור מילולי בשפה טבעית:

https://youtu.be/pZsJbYIFCCw


הנה מקצוע מהנדס הפרומפט:

https://youtu.be/Bq-ncjOGeVU


והסבר מקיף על עבודתם של מהנדסי הפרומפט (Prompt Engineer) בעולם ה-AI:

https://youtu.be/hd7l9F3n4ZM?long=yes
מהם סרטוני דיפ פייק?



דיפ פייק (Deep fake או Deepfake) הוא שמה של טכנולוגיית וידאו, מבוססת בינה מלאכותית (AI), ההולכת ותופסת בשנים האחרונות את מקומה ברשתות החברתיות שבאינטרנט.

העיקרון המוביל בסרטוני ה-Deepfakes הוא שחזורי פנים מדויקים, המולבשים על וידאו או אנימציה ומייצרים מראות הנראים אמיתיים לגמרי.

בהסבר פשוט, מדובר בהחלפת פניו של מצולם בווידאו, באמצעות אלגוריתם של למידת מכונה. התוצאה של זה היא יצירה קלה למדי, של סרטוני וידאו המציגים מעשים ודיבורים שמעולם לא קרו או נאמרו.


#תולדות ה"דיפ פייק"
את לידת הטכנולוגיה הזו סימנה אפליקציה בשם FakeApp, שפותחה בסין על ידי מיזם בשם MoMo. המיזם היה ככל הנראה החלוץ בכך שאפשר להמונים להדביק את פניהם לזמרים, שחקנים ודמויות ממשחקי וידאו. לראשונה ראו המשתמשים שמספיקה תמונה אחת של פניהם, כדי שהאפליקציה תדביק ותמפה אותה באופן אוטומטי על גבי הקליפים שהיא מציעה.

בשנת 2016 כבר פותחו מערכות למידת מכונה אוטומטיות וחזקות יחסית, כאלה שלומדות ומשתפרות בעצמן, ככל שהן מופעלות. המערכות הללו חזרו שוב ושוב על תהליכי יצירת Deepfake וככל שהתהליך נמשך, לאחר מיליוני פעמים, הן שיפרו את התוצר. בשנה זו יצאו כבר תוכנות שאפשרו זאת גם על מחשבי PC ביתיים וחלשים יחסית.

את שמה קיבלה הטכנולוגיה הזו בשנת 2017, ממשתמש באתר Reddit שכינויו "זיופים עמוקים". הוא טבע את המונח לאחר שערך כמה סרטונים פורנוגרפיים ובהם הוא הטמיע, באמצעות טכנולוגיית "למידה עמוקה" (Deep learning), את פניהם של ידוענים ומפורסמים שונים.

את פרסומה העיקרי חייבת הטכנולוגיה הזו לסרטוני "פייק ניוז", חדשות כזב, שיצרו תומכי פוליטיקאים בארצות הברית, במהלך קמפיין הבחירות לנשיאות 2020. לפתע החלו להופיע סרטונים בהם ממליצים ומסבירים נשיאי עבר ומשפיענים פוליטיים שונים על דברים בדויים ומנוגדים לאמת. על התחום הזה שווה לקרוא בתגית "פייק ניוז".


#למה משמשים סרטונים אלו?
טכנולוגיית ה-Deepfake משמשת ליצירת תוכן וידאו המציג מציאות בדויה לחלוטין, דברים שנראים ונשמעים אמיתיים ומצולמים, אך למעשה לא התרחשו מעולם.

ביטויי הסרטונים הללו, שזכו לכינוי Deepfakes, הם רבים. החל מנאומים שלא ננאמו ומעבירים מסרים בדויים מפיהם של ידוענים, מנהיגים ומפורסמים ועד סרטונים "פסאודו-תיעודיים", שמציגים מעשים, מראות וטקסטים מדוברים, הנראים אמיתיים לחלוטין אך מעולם לא צולמו והוקלטו.

מדובר בעניין מהפכני. מעולם לא עמדה טכנולוגיה כה חזקה וריאליסטית לטובת תעשיית השקר, או בשנה המכובס, תעשיית ה"פוסט אמת".

בעולם של ה-Deepfakes השתפרו האפשרויות ליצירה והפצה של שקרים פלאים. הן כה מרשימות, עד כדי כך שמיליונים "נופלים בפח", מאמינים לסרטוני הדיפ פייקס ומשנים את דעותיהם ואף את התנהגותם והעדפותיהם הפוליטיות בגללם.


#סיכום
הכלים ליצירת סרטוני ה"דיפ פייקס" הם כלים טכנולוגיים, מתוחכמים מכל טכנולוגיה שעמדה בעבר לטובת השקרנים ומקדמי מה שזכה לכינויים כמו "אמת אלטרנטיבית", תיאוריות קונספירציה וכדומה.

מעולם לא עמדו טכנולוגיות כה חזקות לרשות השקרים הקטנים, להם מתאפשר עתה להמציא ולהפיק את הבדיות שלהם באופן מוחשי וריאליסטי מאי-פעם.

מצד שני, מעולם הדיפ פייק נולד עם הזמן גם יישום ה"דיפ נוסטלגיה". עד שימצאו גם לו שימושים מזיקים ואף מחרידים, זהו עולם חיובי, סנטימנטלי ומעורר התרגשות אמיתי, בהנחה שנוסטלגיה אינה מזיקה לאיש. ניתן לקרוא עליו בתגית "דיפ נוסטלגיה".


הסבר לטכנולוגיה (עברית):

https://youtu.be/lk-1hBpAyiU


אובמה מדבר פייק:

https://youtu.be/gLoI9hAX9dw


ההשלכות של זה מטורפות (עברית):

https://youtu.be/4BsiYnt51ok


כך יוצרים פנים ממאפיינים או שילובי פנים אמיתיים:

https://youtu.be/kSLJriaOumA


שעשוע עם טראמפ ומיסטר בין:

https://youtu.be/HN-qlGf2mZw


וקצת מוסיקה מצמד הנשיאים וחתול:

https://youtu.be/dsODRfCMRoM
מהי טכנולוגיית הדיפ נוסטלגיה?



בשנים האחרונות הולכת ותופסת את מקומה טכנולוגיה מבוססת בינה מלאכותית (AI) שנקראת דיפ פייק (Deepfake). טכנולוגיה זו משמשת לייצור או שינוי תוכן וידאו כך שהיא מציגה מציאות שלמעשה לא התרחשה מעולם. מנאומים שלא ננאמו מעבירים מסרים בדויים מפיהם לכאורה, של אנשים מפורסמים ועד סרטונים "פסאודו-תיעודיים", שמציגים מראות וטקסטים מדוברים, שנראים אמיתיים אך מעולם לא צולמו והוקלטו.

ענף חדש בעולם הדיפ פייק הוא יישום שזכה לשם "דיפ נוסטלגיה" (™Deep Nostalgia), המנפיש את פניהם של אנשים שצולמו בתמונות ישנות או היסטוריות, ומזיז את פניהם, כאילו צולמו בווידאו.

הטכנולוגיה הזו פועלת על כל תמונת סטילס (תמונות קפואות), כולל תמונות בשחור-לבן ותמונות שצולמו בצבע.

השם ניתן ליישום פורץ דרך זה על ידי חברת MyHeritage, שעוסקת בפיתוח טכנולוגיה ליצירת עצי משפחה מקוונים.

סרטוני הדיפ נוסטלגיה התפרסמו כשאנשים שיתפו עם בני משפחתם וחבריהם סרטונים קצרים ומונפשים שנוצרו כך, ובהם קרוביהם ואבותיהם מזיזים את ראשיהם, מצמצים, מחייכים ונעים בצורה ריאליסטית כמעט לחלוטין.


#איך פועלת הדיפ נוסטלגיה?
דיפ נוסטלגיה מחזירה, אם כן, לחיים אנשים שצולמו בצילומי סטילס. זה מתחיל באיתור פני המצולמים בתמונות ואז הפקה של מחוות ותנועות מציאותיות, ממש כאילו צולמו בווידאו. ההנפשה של הפנים בתמונות הסטילס מראה אותם מחייכים, זזים וממצמצים, כאילו צולמו כך במקור.

בבסיס הטכנולוגי של יישום ה"דיפ נוסטלגיה" פועל אלגוריתם למידה עמוקה (Deep Learning), המחבר בין תווי הפנים של המצולמים לבין אוסף מחוות שצולמו בווידאו ושמורים במאגר החברה.

פיתוח וצילום אותן מחוות נעשה כשצילמו אנשי מיי הריטג' מראש שלל מקטעי וידאו של שחקנים ועובדי החברה, המזיזים את ראשיהם ופניהם באורח טבעי, ממצמצים, מחייכים ומפנים את ראשם לכיוונים שונים.

למעשה שכרה חברת MyHeritage רישיון מחברת D-ID, לטכנולוגיה שפותחה בה ומאפשרת שחזור, באמצעות טכנולוגיית למידה עמוקה, של סרטוני וידאו.

על מנת שאפקט ההנפשה יופעל על התמונות, ברזולוציה הכי גבוהה האפשרית, עוברות תמונות מטושטשות חידוד אוטומטי, שמבצעת הטכנולוגיה החדשנית, מה שמעלה באופן דרמטי את איכות הסרטונים המופקים בה.

ההברקה האמיתית של הטכנולוגיה הזו נעוצה בזיהוי והבחירה האוטומטית שמבצע יישום הדיפ נוסטלגיה, מבין מקטעי המחוות בווידאו. ניתוח מהיר של מנח הראש וכיוון העיניים של המצולמים בתמונה מאפשרים ליישום להתאים להם באופן חכם את מחוללי ההנפשה המיטביים ולייצר את הסרטונים המונפשים באופן אופטימלי.


#ממה נמנעו מפתחי הדיפ נוסטלגי?
אנשי חברת MyHeritage ומפתחי היישום המלהיב נמנעו מהוספת דיבור לסרטונים.

לאור העובדה שטכנולוגיית הדיפ פייק ידועה ביכולות המטורפות שלה, גם בתחום הדיבור, נשאלת השאלה מדוע. הרי ניתן היה לשתול בפי המצולמים טקסטים מדוברים, שהיו נשמעים אמיתיים, על אף שמעולם לא צולמו והוקלטו.

ראשית, חשוב לומר שזיהוי קולי של המצולמים, ככל שמדובר באנשים שקרוביהם זוכרים עדיין את קולם האמיתי, היה מפחית את אפקט המציאות שיוצרים הסרטונים הללו.

אבל יש עוד סיבה לכך.

ב-MyHeritage מציינת שההימנעות מאפקטים קוליים של דיבור היא מכוונת. מטרתה, הם מטעימים, היא "למנוע שימושים זדוניים בכלי", דוגמת אלה שנעשים בסרטוני "דיפ פייק" של פוליטיקאים וידוענים שעודם בחיים.

לכן הם גם מבקשים מהמשתמשים לעשות בכלי שימוש רק על תמונות היסטוריות השייכות להם ולהימנע משימוש בתמונות של אנשים חיים, שלא אישרו את השימוש הזה.


הסבר לטכנולוגיה (עברית):

https://youtu.be/O4VPN_YjgIM?t=21s


הנה הדיפ נוסטלגיה:

https://youtu.be/tjBYSnoAWqg


ציורים מפורסמים שקמים לתחייה:

https://youtu.be/TWY1uBK4Zxc


ואפילו דיקטטורים קמים לתחיה עם הדיפ נוסטלגיה של מיי הריטג':

https://youtu.be/a-HR03bToew
האם רובוטים יהיו לעיתונאי העתיד?



זה היה בשנת 2016 כשהתפרסמה לראשונה כתבה שנכתבה על ידי עיתונאי שהוא בעצם תוכנת מחשב, המצוידת באלגוריתם של בינה מלאכותית. המדהים היה שלא זו בלבד שהמומחים שבחנו את הכתבה לעומק קבעו שהיא כתובה היטב, אלא שכתיבת כל הכתבה הזו, באורך של כ-1,000 מילים (בשפה הסינית, אם זה חשוב...), לקחה דקה אחת בלבד!

ואכן, תוכנות בינה מלאכותית הולכות ומתקדמות לעבר מה שעד לפני עשור נראה כמו עתיד רחוק מאד. ממש בקרוב יתכן שתוכנות כאלה יתחילו להחליף גם את העיתונאים. דמיינו לעצמכם שתוכנה חכמה תבצע בעצמה את התחקיר העיתונאי, תבצע את עיבוד הנתונים וה"הבנה" של המשמעות שלהם ומה ניתן להבין ממנה לגבי ההשפעות על החברה, עולם הטכנולוגיה, ההיסטוריה ועוד. דמיינו את התוכנה "מתיישבת לכתוב" ומנפיקה בתוך שברירי שנייה את הסיפור העיתונאי, כלומר את הכתבה או המאמר שיופיע בעיתון האלקטרוני שלכם..

ועכשיו הפסיקו לדמיין.. כבר היום תוכנות כאלה קיימות והן נקראות "עיתונאים רובוטיים". התופעה מכונה "רובו ג'ורנליזם" והתוכנות הללו הן סוג של מתחרה מפחיד וזול לעיתונאים האנושיים של היום. העיתונאי הרובוטי מהיר מאד באיסוף נתונים, לא ישן אף פעם, מנתח כמויות מידע עצומות ומצויד בידע מעמיק לגבי הקורא שלו, הרגליו וכיצד הוא אוהב לקרוא. כך יכול רובוט עיתונאי לכתוב מאמר שונה לכל אחד מאיתנו (קראו על כך באאוריקה בתגית: "הפצה ליחידים"). בצורה כזו יהיו מי שיקבלו לקריאה מאמר עתיר תמונות, אחרים יקבלו מאמרים קצרים ותכליתיים וחבריהם יקבלו מאמר מפורט ועתיר דוגמאות.

במקום העיתונות הקלאסית שבה אדם אחד כותב מאמר למיליונים, קמו חברות חדשות שפיתחו אלגוריתמים לכריית מידע ורובוטי כתיבה, שנעזרים בבינה מלאכותית ולמידת מכונה. בוטים כאלה יוצרים באופן אוטומטי מיליוני מאמרים ויחידות תוכן המותאמים לקורא הספציפי. בעתיד כל אחד יקרא את מה שמעניין אותו ורק אותו. כלומר במקום לכתוב מאמר אחד למיליונים, מאפשרים עיתונאים רובוטיים כתיבה של המוני מאמרים שונים לכל אדם בנפרד.

אבל יש בכך גם בשורה. התקווה היחידה של העיתונאי האנושי של העתיד, למול מפלצת הכתיבה של הבינה המלאכותית, היא האישיות שלו. כותב שמצויד בחשיבה יצירתית ורב תחומית, ביכולת לספר סיפור, לחשוב בצורה מעניינת, לשפוט ולשקול ולייצר חשיבה מקורית וחדשנית - אדם כזה יוכל גם בעתיד לנצח את הרובוט העיתונאי, המהיר והמצויד להחריד, אבל זה שלא מבין אירוניה או סרקזם והומור. ליצירה עיתונאית אנושית ברמה גבוהה יהיה תמיד מקום. מי שיוחלף הם העיתונאים שהסתפקו בעבודה הבסיסית של הכתב.


הנה הכותבים המתוכנתים של העתיד:

https://youtu.be/dj3EvdOJXMc


ב-2013 כתבו רובוטים כאלו מעל מיליארד כתבות שפורסמו בעיתונות ובאינטרנט:

http://youtu.be/vkrV4MiX4IM


הנה נאום לנשיא טראמפ שכתב מחשב:

https://youtu.be/EFHyzuqjaok


חברת "Automated Insights" שהבוטים שלה כותבים מאמרים מלאכותיים:

http://youtu.be/EEczLkSTSrQ


ובוטי כתיבה חכמים של חברת "נרטיב סיינס" שכותבים מאמרים בתחומים כמו ספורט ועיתונות:

https://youtu.be/inlkQcSjD9w


אֵאוּרִיקַה - האנציקלופדיה של הסקרנות!

העולם הוא צבעוני ומופלא, אאוריקה כאן בשביל שתגלו אותו...

אלפי נושאים, תמונות וסרטונים, מפתיעים, מסקרנים וממוקדים.

ניתן לנווט בין הפריטים במגע, בעכבר, בגלגלת, או במקשי המקלדת

בואו לגלות, לחקור, ולקבל השראה!

אֵאוּרִיקַה - האנציקלופדיה של הסקרנות!

שלום,
נראה שכבר הכרתם את אאוריקה. בטח כבר גיליתם כאן דברים מדהימים, אולי כבר שאלתם שאלות וקיבלתם תשובות טובות.
נשמח לראות משהו מכם בספר האורחים שלנו: איזו מילה טובה, חוות דעת, עצה חכמה לשיפור או כל מה שיש לכם לספר לנו על אאוריקה, כפי שאתם חווים אותה.