הסרטון שמשגע את איראן: איך בנימין נתניהו "דיבר" בפרסית?

על רקע מבצע "שאגת הארי" שהחל אתמול (שבת), ראש הממשלה בנימין נתניהו שחרר סרטון חריג ובו הוא פונה ישירות לאזרחי הרפובליקה האסלאמית - בשפה הפרסית.

בעוד שהמסר המדיני והפסיכולוגי ברור, מה שלוכד את תשומת הלב במדור הטכנולוגיה הוא האופן שבו הסרטון הופק: באמצעות טכנולוגיית בינה מלאכותית מתקדמת שאפשרה לראש הממשלה "לדבר" פרסית שוטפת.

בסרטון, שבו נראה נתניהו כששפתיו מסונכרנות לחלוטין עם המילים בפרסית, הוא מצהיר: "בימים הקרובים נתקוף אלפי מטרות של משטר הטרור. אנו ניצור את התנאים עבור העם האיראני האמיץ להשתחרר מכבלי העריצות".

בהמשך, הוא קרא להמונים לא להחמיץ את ההזדמנות ההיסטורית ומפנה קריאה לאחדות בקרב הקבוצות השונות באיראן: "פרסים, כורדים, אזרים, אהוואזים ובלוצ'ים - זה הזמן לאחד כוחות כדי להפיל את המשטר ולהבטיח את עתידכם".

איך זה עובד? מאחורי הקלעים של הדיבוב המלאכותי

יצירת סרטון שבו אדם דובר שפה שאינו מכיר, תוך שמירה על גוון קולו המקורי והתאמת תנועות השפתיים, הפכה בחודשים האחרונים לנגישה וריאליסטית מתמיד.

הטכנולוגיה מנתחת תחילה את קולו של הדובר בשפת המקור ומשכפלת את החותם הקולי שלו. לאחר מכן, הטקסט מתורגם ומוקרא בשפת היעד באמצעות הקול המשוכפל.

השלב הסופי והמרשים ביותר הוא עיבוד הווידאו: מודל ראייה ממוחשבת מזהה את פניו של הדובר ומשנה את תנועות הפנים והשפתיים כך שיסנכרנו באופן מושלם עם הפסקול החדש.

התוכנות שמאפשרות לתרגם וידאו לכל שפה

קיימות כיום מספר פלטפורמות AI מובילות שבאמצעותן ניתן לייצר סרטונים מסוג זה:

HeyGen

אחת הפלטפורמות הפופולריות והמתקדמות ביותר כיום לתרגום וידאו. הפיצ'ר "Video Translate" שלה מאפשר להעלות סרטון, לבחור שפת יעד (מתוך עשרות שפות), והמערכת מבצעת את כל התהליך באופן אוטומטי: תרגום, שכפול קול ושינוי תנועות השפתיים ברמת אמינות גבוהה מאוד.

Rask AI

 פלטפורמה שנועדה במיוחד ללוקליזציה של סרטונים. היא מתמחה בדיבוב ובתרגום תוכן וידאו תוך שמירה מדויקת על הקול המקורי של הדובר, ונמצאת בשימוש נרחב אצל יוצרי תוכן וגופי תקשורת שרוצים להנגיש תכנים לקהלים בינלאומיים.

ElevenLabs

חברה הנחשבת לחלוצה ולמובילה בתחום יצירת הקולות ושכפול הקול. לאחרונה השיקה החברה כלי דיבוב עוצמתי שמתרגם קטעי שמע ווידאו לשפות רבות, תוך התאמה מושלמת לרגש ולאינטונציה המקורית.

Captions

אפליקציה שהחלה ככלי ליצירת כתוביות דינמיות והתרחבה משמעותית. כיום היא מציעה פיצ'ר תרגום דיבוב מבוסס AI, הכולל גם סנכרון שפתייםואפילו תיקון קשר עין כדי לוודא שהדובר מסתכל ישירות למצלמה גם אם קרא מטלפרומפטר.