Omnihuman-1: הבעלים של TikTok משיק AI שיוצר סרטונים אנושיים מתמונה אחת. צילום: רבייה / omnihuman-1.

OmniHuman-1: הבעלים של TikTok משיק AI שיוצר סרטונים אנושיים מתמונה אחת

אלכסנדר מרקס אווטאר
חברת האם TikTok Bytedance חשפה מודל אנימציה אנושי חדש של AI. הבן כיצד ומדוע הכלי הזה יכול להיות מהפכני.

A ביטאנס, בעלים של טיק טוק, הציג לאחרונה את OmniHuman-1, בינה מלאכותית חדשה שמייצרת סרטונים אנושיים מציאותיים ביותר מתמונה אחת. הכלי בולט בשימוש באותות חלשים, כגון אודיו, ליצירת סרטונים אלה, ומציב סטנדרט חדש בשיטות יצירת תוכן דיגיטלי קיימות. בדוק הכל על התכונה החדשה:

איך עובד OmniHuman-1

Omnihuman-1: הבעלים של TikTok משיק AI שיוצר סרטונים אנושיים מתמונה אחת. Bytedance, חברת האם של TikTok, הציגה AI חדש של דגמי אנימציה אנושיים. הבן כיצד ומדוע הכלי הזה יכול להיות מהפכני.
תמונת סטילס של אלברט איינשטיין משמשת ליצירת וידאו חדש עם OmniHuman-1. צילום: רפרודוקציה / OmniHuman-1.

O OmniHuman-1 משתמש במסגרת חדשנית מונעת על ידי מולטי-מודאליות של יצירת וידאו אנושי, שיכולה ליצור סרטונים מציאותיים ביותר מתמונה אנושית אחת ומאותות תנועה כגון אודיו ווידאו. הארכיטקטורה שלו משלבת אסטרטגיית אימון מעורבת, המאפשרת למודל ללמוד מכמות גדולה של נתונים ממקורות שונים. זה פותר את הבעיה שגישות קודמות למודלים אחרים נתקלו לעיתים בקשיים עקב מחסור בנתונים איכותיים לאימון.

הכלי תומך בכניסות תמונה ביחסי גובה-רוחב שונים, כגון דיוקנאות, תמונות חצי גוף e גוף מלא. תכונה זו חיונית ליצירת סרטונים מציאותיים בהקשרים ותרחישים שונים. יתר על כן, ה OmniHuman-1 מצליח לשמור על נאמנות הפרטים, כגון תנועות, תאורה e טקסטורה, מבטיח שהתוצאה משכנעת וטבעית.

היבט חשוב נוסף של OmniHuman-1 היא היכולת שלו להתמודד עם סגנונות חזותיים ואודיו מגוונים. זה יכול ליצור וידאו מאותות חלשים, כגון אודיו בלבד, או לשלב אודיו ווידאו לכיוון מדויק יותר של תנועות. הרבגוניות הזו הופכת את הכלי לאידיאלי עבור יישומי מדיה ובידור שבהם התאמה אישית ואיכות חיונית. THE OmniHuman-1, לפיכך, מייצג התקדמות ביצירת תוכן דיגיטלי, ומציע אפשרויות חדשות ליצירת סרטונים אינטראקטיביים ומותאמים אישית.

לאחר מכן, נסקור מקרוב כל היבט שהופך את OmniHuman-1 AI מהפכני של דור וידאו.

תמיכה בכל מבנה גוף ופרופורציה

Omnihuman-1: הבעלים של TikTok משיק AI שיוצר סרטונים אנושיים מתמונה אחת
בסרטון שרבים ראו בו לעג ל-Nvidia, OmniHuman-1 השתמש בתמונה של Jensen Huang כדי ליצור סרטון. צילום: רפרודוקציה / OmniHuman-1.

תמיכה בכניסות תמונה בכל יחס רוחב-גובה, בין אם לאורך, בחצי אורך או באורך מלא, היא אחד היתרונות הגדולים של OmniHuman-1. המשמעות היא שהכלי יכול ליצור סרטונים מציאותיים ללא קשר לפורמט התמונה שסופקה, דבר שהרבה טכנולוגיות קודמות לא יכלו לעשות באותו דיוק. גמישות זו מאפשרת ליישם את הכלי במגוון הקשרים, מ סרטונים אישיים e מקצועי עד הפקות אמנותיות e פרסומות, הבטחת תוצאות עקביות ואיכותיות בכל מקרה.

בנוסף, תמיכה בצורות גוף שונות חיונית ליצירת סרטונים טבעיים ומותאמים יותר. THE OmniHuman-1 לא רק מסתגל ליחס הגובה-רוחב של התמונה, אלא גם שומר על נאמנות התנועות והמאפיינים הפיזיים של המצולם. זה שימושי במיוחד בתחומים כמו מדיה ובידור, שבהם אותנטיות וריאליזם חיוניים כדי למשוך ולרתק קהל.

אפשרויות התייחסות לשמע, תנוחה ותמונה

הקיבולת של ה OmniHuman-1 עבודה עם סוגים שונים של כניסות אותות, כגון אודיו ווידאו, מאפשרת לבינה מלאכותית ליצור סרטונים אנושיים מציאותיים באמצעות אות אודיו בלבד, או לשלב אודיו ווידאו כדי להשיג תוצאות מדויקות וטבעיות אפילו יותר. תכונה זו מאפשרת את OmniHuman-1 ליצור סרטונים המבוססים על הפניות שונות, ולהרחיב את היישומים הפוטנציאליים שלהם בתעשיות שונות.

בנוסף לאפשרויות האודיו, למשל, ה OmniHuman-1 גם מפגין את היכולת להתמודד עם תנוחות מגוונות והתייחסויות לתמונה. המשמעות היא שללא קשר למיקום או לתנוחת המצולם בתמונת הקלט, הכלי יכול ליצור סרטון ששומר על הטבעיות והנזילות של התנועות. הרבגוניות הזו היא שיפור לעומת טכנולוגיות קודמות, שלעתים קרובות נאבקו בתנוחות מורכבות או חריגות.

סרטונים עם סגנונות חזותיים שונים

Omnihuman-1: הבעלים של TikTok משיק AI שיוצר סרטונים אנושיים מתמונה אחת
ה-OmniHuman-1 מסוגל להפיק סרטונים במגוון סגנונות חזותיים, מריאליזם קיצוני ועד לייצוגים מסוגננים יותר. צילום: רפרודוקציה / OmniHuman-1.

O OmniHuman-1 יכול להפיק סרטונים עם סגנונות חזותיים שונים, מה שהופך אותו לכלי רב תכליתי להפליא עבור יוצרי תוכן. זה יכול להתאים למגוון רחב של סגנונות, מריאליזם קיצוני ועד לייצוגים מסוגננים יותר, מה שמבטיח שהתוצאה עונה על הצרכים וההעדפות הספציפיות של המשתמש. היכולת הזו ליצור סרטונים עם סגנונות חזותיים שונים אפשרית הודות לאסטרטגיית האימון המתוחכמת של ה- OmniHuman-1, המאפשר למודל ללמוד ממגוון רחב של נתונים חזותיים.

אינטראקציה בין בני אדם וחפצים

תכונה חדשנית נוספת של OmniHuman-1 היא יכולתו לייצג את האינטראקציה בין בני אדם לחפצים בצורה מציאותית וטבעי. המשמעות היא שהכלי יכול ליצור סרטונים שבהם הנושא מקיים אינטראקציה עם אובייקטים שונים בסביבה, תוך שמירה על קוהרנטיות של תנועות ועל נאמנות הפרטים. פונקציונליות זו חיונית ליישומים בתחומים כמו מציאות רבודה ומציאות מדומה, שבהם אינטראקציה מציאותית עם הסביבה היא הבסיסית להתעמקות המשתמש.

ייצוג מדויק של אינטראקציות בין אדם לאובייקט הוא אתגר משמעותי עבור טכנולוגיות רבות ליצירת וידאו, אך ה OmniHuman-1 מצליחה להתגבר על כך הודות לאסטרטגיית ההכשרה המתקדמת שלה ושימוש בנתונים איכותיים.

זמינות AI

Omnihuman-1: הבעלים של TikTok משיק AI שיוצר סרטונים אנושיים מתמונה אחת
Bytedance עדיין לא הפכה את OmniHuman-1 לזמין לשימוש ציבורי, לא באמצעות שירותים או הורדות. צילום: רפרודוקציה / OmniHuman-1.

למרות שכבר הציג את OmniHuman-1, ביטאנס עדיין לא הפכה את הכלי לזמין לשימוש הציבור, בין אם באמצעות שירותים או הורדות. עם זאת, ה שואומטק יהיה קשוב ויביא את כל המידע הדרוש לקוראיו ברגע שה-AI יהיה זמין לגישה.

מה אתה חושב על הפיתוח החדש הזה בעולם של AI יצירת וידאו? ספר לנו על זה הערה לְהַלָן!

ראה גם:

מקורות: GitHub, מרקטק e אינסטגרם`.

נסקר על ידי גבריאל פרינסוואל בתאריך 05/02/2025


גלה עוד על Showmetech

הירשם כדי לקבל את החדשות האחרונות שלנו בדוא"ל.

השאר תגובה
הודעות קשורות