טיש פון קאָנטענץ[באַהאַלטן][ווייַזן]
עס איז נישט נייַ צו האָבן שווינדל פאָטאָס און ווידיאס. זינט די וויידספּרעד נוצן פון די אינטערנעט, מענטשן האָבן באשאפן פאָרדזשעריז מענט צו נאַר אָדער פאַרווייַלן זינט עס זענען געווען בילדער און פילמס.
אָבער, עס איז אַ נייַע טיפּ פון מאַשין-געשאפן פאַקעס וואָס קען אַמאָל מאַכן עס שווער פֿאַר אונדז צו ויסטיילן פאַקט פון בעלעטריסטיק.
די פאַקעס זענען אַנדערש פון די פּשוט בילד מאַניפּיאַליישאַנז דזשענערייטאַד דורך עדיטינג ווייכווארג ווי פאָטאָשאָפּ אָדער די קלעווערלי מאַניפּיאַלייטיד פילמס פון דער פאַרגאַנגענהייט.
דעעפּפאַקעס זענען די מערסט באַוווסט ביישפּיל פון "סינטעטיש מעדיע" - בילדער, סאָונדס און ווידיאס וואָס ויסקומען צו זיין געשאפן מיט קאַנווענשאַנאַל מעטהאָדס אָבער זענען טאַקע געמאכט מיט סאַפיסטאַקייטיד ווייכווארג.
דעעפּפאַקעס האָבן שוין אַרום פֿאַר אַ בשעת, און כאָטש זייער מערסט פאָלקס אַפּלאַקיישאַן נאָך איז געווען צו שטעלן די קעפ פון באַרימט מענטשן אויף די ללבער פון אַקטערז אין פּאָרנאָגראַפיק פילמס, זיי האָבן די פיייקייט צו פּראָדוצירן קאַנווינסינג פוטידזש פון ווער עס יז טאן עפּעס, ערגעץ.
אין דעם פּאָסטן, מיר וועלן קוקן אין Deepfakes, ווי עס אַרבעט, ווי איר קענען דזשענערייט זיי אויף דיין אייגן, און פיל מער.
אַזוי, וואָס איז DeepFake?
א טיף-פאַקע - אַ קאָמבינאַציע פון די פראַסעס טיף לערנען און שווינדל - איז אַ שטיק פון סינטעטיש מידיאַ אין וואָס די געראָטנקייַט פון אן אנדער מענטש איז געניצט צו פאַרבייַטן דעם פון אַ מענטש אין אַ שוין-יגזיסטינג פאָטאָגראַפיע אָדער ווידעא.
דעעפּפאַקעס נוצן סאַפיסטאַקייטיד מאַשין לערנען און קינסטלעך סייכל טעקניקס צו מאָדיפיצירן און שאַפֿן וויזשאַוואַל און אַודיאָ אינפֿאָרמאַציע וואָס האט אַ הויך פּאָטענציעל פֿאַר אָפּנאַר.
טיף לערנען מעטהאָדס ווי אַוטאָענקאָדערס און דזשענעראַטיוו אַדווערסאַריאַל נעטוואָרקס זענען די ערשטיק מעקאַניזאַם פֿאַר דיפּפאַקע פּראָדוקציע (GAN).
די מאָדעלס זענען געניצט צו אַנאַלייז אַ מענטש 'ס פיישאַל ימאָושאַנז און מווומאַנץ און סינטאַסייז פּנים בילדער פון אנדערע מענטשן וואָס ווייַזן פאַרגלייַכלעך אויסדרוקן און מווומאַנץ.
די נוצן פון טיף פאַקעס אין רום פּאָרנאָגראַפיק ווידיאס, שווינדל נייַעס, כאַקסיז און פינאַנציעל שווינדל האט געצויגן היפּש ופמערקזאַמקייט. ביידע אינדוסטריע און די רעגירונג האָבן רעאַגירט דורך טריינג צו געפֿינען זיי און באַגרענעצן זייער באַניץ.
ערשטער אָרדער מאָטיאָן מאָדעל
ווען טריינג צו אַנטוויקלען טיף פאַקעס אין דער פאַרגאַנגענהייט, די פּראָבלעם איז געווען אַז מיר דאַרפֿן עטלעכע סאָרט פון עקסטרע וויסן, אָדער פּרייאָראַטיז, פֿאַר די אַפּראָוטשיז צו אַרבעטן.
ווי אַ געמעל, פּנים מאַרקערס זענען פארלאנגט אויב מיר ווילן צו שפּור קאָפּ באַוועגונג. פּאָזע אָפּשאַצונג איז נייטיק אויב מיר געוואלט צו מאַפּע באַוועגונג פון דעם גוף.
דאָס האָט זיך געענדערט ביי דער נעוריפּס קאָנפֿערענץ לעצטע יאָר, ווען דער פאָרשונג מאַנשאַפֿט פון אוניווערסיטעט פון טאָראָנטאָ האָט דערלאנגט זייער אַרבעט, "ערשטער אָרדער מאָטיאָן מאָדעל פֿאַר בילד אַנאַמיישאַן. "
ניט מער וויסן פון אַנאַמיישאַן איז נייטיק פֿאַר דעם צוגאַנג. אין אַדישאַן, נאָך דעם מאָדעל איז טריינד, עס קענען זיין געוויינט פֿאַר אַריבערפירן לערנען און געווענדט צו קיין נומער וואָס פאַלן אונטער דער זעלביקער קאַטעגאָריע.
זאל ס קוק אין דעם אופֿן ס אָפּעראַציע אַ ביסל ווייַטער. באַוועגונג עקסטראַקטיאָן און דור מאַכן די ערשטער העלפט פון די גאנצע פּראָצעס. די דרייווינג ווידעא און מקור בילדער זענען געניצט ווי ינפּוץ.
צו עקסטראַקט ערשטער-סדר באַוועגונג פאַרטרעטונג, וואָס באשטייט פון שיטער שליסל פונקטן און היגע אַפינע טראַנספערמיישאַנז, אַ באַוועגונג עקסטראַקטאָר ניצט אַן אַוטאָענקאָדער צו ידענטיפיצירן שליסל פונקטן.
צו שאַפֿן אַ געדיכט אָפּטיש לויפן און אַקלוזשאַן מאַפּע מיט די געדיכט באַוועגונג נעץ, זיי זענען געוויינט צוזאַמען מיט דרייווינג ווידעא. דער גענעראַטאָר דעמאָלט רענדערז די ציל בילד ניצן די אַוטפּוץ פון די געדיכט באַוועגונג נעץ און די מקור בילד.
איבער די ברעט, דעם אַרבעט פּערפאָרמז בעסער ווי די שטאַט פון די קונסט. עס אויך כּולל פֿעיִקייטן וואָס אנדערע מאָדעלס טאָן ניט האָבן. עס אַרבעט אויף עטלעכע בילד טייפּס, אַזוי איר קענען צולייגן עס צו בילדער פון די פּנים, גוף, קאַרטאָאָנס, אאז"ו ו, וואָס איז גאָר גרויס.
פילע נייַע אַפּערטונאַטיז זענען באשאפן דורך דעם. אן אנדער ערד-ברייקינג אַספּעקט פון אונדזער סטראַטעגיע איז אַז עס איצט אַלאַוז איר צו פּראָדוצירן הויך-קוואַליטעט דעעפּפאַקעס ניצן בלויז איין בילד פון די ציל כייפעץ, ענלעך צו ווי מיר טאָן מיט. YOLO פֿאַר כייפעץ דערקענונג.
פּראָצעס פון קריייטינג דעעפּפאַקע מאָדעל
דריי פּראַסעסאַז זענען נייטיק פֿאַר דיפּפאַקע דור: יקסטראַקשאַן, טריינינג און שאַפונג. די הויפּט פונקטן פון יעדער פון די סטאַגעס און ווי זיי פאַרבינדן צו די קוילעלדיק פּראָצעס וועט זיין באדעקט אין דעם אָפּטיילונג.
יקסטראַקשאַן
דעעפּפאַקעס נוצן טיף נעוראַל נעטוואָרקס צו טוישן פנימער און דאַרפֿן אַ פּלאַץ פון דאַטן (בילדער) צו אַרבעטן ריכטיק און קאַנווינסינג. די יקסטראַקשאַן פּראָצעס איז דער בינע אין וואָס אַלע ראָמען פון ווידעא קליפּס זענען יקסטראַקטיד, די פנימער זענען דערקענט און די פנימער זענען אַליינד צו מאַקסאַמייז פאָרשטעלונג.
טראַינינג
אין די טריינינג פאַסע, די נעוראַל נעץ קענען טוישן איין פּנים אין אנדערן. דעפּענדינג אויף די גרייס פון די פּראַקטיסיז און די טריינינג האַמצאָע, די טריינינג קען נעמען עטלעכע שעה אָדער אפילו טעג.
די טריינינג נאָר מוזן זיין פאַרטיק אַמאָל, ווי רובֿ אנדערע נעוראַל נעץ טריינינג. נאָך טריינינג, דער מאָדעל וואָלט זיין ביכולת צו טוישן אַ פּנים פון מענטש א צו מענטש ב.
שאַפונג
נאָך טריינד די מאָדעל, אַ טיף פאַקע קען זיין געשאפן. פראַמעס זענען גענומען פון אַ ווידעא און דעמאָלט אַליינד צו אַלע פנימער. די טריינד נעוראַל נעץ איז דעמאָלט געניצט צו יבערמאַכן יעדער ראַם.
די פארוואנדלען פּנים מוזן זיין מערדזשד מיט דער אָריגינעל ראַם ווי די לעצטע שריט.
בנין דעעפּפאַקע דעטעקשאַן מאָדעל
מאָונטינג און קלאָונינג GitHub רעפּאָ
עס איז אַדוואַנטיידזשאַס צו קענען צו נוצן Google ס גפּוס פריי בשעת איר אַרבעט אין Colab טיף לערנען. אַן נאָך מייַלע איז די פיייקייט פון מאָונטינג אַ Google דרייוו אויף אַ וואָלקן ווירטואַל מאַשין (VM).
מיט גרינג אַקסעס צו אַלע זיין שטאָפּן, דער באַניצער איז ענייבאַלד. דער פּראָגראַם דארף צו אָנקלאַפּן Google דרייוו צו די ווירטואַל מאַשין אין די וואָלקן וועט זיין געפֿונען אין דעם אָפּטיילונג.
ימפּאָרטינג מאָדולעס
איצט מיר וועלן אַרייַנפיר אַלע די נייטיק מאַדזשולז.
עקסאַקיוטינג די מאָדעל
מיר וועלן נוצן אַ ביישפּיל וואָס קאַמביינז אַ נאָך פאָטאָ פון פּוטין (מקור בילד) מיט אַ ווידעא פון אבאמא. דער רעזולטאט איז א ווידיאו ווי פוטין רעדט און געסטיקולירט מיט די פונקטליכע פנים אויסדרוקן וואס אבאמא האט גענוצט ביים דרייוון.
איידער ווייַזנדיק די רעזולטאַט פון די מאָדעל, די מידיאַ וועט זיין לאָודיד און די פאַנגקשאַנז וועט זיין דערקלערט. טשעקפּוינץ וועט דעמאָלט זיין לאָודיד און דער מאָדעל וועט זיין קאַנסטראַקטאַד. נאָך קריייטינג די טיף שווינדל, צוויי פאַרשידענע סטיילז פון אַנאַמיישאַן וועט זיין געוויזן.
פוטין איז אַנימאַטעד דורך אָבאַמאַ ס מווומאַנץ ניצן קאָרעוו שליסל פונט דיספּלייסמאַנט. דער וועג ווי אבאמא'ס פייס ימאָושאַנז און גוף שפּראַך זענען דיפּיקטיד ביוטאַפלי און קלאר פֿאַר פּוטין בעשאַס זיין ווידיאס איז אַמייזינג.
עס זענען עטלעכע מיקראָסקאָפּיק מיסטייקס, ספּעציעל ווען אבאמא הייבן די ייבראַוז און בלינקס מיט די אויגן. די אויסדרוקן זענען נישט פּונקט רעפּליקייטיד אין פּוטין ס ראָמען.
אָן די טיף-פאַקע באַקדראַפּ, דער פוטין פילם וואָלט ויסקומען צו זיין גאַנץ קרעדאַבאַל און עכט אויב עס וואָלט זיין וויוד אויף טעלעוויזיע אָדער געזעלשאַפטלעך מעדיע.
מאָדעל שאַפונג
איצט מיר וועלן נוצן די פאַר-טריינד טשעקפּוינץ צו שאַפֿן אַ גאַנץ מאָדעל.
דעעפּפאַקע דיטעקשאַן
קאָרעוו קייפּוינט דיספּלייסמאַנט איז געניצט צו ופלעבן די זאכן אין דער צעל אונטן. דער ווייַטער צעל ניצט אַבסאָלוט קאָואָרדאַנאַץ אַנשטאָט, אָבער אַלע נומער פּראַפּאָרשאַנז וועט זיין גענומען פֿון די דרייווינג ווידעא אין דעם מאָדע.
ענכאַנסינג רעזולטאַט ניצן אַבסאָלוט קאָואָרדאַנאַץ
איר וועט קענען צו אַנטוויקלען אַ דעפּפאַקע דיטעקשאַן אין דעם שטייגער.
וואָס זענען די ריסקס פון דעעפּפאַקע טעכנאָלאָגיע?
דעעפּפאַקע ווידיאס זענען איצט ענגיידזשינג און פֿאַרוויילערישע צו היטן רעכט צו זייער נייַקייַט. אָבער, עס איז אַ ריזיקירן וואָס קען גיין אויס פון קאָנטראָל ליגנעריש אונטער די ייבערפלאַך פון דעם פּאָנעם מאָדנע טעכנאָלאָגיע.
עס וועט זיכער זיין טשאַלאַנדזשינג צו ויסטיילן צווישן שווינדל און פאַקטיש ווידיאס ווי דעעפּפאַקע טעכנאָלאָגיע האלט צו פאָרויס. פֿאַר באַוווסט פערזענלעכקייטן און סאַלעבריטיז, אין באַזונדער, דאָס קען האָבן שטרענג יפעקץ. דעעפּפאַקעס וואָס זענען בעקיוון מאַלעוואָלאַנט האָבן די פּאָטענציעל צו גאָר שעדיקן קאַריערע און לעבן.
די קען זיין געניצט דורך עמעצער מיט מאַליגנאַנט כוונה צו פאָרן פֿאַר אנדערע און נוצן זייער פרענדז, קרובים און קאָוווערקערז. זיי זענען אויך טויגעוודיק פון אָנצינדן ווערלדווייד קאָנטראָווערסיעס און אפילו מלחמות ניצן פאַלש פילמס פון פרעמד פירער.
סאָף
אין קיצער, מיר זענען אין אַ מאָדנע צייַט און ומגעוויינטלעך סוויווע. מער ווי אלץ, עס איז פּשוט צו פּראָדוצירן פאַלש נייַעס און פילמס און פאַרשפּרייטן זיי. פארשטאנד וואָס איז אמת און וואָס איז נישט ווערט ינקריסינגלי טשאַלאַנדזשינג.
הײַנט, זעט אויס, קאָנען מיר זיך שוין ניט פֿאַרלאָזן אויף אונדזער אייגענע חושים.
טראָץ דעם פאַקט אַז פאַלש ווידעא דעטעקטאָרס זענען דעוועלאָפּעד, עס איז בלויז אַ ענין פון צייט ביז די אינפֿאָרמאַציע ריס איז אַזוי שמאָל אַז אפילו די פיינאַסט שווינדל דעטעקטאָרס וועלן נישט קענען צו באַשליסן צי די ווידעא איז פאַקטיש אָדער נישט.
לאָזן אַ ענטפֿערן