Η μονάδα ανίχνευσης deepfake είναι ένα εργαλείο που βοηθά τον χρήστη να ανιχνεύει χειρισμούς προσώπου σε εικόνες και βίντεο. Το εργαλείο μπορεί να ανιχνεύσει χειρισμούς που δημιουργούνται από πολλές σύγχρονες προσεγγίσεις δημιουργίας deepfake.
Για μια εικόνα εισόδου, το εργαλείο εφαρμόζει μια διαδικασία ανίχνευσης προσώπου και υπολογίζει μια πρόβλεψη για κάθε ανιχνευμένο πρόσωπο. Οι προβλέψεις πιο κοντά στο 0% σημαίνουν ότι τα αντίστοιχα πρόσωπα θεωρούνται πραγματικά από το μοντέλο, αντίθετα, οι προβλέψεις πιο κοντά στο 100% υποδεικνύουν ένα χειραγωγημένο πρόσωπο. Η αβεβαιότητα του μοντέλου αυξάνεται για προβλέψεις πιο κοντά στο 50%.
Στην τρέχουσα έκδοσή του, το εργαλείο υποστηρίζει μορφές εικόνας JPEG, PNG και TIF και μορφές βίντεο MP4, MOV, MKV, WEBM. Για μια εικόνα εισόδου, το εργαλείο ανιχνεύει όλα τα πρόσωπα στο καρέ και τα ομαδοποιεί σε στοιχεία προσώπου. Αυτά τα στοιχεία αντιστοιχούν σε διαφορετικά άτομα στο καρέ. Για κάθε στοιχείο προσώπου, το μοντέλο ανίχνευσης deepfake υπολογίζει μια πρόβλεψη. Η τελική πρόβλεψη εικόνας είναι ένας μέσος όρος μεταξύ των προβλέψεων των στοιχείων προσώπου. Παρακάτω, υπάρχουν δύο παραδείγματα που δείχνουν τα αποτελέσματα της ανάλυσης deepfake για δύο εικόνες. Στην πρώτη περίπτωση παρουσιάζουμε ένα παράδειγμα με προβλέψεις πιο κοντά στο 0%, που σημαίνει ότι τα αντίστοιχα πρόσωπα θεωρούνται πραγματικά από το μοντέλο, ενώ στη δεύτερη περίπτωση απεικονίζουμε μια άλλη εικόνα με προβλέψεις πιο κοντά στο 100%, που υποδηλώνει ένα χειραγωγημένο πρόσωπο.
Deepfake detection prediction closer to 0%
Η πρόβλεψη ανίχνευσης deepfake πλησιάζει το 100%
Για ένα βίντεο εισόδου, το εργαλείο εφαρμόζει μια διαδικασία τμηματοποίησης πλάνων που τμηματοποιεί το βίντεο σε μέρη που αντιστοιχούν σε μια συνεχή προβολή που γυρίζεται χωρίς διακοπή. Για κάθε καρέ σε ένα πλάνο, το εργαλείο ανιχνεύει όλα τα πρόσωπα στα καρέ του πλάνου και τα ομαδοποιεί σε στοιχεία προσώπου. Αυτά τα στοιχεία αντιστοιχούν σε διαφορετικά άτομα στο πλάνο. Για κάθε στοιχείο προσώπου, το μοντέλο ανίχνευσης deepfake υπολογίζει μια πρόβλεψη. Η πρόβλεψη πλάνου είναι η μέγιστη μεταξύ των προβλέψεων στοιχείων προσώπου. Η τελική πρόβλεψη βίντεο είναι ένας μέσος όρος των προβλέψεων πλάνων.
Παράδειγμα βίντεο με τον Πούτιν σε συνέντευξη
Ανίχνευση ντεφλέ ψεύτικων εικόνων σε τμηματοποίηση βίντεο και λήψεων – ένα άτομο
Παράδειγμα βίντεο με περισσότερα από ένα άτομα που απεικονίζονται στο βίντεο
Ανίχνευση ντεφί ψεύτικων εικόνων σε τμηματοποίηση βίντεο και λήψεων – περισσότερα από ένα άτομα
