Olet ehkä nähnyt videon Nicholas Cagen kasvoista transponoituneena toiseen hahmoon, joka kiertää Internetissä^{(rounds on the internet)} äskettäin. Ei, emme tarkoita leikettä Face/Off -elokuvasta . Nämä ovat kohtauksia useista elokuvista, joissa Nicholas Cage ei todellakaan näytellyt, mutta ne näyttävät todella vakuuttavilta. Miten he saivat tämän irti?

No, vastaus ei ole "noituutta", vaan teknologiaa, joka on kutsuttu "deepfake" ja se aiheuttaa melkoista meteliä eri toimialoilla ja yhteisöissä.

Mikä on "deepfake"?

Sana "deepfake" tulee termistä "deep learning" ja tietysti "fake". Syväoppiminen^(Deep) on koneoppimisen erikoisala, joka on jälleen osa tekoälyn^{(Artificial Intelligence)} kokonaisaluetta .

Tietojenkäsittelytehon dramaattisen kasvun ja äskettäin löydettyjen tietokoneiden tapojen käsitellä ja analysoida valtavan määrän dataa todellisesta maailmasta ansiosta tietokoneet voivat nyt yhtäkkiä tehdä asioita, joita useimmat meistä eivät koskaan voisi kuvitella. Deepfakesit^(Deepfakes) käyttävät tätä tekniikkaa ihmisten kuvien syntetisoimiseen ja luoden valokuvia tai videoita asioista, joita ihmiset eivät koskaan tehneet tai sanoneet. 

Kuinka Deepfake-tekniikka toimii?

Deep learning, joka tukee deepfake-menetelmiä, kuvaa hermoverkkosimuloinnin nykyaikaista soveltamista massiivisiin tietokokonaisuuksiin. Neuroverkot eivät ole uusi käsite tai tekniikka, mutta nykyaikaan asti ne ovat olleet melko alkeellisia.

Keinotekoinen hermoverkko simuloi ainakin jossain määrin oppimisprosessia, joka tapahtuu biologisissa aivoissa. Kun opit tai muuten käsittelet ulkomaailmaa, aivosolujesi väliset yhteydet muuttuvat.

Ne muodostavat piirejä ja loogisia rakenteita vahvistaen joitain yhteyksiä ja heikentäen toisia. Kun opit jotain, kuten opit ajamaan tai pelaamaan tennistä, aivopiireistä tulee nopeita ja tehokkaita. Lopulta olet niin hyvä jossakin, ettei sinun tarvitse edes ajatella tekeväsi sitä.

Se on pohjimmiltaan sama asia kuin syväoppimisjärjestelmässä. Se tarkastelee kasoista esimerkkejä jostakin ja tulee sitten asteittain paremmin "ymmärtämään sitä".

Deepfakejen tapauksessa ohjelmisto tarkastelee esimerkkejä kasvoista, jotka haluat transponoida, sekä videota, jolle haluat transponoida ne. Riittävällä harjoittelulla se voi lopulta syntetisoida kasvot, jotka vastaavat harjoitustietoja, ja peittää ne sitten saumattomasti muille kasvoille.

Mitä ohjelmistoja^(Software) käytetään syväväärennösten tekemiseen?

On olemassa useita sovelluksia, joiden avulla ihmiset voivat tehdä syväväärennöksiä. FakeApp oli ensimmäinen tuntemamme sovellus, jonka tarkoituksena oli antaa tavallisille ihmisille mahdollisuus tehdä syvällistä väärennettyä sisältöä. Verkkosivusto on nyt lakannut olemasta, ja kopion löytäminen ei ole ollenkaan helppoa.

Deepfakejen valmistajat ovat nyt suurelta osin siirtyneet DeepFaceLab -nimiseen sovellukseen , jota isännöidään GitHubissa^(GitHub) ja joka on synnyttänyt loputtoman joukon opetusohjelmia Redditin^(Reddit) kaltaisiin paikkoihin .

Deepfaken tekeminen

Tätä artikkelia ei ole tarkoitettu opetusohjelmaksi, joten aiomme antaa yleiskatsauksen syväväärennösten tekemiseen käytännössä, mutta emme tarjoa tarkkoja ohjeita sellaisen tekemiseen itse.

Tähän on muutamia syitä, mutta tärkein niistä on, että syväväärennösten tekemisen laillisuus on erittäin kiistanalainen. Aivan kuten emme tarjoa tarkkoja ohjeita piraattiohjelmistojen tai muun laittoman toiminnan auttamiseksi, emme anna vaiheittaisia ​​ohjeita syväväärennösten tekemiseen.

Lisäksi DeepFaceLabin^{(DeepFaceLab)} varsinainen luoja on julkaissut ohjelmistolle vaiheittaisen opetusvideon^{(step-by-step video tutorial)} , jota kuka tahansa voi seurata, mikäli haluaa ottaa vastuun tällaisesta riskistä.

Saadaksesi yleiskuvan siitä, kuinka hyviä näistä asioista on tullut, tutustu tähän verkkosivustoon^{(check out this website)} , jolle luodaan uusi valokuva henkilöstä, jota ei ole olemassa, kun päivität sivua.

Tavoitteemme on auttaa sinua ymmärtämään tekniikkaa, sillä tulet kohtaamaan sitä yhä enemmän ajan myötä. Näin ollen nämä ovat DeepFaceLabin syväfaken^{(DeepFaceLab)} luomisen laajat vaiheet .

Kun olet ladannut ja purkanut DeepFaceLabin^{(DeepFaceLab)} , edessäsi on kansio, joka sisältää monia muita kansioita ja sarjan erätiedostoja.

Siellä on kansio nimeltä "työtila", joka sisältää harjoitusmallit, lähdevideot ja tulosteen. DeepFaceLab toimii tiettyjen tiedostonimien ja -sijaintien kanssa, jotta erätiedostot voivat toimia. Esimerkiksi lähdetiedoston nimi on aina "data_src" ja kohteen nimi on "data_dst".

Ohjelmistoliittymää ei ole, kuten useimmat ihmiset tietävät. Vain luettelo numeroituista erätiedostoista, jotka edustavat prosessin vaiheita. Ensin^(First) lähde- ja kohdevideoiden kehykset puretaan kuvatiedostoina.

Sitten suoritetaan useita analyysivaiheita, joita seuraa GPU-pohjainen koulutus, jossa hermoverkko oppii, mitä se tarvitsee kahden videon kasvoista mallin rakentamiseksi. Lopulta tuotetaan uusi yhdistelmävideo.

Deepfakesin väärinkäyttö

Kuten edellä mainittiin, syväväärennökset ovat erittäin kiistanalaisia. Se saattaa rikkoa voimassa olevia lakeja joissakin maissa, ja uusia lakeja ollaan valmisteilla teknologian ja sen sovellusten käsittelemiseksi.

Deepfakeilla voidaan luoda huijauksia, kuten videoita presidentistä sanomassa hulluja asioita^{(video of a president saying crazy things)} . Sitä voidaan käyttää sijoittamaan ihmisiä pornografisiin elokuviin tarkoituksella tai häiritsemällä tai muuten vahingoittamalla heitä.

Kuten voit luultavasti kuvitella, voit tehdä paljon vahinkoa vakuuttavalla syväväärennöksellä, ja kiinnijäämisen seuraukset voivat olla paljon vakavampia lähitulevaisuudessa.

Kyseenalaista kaikki

Nyt kun tämä tekniikka on olemassa ja toimii yhtä hyvin kuin se toimii, meidän on katsottava mediaa, kuten videoita, aivan uudessa valossa. Jos joku levittää sosiaalisessa mediassa videota, jossa kuuluisa henkilö tai poliitikko sanoo tai tekee jotain kiistanalaista, sinun on ensin kysyttävä, onko video edes totta.

Useimmat huonosti tehdyt syväväärennökset ovat ilmeisesti väärennöksiä, kun tiedät mitä etsiä ja olet nähnyt muutaman. Joissakin tapauksissa jopa koulutetulla silmällä voi kuitenkin olla vaikeuksia kertoa, että jokin CG-manipulaatio tapahtuu, ja tekniikan kehittyessä siitä tulee lopulta mahdotonta.

What is a Deepfake and How Are They Made?

You may have seen a video of Nicholas Cage’s face tranѕposed onto another character dоing the rounds on the internet recently. No, we don’t mean a clip from the movie Face/Off. These are scenes from various movies in which Nicholas Cage did definitely not play, yet they look very convincing indeed. How did they pull this off?

Well, the answer isn’t “witchcraft”, but a technology that has been dubbed “deepfake” and it’s causing quite a ruckus in various industries and communities.

What is a “Deepfake”?

The word “deepfake” comes from the term “deep learning” and of course “fake”. Deep learning is a specialized branch of machine learning,  which is again part of the overall area of Artificial Intelligence.

With the dramatic rise in computing power and newly-discovered ways for computers to process and analyze massive amount of data from the real world, computers can now suddenly do things most of us could never imagine. Deepfakes apply this technology to synthesize human images, creating photos or videos of things those people never did and never said. 

How Does Deepfake Technology Work?

Deep learning, which underpins deepfake methods, describes the modern application of neural net simulation to massive data sets. Neural nets are not a new concept or technology, but until modern times they have been pretty rudimentary.

An artificial neural net simulates the learning process that happens in biological brains, at least to some extent. When you learn or otherwise deal with the outside world, the connections between your brain cells change.

They form circuits and logical structures, strengthening some connections and weakening others. As you master something, like learning to drive or play tennis, those brain circuits become fast and efficient. Eventually you are so good at something that you don’t even have to think about doing it.

That’s essentially the same thing that happens with a deep learning system. It looks at heaps of examples of something and then becomes progressively better at “understanding it”.

In the case of deepfakes the software looks at examples of the face you want to transpose as well as the video you want to transpose it to. With enough training it can eventually synthesize a face that matches the training data and then seamlessly overlay it on any other face.

What Software is Used to Make Deepfakes?

There are a number of applications that allow people to make deepfakes. FakeApp was the first app we know of aimed at giving normal people a shot at making deepfake content. The website it now defunct and finding a copy is not easy at all.

Makers of deepfakes have now largely moved on to an application called DeepFaceLab, which is hosted on GitHub and has spawned an endless stream of tutorials on places like Reddit.

Making a Deepfake

This article is not meant to be a tutorial, so we are going to provide an overview of how deepfakes are made in practice, but not provide exact steps on how to make one yourself.

There are a few reasons for this, but the main one is that the legality of making deepfakes is highly-contentious. Just as we wouldn’t provide exact steps to help you pirate software or do other illegal activities, we won’t give step-by-step instructions for making deepfakes.

Besides, the actual creator of DeepFaceLab has released a step-by-step video tutorial for the software which anyone can follow along, should they wish to take responsibility for such a risk.

To get a gist of how good this stuff has become, check out this website where a new photograph of a person who does not exist is generated when you refresh the page.

Our goal is to help you understand the technology, since you are bound to encounter it more and more as time goes by. With that being said, these are the broad phases of creating a deepfake with DeepFaceLab.

After downloading and unzipping DeepFaceLab you are faced with a folder containing many other folders and a series of batch files.

There’s a folder called “workspace” which contains the training models, the source videos and the output. DeepFaceLab works with specific file names and locations, so that the batch files can work. For example, the source file is always named “data_src” and the destination is named “data_dst”.

There is no software interface as most people know it. Just a list of numbered batch files representing the steps of the process. First the source and destination videos have their frames extracted as picture files.

Then several analysis steps are run, followed by GPU-based training, where the neural net learns what it needs about the faces in the two videos to build a model. Finally a new composite video is produced.

Misuse of Deepfakes

As we mentioned above, deepfakes are very controversial. It may violate existing laws in some countries and new laws are in the works to deal with the technology and its applications.

Deepfakes can be used to create hoaxes, such as a video of a president saying crazy things. It can be used to insert people into pornographic films with the purpose or harassing or otherwise harming them.

As you can probably imagine, you could do a lot of damage with a convincing deepfake and the consequences if you are caught may become much more severe in the near future.

Question Everything

Now that this technology exists and works as well as it does, it means we have to look at media like videos in a whole new light. If someone circulates a video on social media of a famous person or politician saying or doing something controversial, you’ll first have to ask if the video is even real.

Most poorly-done deepfakes are obviously fake, once you know what to look for and have seen a few. However, in some cases even a trained eye may have trouble telling that some sort of CG manipulation is happening and as the tech improves it will eventually become impossible.

Related posts

• 3 tapaa ottaa valokuva tai videota Chromebookilla

• Kuinka tunnistaa tietokoneen ja sähköpostin valvonta- tai vakoiluohjelmisto

• Litteän näytön tekniikka, joka on poistettu mysteeristä: TN, IPS, VA, OLED ja paljon muuta

• Caps Lockin ottaminen käyttöön tai poistaminen käytöstä Chromebookissa

• 4 tapaa löytää parhaat Internet-vaihtoehdot (ISP) alueellasi

• Kuinka löytää muistoja Facebookista

• Discord ei avaudu? 9 tapaa korjata

• Emojien lisääminen Wordiin, Google-dokumentteihin ja Outlookiin

• Kuinka vaihtaa kieltä Netflixissä

• Leikkeen jakaminen Adobe Premiere Prossa

• Discordin spoileritunnisteiden käyttäminen

• 10 parasta tapaa suojata tietokoneesi lapsilta

• Kuinka etsiä ja löytää jonkun poistettuja twiittejä

• Kuinka avata tiedosto ilman laajennusta

• Käynnistyykö tietokoneesi satunnaisesti itsestään?

• Kuinka mykistää joku Discordissa

• Kuinka ladata Twitch-videoita

• Steamin "Odottaa tapahtumaa" -virheen korjaaminen

• Kuinka ladata ja asentaa Peacock Firestickiin

• Kuinka lähettää anonyymi tekstiviesti, jota ei voida jäljittää sinulle