Siirry sisältöön
LaFoto

Tekoälykuvasanasto

Mikä on LoRA?

Pieni koulutettu lisäosa, joka opettaa perusmallille tietyn tyylin, hahmon tai objektin ilman koko mallin uudelleenkoulutusta.

LoRA — lyhenne sanoista Low-Rank Adaptation — on pieni tiedosto, joka muokkaa suurta kuvamallia tuottamaan tietyn tyylin, hahmon, objektin tai estetiikan. Sen sijaan, että kouluttaisit useiden gigatavujen mallin uudelleen, LoRA opettaa tiiviin joukon säätöjä, tyypillisesti kymmenistä satoihin megatavuja, jotka lisätään perusmallin päälle generoinnin aikana.
Pieni messinkinen adapterirengas suuren kameran objektiivin päällä lämpimällä paperilla

Ongelma, jonka LoRAt ratkaisevat

Peruskuvamalli tietää valtavasti yleisesti eikä mitään juuri sinun aiheestasi. Se ei ole nähnyt tuotettasi, hahmoasi, kuvitustyyliäsi eikä kasvojasi. Näiden opettaminen koko mallin uudelleenkoulutuksella vaatii laitteiston ja datan, joihin harvalla on pääsy — ja tuottaa joka variaatiosta uuden moni-gigatavun tiedoston.

Miksi “low rank” tekee siitä pienen

Oivallus on, että erikoistamiseen tarvittava säätö on paljon yksinkertaisempi kuin itse malli. LoRA ei opi uutta arvoa jokaiselle painolle, vaan tiiviin faktorisaation — kaksi pientä matriisia, joiden tulo approksimoi muutoksen — ja se riittää yllättävän hyvin. Tulos on tiedosto, joka on 2–3 kertaluokkaa pienempi kuin muokkaamansa malli ja jonka voi kouluttaa yhdellä kuluttajatason näytönohjaimella minuuteissa tai tunneissa.

Mihin niitä oikeasti koulutetaan

Neljä asiaa hallitsee: Tyyli, jotta kaikki generoitunut tulee yhdessä kuvitus- tai valokuvarajassa. Hahmo, jotta sama henkilö tai olento pysyy johdonmukaisena monissa kuvissa. Objekti — tyypillisesti tuote, jonka on näytettävä täsmälleen itseltään. Ja käsite, jota perusmalli hoitaa huonosti — tietty vaatteen rakenne, arkkitehtuurinen yksityiskohta, erikoislaite.

Pinoaminen, painot ja missä se menee pieleen

Useita LoRAa voi käyttää yhtä aikaa, jokaisella oma voimakkuus — ja juuri siinä on suurin käytännön hankaluus. Kaksi vahvaa tyyli-LoRAa taistelee ja tekee mössöä; liian vahva hahmo-LoRA vuotaa koulutuksensa taustaa joka kuvaan. Yleisin korjaus on laskea painoja poistamisen sijaan — useimmat pinoamisongelmat ovat volyymiongelmia.

Lisenssikysymys, joka ohitetaan

LoRA on johdannainen sekä perusmallista että sen koulutuskuvista, eikä kumpikaan ole automaattisesti sinun jaeltavaksesi. Yhteisön LoRAt kantavat omat lisenssinsä, joista osa kieltää kaupallisen käytön. Ja elävän taiteilijan tyyliin koulutettu LoRA herättää kysymyksen, johon mikään lisenssitiedosto ei anna lopullista vastausta. Tarkista ennen kuin rakennat liiketoiminnan sen varaan.

LoRA pähkinänkuoressa

Lyhenne sanoista
LoRA (Low-Rank Adaptation)
Tiedostokoko
Kymmenistä satoihin MB
Perusmallin koko
Useita GB
Ladattuna yhtä aikaa
Useita, painoilla
Opettaa
Tyylin, hahmon tai objektin
Siirrettävissä mallien välillä
Ei

Ota käyttöön

Missä tämä näkyy

LoRA — questions people ask

Mistä LoRA on lyhenne?
Low-Rank Adaptation. Se viittaa matematiikkaan, joka tekee lisätiedostosta pienen — ei mihinkään kuvaan liittyvään erityisesti.
Kuinka suuri LoRA-tiedosto on?
Tyypillisesti kymmenistä satoihin megatavuja, kun perusmalli on useita gigatavuja.
Tarvitsenko LoRAa hyviin kuviin?
Et. LoRA on sitä varten, että lisäät jotain mitä perusmalli ei vielä tiedä — tuotteesi, hahmosi, tietyn tyylin. Yleiskuville perusmalli on se mitä haluat.
Voinko käyttää useampaa LoRAa kerralla?
Kyllä, jokaiselle oma voimakkuus. Kaksi vahvaa tyyli-LoRAa tappelee; painojen laskeminen ratkaisee yleensä paremmin kuin yhden poistaminen.
Voinko kouluttaa oman LoRAn?
Kyllä, ja se on helpoin tapa räätälöidä mallia — kohtuullinen määrä kuvia ja kuluttajatason näytönohjain riittää yleensä. Laatu riippuu enemmän koulutuskuvien johdonmukaisuudesta kuin määrästä.
Toimiiko LoRA minkä tahansa mallin kanssa?
Ei. LoRA koulutetaan tietylle perusarkkitehtuurille eikä siirry toiseen. Yhden malliperheen LoRA ei lataudu toiseen.
Ovatko LoRAt vapaasti käytettävissä kaupallisesti?
Eivät automaattisesti. Jokaisella on oma lisenssinsä ja perusmallin lisenssi päälle. Osa yhteisön LoRAsta kieltää nimenomaisesti kaupallisen käytön.

Aloita luominen tänään

Luo ensimmäinen kuvasi parhaalla tekoälykuvageneraattorilla.

Muunna lause valmiiksi, fotorealistiseksi kuvaksi sekunneissa — ja hio jokaista yksityiskohtaa. Ei asennusta, ei Discordia, ei GPU:ta.

Liity 4 200+ tekijän joukkoon, jotka käyttävät LaFotoa