ข้ามไปยังเนื้อหา
LaFoto

อภิธานศัพท์ภาพด้วย AI

LoRA คืออะไร

ไฟล์เสริมขนาดเล็กที่สอนโมเดลฐานให้รู้จักสไตล์ ตัวละคร หรือวัตถุเฉพาะ โดยไม่ต้องเทรนโมเดลทั้งก้อนใหม่

LoRA — ย่อจาก Low-Rank Adaptation — คือไฟล์ขนาดเล็กที่ปรับโมเดลภาพขนาดใหญ่ให้สร้างสไตล์ ตัวละคร วัตถุ หรือสุนทรียะเฉพาะอย่างได้ โดยไม่ต้องเทรนโมเดลที่มีขนาดหลายกิกะไบต์ใหม่ทั้งหมด LoRA จะเรียนรู้ชุดการปรับแต่งที่กะทัดรัด โดยมากมีขนาดตั้งแต่ไม่กี่สิบถึงไม่กี่ร้อยเมกะไบต์ และถูกนำไปประยุกต์กับโมเดลฐานในช่วงสร้างภาพ
แหวนอะแดปเตอร์ทองเหลืองชิ้นเล็กวางบนเลนส์กล้องขนาดใหญ่บนกระดาษโทนอุ่น

ปัญหาที่ LoRA เข้ามาแก้

โมเดลภาพฐานรู้เรื่องทั่วไปมากมาย แต่ไม่รู้อะไรเกี่ยวกับหัวข้อเฉพาะของท่าน มันไม่เคยเห็นสินค้าของท่าน ตัวละครของท่าน สไตล์ภาพประกอบของท่าน หรือใบหน้าของท่าน การสอนสิ่งเหล่านี้ด้วยการเทรนโมเดลเต็มต้องใช้ฮาร์ดแวร์และดาต้าจำนวนมากเกินเอื้อม และยังได้ไฟล์ใหม่ขนาดหลายกิกะไบต์สำหรับทุกความต่างอีกด้วย

เหตุใด “low rank” จึงทำให้ไฟล์เล็ก

แก่นไอเดียคือ การปรับที่ต้องใช้เพื่อทำให้โมเดลเชี่ยวชาญเฉพาะทางนั้นง่ายกว่าตัวโมเดลมหาศาล แทนที่จะเรียนค่าน้ำหนักใหม่ทุกตัว LoRA เรียนการแฟกทอไรซ์แบบกะทัดรัด — เมทริกซ์เล็กๆ สองตัวที่คูณกันแล้วประมาณการเปลี่ยนแปลงได้พอเหมาะ — และการประมาณนั้นกลับเพียงพอ ผลลัพธ์จึงเป็นไฟล์ที่เล็กกว่าโมเดลต้นทางหลายลำดับขั้น เทรนได้ด้วยการ์ดจอผู้บริโภคใบเดียวในเวลาไม่กี่นาทีถึงไม่กี่ชั่วโมง

ผู้ใช้เทรน LoRA กับอะไรจริงๆ

มีสี่อย่างที่โดดเด่น สไตล์ เพื่อให้ทุกภาพออกมาในโทนภาพประกอบหรือภาพถ่ายแบบหนึ่ง ตัวละคร เพื่อให้คนหรือสิ่งมีชีวิตตัวเดิมคงอยู่สม่ำเสมอข้ามหลายภาพ วัตถุ มักเป็นสินค้า ซึ่งต้องเหมือนตัวจริงทุกระเบียด และคอนเซ็ปต์ที่โมเดลฐานทำได้ไม่ดี — โครงสร้างเสื้อผ้าแบบหนึ่ง รายละเอียดสถาปัตย์ อุปกรณ์เฉพาะทางในนิชเล็กๆ

การซ้อน การตั้งน้ำหนัก และจุดที่มักพัง

สามารถใช้ LoRA หลายตัวพร้อมกัน โดยตั้งความแรงของแต่ละตัวได้ ซึ่งก็มักเป็นที่มาของปัญหาจริง LoRA แบบสไตล์สองตัวที่ตั้งแรงสุดจะตีกันจนภาพเละ LoRA แบบตัวละครที่แรงเกินไปจะทำให้ฉากฝึกติดมาทุกภาพ วิธีแก้ทั่วไปคือ “ลดน้ำหนัก” มากกว่าถอดไฟล์ — ปัญหาจากการซ้อนส่วนใหญ่เป็นปัญหา “ดังเกินไป”

ประเด็นสัญญาอนุญาตที่มักถูกข้าม

LoRA เป็นงานดัดแปลงของทั้งโมเดลฐานและภาพฝึก และทั้งสองอย่างนั้นไม่ได้เป็นของท่านโดยอัตโนมัติที่จะเผยแพร่ต่อ LoRA จากชุมชนมีสัญญาอนุญาตของตนเอง บางฉบับห้ามใช้เชิงพาณิชย์ และ LoRA ที่ฝึกจากงานของศิลปินที่ยังมีชีวิตเพื่อเลียนสไตล์นั้น เป็นคำถามที่ไม่มีไฟล์สัญญาใดชี้ขาดได้ ตรวจสอบให้ชัดก่อนจะสร้างธุรกิจบนมัน

ภาพรวมของ LoRA

ย่อมาจาก
การปรับแบบอันดับต่ำ
ขนาดไฟล์
หลักสิบถึงหลักร้อย MB
ขนาดโมเดลฐาน
หลาย GB
โหลดพร้อมกัน
ได้หลายตัว พร้อมกำหนดน้ำหนัก
สอนได้
สไตล์ คาแรกเตอร์ หรือวัตถุ
ย้ายข้ามโมเดลได้
ไม่ได้

นำไปใช้จริง

สิ่งนี้อยู่ที่ไหนบ้าง

เครื่องมือสร้างภาพหลักตัวสร้างหลัก — จากข้อความเป็นภาพสำเร็จเปิดเรียกดูตัวอย่าง prompt จริงตัวอย่าง 120 ภาพ พร้อม prompt ที่ใช้จริงเปิดภาพสู่ภาพเริ่มจากรูปที่มีอยู่เปิดตัวแก้ไขภาพถ่าย AIแก้เฉพาะส่วนของภาพ ที่เหลือคงเดิมเปิดตัวขยายความละเอียดภาพ AIขยายได้ถึง 4K โดยไม่เละพร่าเปิดปรับคุณภาพภาพถ่ายปรับแสง ลดนอยส์ และกู้ภาพเก่าเปิดลบวัตถุแบบมาสก์ลบแบบทำหน้ากาก พร้อมเติมฉากหลังให้กลมกลืนเปิดเบลอฉากหลังคำนวณระยะชัดลึก ไม่ใช่เบลอทั้งภาพเปิดเติมสีให้ภาพเก่าเติมสีสมจริงให้ภาพขาวดำเปิดสร้างโลโก้โลโก้อ่านออกแม้ย่อเหลือ 16 พิกเซลเปิดตัวสร้างรอยสัก AIออกแบบที่สักจริงได้เปิดสร้างภาพประกอบสายภาพวาดและอิลลัส ไม่ใช่ภาพถ่ายเปิดสร้างภาพเฮดช็อตพอร์ตเทรตคุณภาพสตูดิโอ โดยไม่ต้องมีสตูดิโอเปิดข้อกำหนดรูปถ่ายพาสปอร์ตสเปกที่แน่นอน และวิธีทำให้ผ่านเปิดออกแบบภายในด้วย AIปรับสไตล์ห้องจากรูปถ่ายของท่านเปิดอภิธานศัพท์ภาพ AIอธิบาย seed, denoise, inpaintingเปิด

LoRA — questions people ask

LoRA ย่อมาจากอะไร
Low-Rank Adaptation เป็นชื่อเทคนิคทางคณิตศาสตร์ที่ทำให้ไฟล์เสริมมีขนาดเล็ก ไม่ได้เกี่ยวกับภาพโดยเฉพาะ
ไฟล์ LoRA มีขนาดเท่าไร
โดยทั่วไปตั้งแต่หลักสิบจนถึงไม่กี่ร้อยเมกะไบต์ เมื่อเทียบกับโมเดลฐานที่มีขนาดหลายกิกะไบต์
ต้องมี LoRA จึงจะสร้างภาพสวยได้ไหม
ไม่จำเป็น LoRA มีไว้เติมสิ่งที่โมเดลฐานยังไม่รู้ — สินค้าของท่าน ตัวละครของท่าน สไตล์เฉพาะ สำหรับงานทั่วไป โมเดลฐานคือสิ่งที่ต้องการ
ใช้ LoRA มากกว่าหนึ่งตัวพร้อมกันได้ไหม
ได้ และตั้งความแรงแยกกันได้ LoRA แบบสไตล์ที่แรงทั้งคู่มักตีกัน การลดน้ำหนักมักแก้ปัญหาได้ดีกว่าถอดออก
ฝึก LoRA เองได้ไหม
ได้ และเป็นรูปแบบการปรับแต่งโมเดลที่เข้าถึงได้ที่สุด — ใช้ภาพชุดเล็กที่สม่ำเสมอและการ์ดจอผู้บริโภคก็มักเพียงพอ คุณภาพขึ้นกับความสม่ำเสมอของภาพฝึกมากกว่าจำนวนภาพ
LoRA ใช้ได้กับทุกโมเดลไหม
ไม่ได้ LoRA ถูกฝึกกับสถาปัตยกรรมฐานเฉพาะ และจะย้ายไปตระกูลโมเดลที่ไม่เกี่ยวกันไม่ได้ LoRA ของตระกูลหนึ่งจะโหลดเข้าอีกตระกูลหนึ่งไม่ได้
LoRA ใช้เชิงพาณิชย์ได้ฟรีหรือไม่
ไม่โดยอัตโนมัติ แต่ละไฟล์มีสัญญาอนุญาตของตนเอง และใบอนุญาตของโมเดลฐานก็มีผลด้วย LoRA จากชุมชนบางไฟล์ระบุชัดว่า “ห้ามใช้เชิงพาณิชย์”

คำศัพท์ภาพด้วย AI ที่เกี่ยวข้อง

เริ่มสร้างวันนี้

สร้างภาพแรกของท่านด้วยตัวสร้างภาพ AI ที่ดีที่สุด

แปลงประโยคเป็นภาพจริงสมจริงในไม่กี่วินาที — แล้วปรับรายละเอียดได้ครบ ไม่ต้องตั้งค่า ไม่ต้องใช้ Discord หรือ GPU

เข้าร่วมกับครีเอเตอร์ 4,200+ คนที่ใช้ LaFoto