Bỏ qua tới nội dung
LaFoto

Thuật ngữ ảnh AI

LoRA là gì?

Một phần bổ sung nhỏ được huấn luyện để dạy cho mô hình nền một phong cách, nhân vật hoặc vật thể cụ thể mà không phải huấn luyện lại toàn bộ mô hình.

LoRA — viết tắt của Low-Rank Adaptation — là một file nhỏ điều chỉnh một mô hình sinh ảnh lớn để tạo ra một phong cách, nhân vật, vật thể hoặc thẩm mỹ cụ thể. Thay vì huấn luyện lại một mô hình nặng tới vài gigabyte, LoRA chỉ huấn luyện một tập điều chỉnh gọn nhẹ, thường vài chục đến vài trăm megabyte, được áp lên mô hình nền ngay khi sinh ảnh.
Một vòng chuyển bằng đồng thau nhỏ đặt trên ống kính máy ảnh lớn trên giấy tông ấm

Bài toán LoRA giải quyết

Một mô hình nền biết cực nhiều thứ chung chung nhưng không biết gì về chủ thể riêng của quý vị. Nó chưa từng thấy sản phẩm của quý vị, nhân vật của quý vị, phong cách minh họa của quý vị hay khuôn mặt của quý vị. Dạy nó những thứ đó bằng cách huấn luyện lại toàn bộ đòi hỏi phần cứng và dữ liệu ngoài tầm với của hầu hết mọi người, và tạo ra thêm một file nhiều gigabyte cho mỗi biến thể.

Vì sao “low rank” khiến nó nhỏ

Nhận định then chốt là điều chỉnh cần có để chuyên biệt hóa mô hình đơn giản hơn bản thân mô hình rất nhiều. Thay vì học một giá trị mới cho mọi weight, LoRA học một phân rã gọn — hai ma trận nhỏ có tích xấp xỉ được thay đổi — và xấp xỉ đó tỏ ra đủ tốt. Kết quả là một file nhỏ hơn mô hình nó chỉnh hai đến ba bậc độ lớn, có thể huấn luyện trên một card đồ họa tiêu dùng chỉ trong vài phút đến vài giờ.

Mọi người thực sự huấn luyện lên cái gì

Bốn nhóm chính. Một phong cách, để mọi thứ sinh ra đều cùng một ngôn ngữ minh họa hoặc nhiếp ảnh. Một nhân vật, để một người hay sinh vật nhất quán xuất hiện xuyên suốt nhiều ảnh. Một vật thể, thường là sản phẩm cần giống hệt chính nó. Và một khái niệm mô hình nền xử lý kém — cấu trúc may mặc cụ thể, chi tiết kiến trúc, thiết bị ngách.

Xếp chồng, weight và nơi mọi thứ sai

Có thể áp nhiều LoRA cùng lúc, mỗi cái với một mức mạnh riêng — và đa số khó khăn thực tế nằm ở đây. Hai LoRA phong cách đều để mạnh sẽ “đánh nhau” và ra bệch bọm; một LoRA nhân vật quá nặng sẽ “rò” nền huấn luyện vào mọi ảnh. Cách sửa thường là hạ weight thay vì gỡ file — hầu hết vấn đề khi xếp chồng là vấn đề “âm lượng”.

Câu chuyện giấy phép hay bị bỏ qua

Một LoRA là dẫn xuất của cả mô hình nền lẫn tập ảnh dùng để huấn luyện nó, và không có cái nào mặc nhiên thuộc quyền quý vị phân phối. LoRA cộng đồng có giấy phép riêng, một số cấm dùng thương mại, và một LoRA huấn luyện trên tác phẩm của họa sĩ còn sống để sao chép phong cách của họ đặt ra câu hỏi mà không giấy phép nào giải quyết dứt điểm. Hãy kiểm tra trước khi xây dựng kinh doanh dựa trên nó.

Tóm lược về LoRA

Viết tắt của
Thích nghi hạng thấp
Kích thước tệp
Vài chục đến vài trăm MB
Kích thước mẫu nền
Vài GB
Nạp đồng thời
Nhiều cái, kèm trọng số
Truyền dạy
Một phong cách, nhân vật hoặc đối tượng
Di động giữa các mẫu
Không

Ứng dụng thực tế

Nơi xuất hiện

LoRA — questions people ask

LoRA viết tắt của gì?
Low-Rank Adaptation. Nó chỉ kỹ thuật toán học giúp file bổ sung nhỏ đi, chứ không nói riêng gì về hình ảnh.
File LoRA nặng bao nhiêu?
Thường từ vài chục đến vài trăm megabyte, so với vài gigabyte cho mô hình nền mà nó chỉnh.
Có cần LoRA để sinh ảnh đẹp không?
Không. LoRA tồn tại để thêm thứ mô hình nền chưa biết — sản phẩm của quý vị, nhân vật của quý vị, một phong cách cụ thể. Với ảnh tổng quát, mô hình nền là thứ quý vị cần.
Có thể dùng hơn một LoRA cùng lúc không?
Có, mỗi cái với một mức mạnh riêng. Hai LoRA phong cách mạnh thường xung đột; hạ weight thường giải quyết tốt hơn là bỏ bớt một cái.
Tôi có thể tự huấn luyện LoRA không?
Có, và đây là dạng tùy biến mô hình dễ tiếp cận nhất — một tập ảnh vừa phải và một card đồ họa tiêu dùng thường là đủ. Chất lượng phụ thuộc nhiều vào độ nhất quán của ảnh huấn luyện hơn là số lượng của chúng.
LoRA dùng được với mọi mô hình không?
Không. Một LoRA được huấn luyện theo một kiến trúc nền cụ thể và sẽ không chuyển sang kiến trúc khác. LoRA của một họ mô hình sẽ không nạp vào họ khác.
LoRA có mặc nhiên được dùng thương mại không?
Không. Mỗi LoRA có giấy phép riêng, và giấy phép mô hình nền cũng áp dụng. Một số LoRA cộng đồng cấm dùng cho mục đích thương mại.

Bắt đầu sáng tạo hôm nay

Tạo bức ảnh đầu tiên với trình tạo ảnh AI tốt nhất.

Biến một câu thành ảnh hoàn thiện, như thật trong vài giây — rồi chỉnh từng chi tiết. Không cần cài đặt, không cần Discord, không cần GPU.

Tham gia 4.200+ creator đang dùng LaFoto