This is an experiment lora only train with 1 image.
adamw constant 1e->
trained with my custom training script https://github.com/lrzjason/T2ITrainer
The lora is a dora with diffusers format.
You could load the lora with the custom hunyuanDit pipeline in T2ITrainer.
It added the SD3LoraLoaderMixin to the pipeline.
Code:
lora_state_dict = HunyuanDiTPipeline.lora_state_dict(lora_path) HunyuanDiTPipeline.load_lora_into_transformer(lora_state_dict,transformer_)
1. Dieses Modell dient nur Lernzwecken. Urheber- und Auslegungsrechte liegen beim Originalautor.
2. Bist du der Originalautor eines Modells, kontaktiere uns bitte zur Authentifizierung über unsere offiziellen Kanäle. Wir schützen die Rechte aller Schöpfer. Hier klicken, um es zu verifizieren.
