SD3.5-Controlnet-8b does not use encoder_hidden_states

In https://github.com/huggingface/diffusers/blob/main/examples/controlnet/train_controlnet_sd3.py#L1338
the encoder_hidden_states are set to prompt_embeds, which is incorrect if we are finetuning sd3.5-controlnet-8b since it does not use encoder_hidden_states as stated in https://github.com/huggingface/diffusers/blob/main/src/diffusers/models/controlnets/controlnet_sd3.py#L406

examples/controlnet/train_controlnet_sd3.py の 1338 行目付近から始め、次に src/diffusers/models/controlnets/controlnet_sd3.py の 406 行目付近にある SD3 ControlNet の実装を読んでください。トレーニング呼び出しの入力と、SD3.5-Controlnet-8b に関するモデルのドキュメント化された動作を比較してください。トレーニングのエントリーポイントが、このモデルが使用しない encoder_hidden_states 入力に依存しなくなれば完了です。

索引モデルが issue の本文から書いたものです。