Diffusers documentation
KDPM2DiscreteScheduler
KDPM2DiscreteScheduler
El KDPM2DiscreteScheduler se inspira en el artículo Elucidating the Design Space of Diffusion-Based Generative Models, y el programador fue portado y creado por Katherine Crowson.
El código original se puede encontrar en crowsonkb/k-diffusion.
KDPM2DiscreteScheduler
clase diffusers.KDPM2DiscreteScheduler
< source >( num_train_timesteps: int = 1000beta_start: float = 0.00085beta_end: float = 0.012beta_schedule: str = 'linear'trained_betas: numpy.ndarray | list[float] | None = Noneuse_karras_sigmas: bool = Falseuse_exponential_sigmas: bool = Falseuse_beta_sigmas: bool = Falseprediction_type: str = 'epsilon'timestep_spacing: str = 'linspace'steps_offset: int = 0 )
Parámetros
- num_train_timesteps (
int, por defecto1000) — El número de pasos de difusión para entrenar el modelo. - beta_start (
float, por defecto0.00085) — El valor inicial debetapara la inferencia. - beta_end (
float, por defecto0.012) — El valor final debeta. - beta_schedule (
str, por defecto"linear") — El plan de betas, una correspondencia desde un rango de betas hasta una secuencia de betas para dar pasos al modelo. Elija entrelinearoscaled_linear. - trained_betas (
np.ndarrayolist[float], opcional) — Pase un array de betas directamente al constructor para omitirbeta_startybeta_end. - use_karras_sigmas (
bool, por defectoFalse) — Si se deben usar sigmas de Karras para los tamaños de paso en el plan de ruido durante el proceso de muestreo. Si esTrue, los sigmas se determinan según una secuencia de niveles de ruido {σi}. - use_exponential_sigmas (
bool, por defectoFalse) — Si se deben usar sigmas exponenciales para los tamaños de paso en el plan de ruido durante el proceso de muestreo. - use_beta_sigmas (
bool, por defectoFalse) — Si se deben usar beta sigmas para los tamaños de paso en el plan de ruido durante el proceso de muestreo. Consulte Beta Sampling is All You Need para obtener más información. - prediction_type (
str, defaults to"epsilon") — Prediction type of the scheduler function; can beepsilon(predicts the noise of the diffusion process),sample(directly predicts the noisy sample) orv_prediction` (see section 2.4 of Imagen Video paper). - timestep_spacing (
str, por defecto"linspace") — La forma en que deben escalarse los pasos de tiempo. Consulte la tabla 2 de Common Diffusion Noise Schedules and Sample Steps are Flawed para obtener más información. - steps_offset (
int, por defecto0) — Un desplazamiento que se suma a los pasos de inferencia, tal como lo requieren algunas familias de modelos.
KDPM2DiscreteScheduler se inspira en DPMSolver2 y el Algoritmo 2 del artículo Elucidating the Design Space of Diffusion-Based Generative Models.
Este modelo hereda de SchedulerMixin y ConfigMixin. Consulta la documentación de la clase superior para los métodos genéricos que la biblioteca implementa para todos los programadores, como la carga y el guardado.
add_noise
< source >( original_samples: Tensornoise: Tensortimesteps: Tensor ) → torch.Tensor
Parámetros
- original_samples (
torch.Tensor) — Las muestras originales a las que se les añadirá ruido. - noise (
torch.Tensor) — El tensor de ruido que se añadirá a las muestras originales. - timesteps (
torch.Tensor) — Los pasos de tiempo en los que se añade ruido, determinando el nivel de ruido a partir de la programación.
Devuelve
torch.Tensor
Las muestras ruidosas con ruido añadido escalado según la programación de pasos de tiempo.
Añade ruido a las muestras originales según el programa de ruido en los pasos de tiempo especificados.
index_for_timestep
< source >( timestep: typing.Union[float, torch.Tensor]schedule_timesteps: typing.Optional[torch.Tensor] = None ) → int
Parámetros
- timestep (
floatotorch.Tensor) — El valor de timestep que se debe buscar en la programación. - schedule_timesteps (
torch.Tensor, opcional) — El calendario de pasos de tiempo en el que buscar. Si esNone, usaself.timesteps.
Devuelve
int
El índice del paso de tiempo en la programación. Para el primer paso, devuelve el segundo índice si existen múltiples coincidencias para evitar omitir una sigma al comenzar a mitad de la programación (p. ej., para imagen a imagen).
Encuentra el índice de un paso de tiempo dado en la programación de pasos de tiempo.
scale_model_input
< source >( sample: Tensortimestep: typing.Union[float, torch.Tensor] ) → torch.Tensor
Garantiza la interoperabilidad con los programadores que necesitan escalar la entrada del modelo de desruido en función del paso temporal actual.
set_begin_index
< source >( begin_index: int = 0 )
Establece el índice inicial para el programador. Esta función debe ejecutarse desde la tubería antes de la inferencia.
set_timesteps
< source >( num_inference_steps: intdevice: typing.Union[str, torch.device, NoneType] = Nonenum_train_timesteps: int | None = None )
Parámetros
- num_inference_steps (
int) — El número de pasos de difusión utilizados al generar muestras con un modelo preentrenado. - device (
strotorch.device, opcional) — El dispositivo al que deben moverse los timesteps. Si esNone, los timesteps no se mueven. - num_train_timesteps (
int, opcional) — El número de pasos de difusión utilizados para entrenar el modelo. Si esNone, se utilizaself.config.num_train_timesteps.
Establece los pasos discretos utilizados para la cadena de difusión (para ejecutarse antes de la inferencia).
paso
< source >( model_output: typing.Union[torch.Tensor, numpy.ndarray]timestep: typing.Union[float, torch.Tensor]sample: typing.Union[torch.Tensor, numpy.ndarray]return_dict: bool = True )
Parámetros
- model_output (
torch.Tensoronp.ndarray) — La salida directa del modelo de difusión aprendido. - timestep (
floatotorch.Tensor) — El paso de tiempo discreto actual en la cadena de difusión. - sample (
torch.Tensoronp.ndarray) — Una instancia actual de una muestra creada por el proceso de difusión. - return_dict (
bool, por defectoTrue) — Si se devuelve unKDPM2DiscreteSchedulerOutputo una tupla.
Predice la muestra del paso de tiempo anterior invirtiendo el SDE. Esta función propaga el proceso de difusión a partir de las salidas del modelo aprendido (con mayor frecuencia, el ruido predicho).
SchedulerOutput
clase diffusers.schedulers.scheduling_utils.SchedulerOutput
< source >( prev_sample: Tensor )
Clase base para la salida de la función step de un programador.