La aplicación se llama Alarmas y reloj, puedes buscarla en la sección de búsqueda de la barra de tareas.
Aquí podrás configurar las alarmas y los temporizadores.
De hecho, puedes tener varios temporizadores funcionando de manera simultánea.
Cuando una alarma se active o un temporizador llegue a 0, Windows te avisará con una notificación:
En Configuración puedes personalizar cómo quieres que se muestren estas notificaciones.