Al pinchar esta última en el panel de la derecha verás la siguiente entrada ThumbnailSize, haces doble clic sobre ella y en la ventana que aparece activa la opción Decimal y teclea un número entre 32 y 256 según el tamaña que quieras. Para reducir su tamaño teclea un número mas bajo y luego pulsa el botón Aceptar
Cierra el registro de Windows y ahora verás las imágenes en miniatura con el tamaño que hayas seleccionado.