Sí, ese es el punto del vidrio templado, que ha sido tratado térmicamente y es apto para el horno (en realidad es un proceso mucho más complicado: vidrio templado – Wikipedia).
También es una forma de vidrio de seguridad, como el parabrisas de tu auto. Si se rompe, se romperá en pedazos pequeños, bastante inofensivos en lugar de fragmentos afilados y dentados.
Si tiene utensilios de cocina de vidrio templado, ¡hornee!