Etiqueta <audio> → HTML5

<audio controls>
    <source src="horse.mp3" type="audio/m3">
    <source src="horse.ogg" type="audio/ogg">
    Tu navegador no soporta este formato
</audio>

Para que lo soporten los principales navegadores sería con ogg y mp3.

Etiqueta <video> → HTML5

<video width="320" height="240" controls>
    <source src="movie.mp4" type="video/mp4">
    <source src="movie.ogg" type="video/ogg">
    Tu navegador no soporta este formato
</video>

Para pasar los videos a los codecs necesarios usar FormatFactory