Se os videos estiverem no youtube, é só criar um artigo e colar o código <embed>
Caso você queria colocar os videos no seu servidor, aconselho usar o componente Seyret (voce pode usar videos do seu pc, do youtube, os usuarios podem avaliar, enviar, etc.) ele é em ingles, voce pode traduzir, ou usar em ingles mesmo. Caso nao goste, acesse:
http://extensions.joomla.org/extensions ... -&-gallery
e tem vários ai.
Abraços