Es así... si es sólo la plantilla, vas al Filezilla y lo subís a tu sitio en la carpeta de la instalación de joomla\tmp, después vas al administrador "Extensions" / "Install/Uninstall" y vas a "Install from Directory", por default te viene la ruta a "\tmp" así que no tocas nada y clickeas en "Install".
Para saber si te cargó el template, vas a "Extensions" / "Template Manager" y si ves el nuevo template lo seleccionas y clickeas "default" para hacerlo el predeterminado.
Si es un bundle joomla + template, simplemente en un hosting vacío subís todos los archivos descomprimidos, luego revisás que en el .rar o .zip te viene un archivo .sql con el contenido de una base de datos de ejemplo para instalar sino no te va a funcionar, vas a phpadmin, exportar y cargás el archivo.
Suerte.