Este tutorial explica passo a passo como instalar o Ubuntu em um pen drive.
O método é simplificado, com cópia direta a partir de um live CD do Ubuntu, mas tem detalhamento suficiente nos aspectos mais complexos do procedimento, como o particionamento do pendrive e a operação que o torna bootável.
Saiba mais (debuntu.org).