не можеш. Можете да анализирате HTML маркирането и да го използвате за изграждане на обект с богат текст, който след това можете да зададете като съдържание на клетка; но няма преобразуване от HTML в форматиран текст, вградено в самия PHPExcel, така че ще трябва да го направите на ръка.