PHP 5.3.10 ist die neueste Version, die PPA von Drittanbietern bietet. Wenn Sie die neueste Version von PHP 5.3 benötigen, müssen Sie sie von php.net herunterladen und aus dem Quellcode kompilieren.
Ich würde jedoch empfehlen, dass Sie mindestens PHP 5.4 verwenden, da 5.3 nur bis Juli 2014 unterstützt wird. Wenn Sie es sich leisten können, verwenden Sie 5.5 sofort.