Installiert man eine Bilbiothek, die sich um grafisches kümmert, von einer Websprache wie PHP wird als Abhängigkeit ständig x11-common (so lautet das Paket in Debian) mitinstalliert.
Viel ist in x11-common nicht enthalten weswegen man nur 896 kB Speicherplatz braucht und sinnloses wird dabei auch nicht installiert.
Also es ist völlig in Ordnung wenn man diese Bibliothek auf einen Server installiert.