Ja, Sie werden durch Ihre Uploadgeschwindigkeit eingeschränkt. Ihre Berechnungen berücksichtigen nicht den Paket-Overhead, für den Sie eine Bandbreite von ca. 10kbit hinzufügen müssen, dh ca. 80k pro Anruf (abhängig von einer Reihe von Faktoren, wie Anzahl der Samples pro Sekunde, Komprimierung) - also insgesamt 25 Anrufe sind wahrscheinlich vernünftig.
Ich weiß nicht viel über Teamspeak (aber ich bin allgemein mit VOIP vertraut). Ich glaube, dass Teamspeak kein Codec ist, sondern eine Verkapselung wie SIP. Wenn dies der Fall ist, frage ich mich, ob der von Ihnen verwendete Codec ALAW oder ULAW ist. Dies ist relevant, da diese Codecs eine Sprachqualität mit "Telefonanrufqualität" mit sehr geringem Verarbeitungsaufwand bieten, was bedeutet, dass Ihr Server viele von ihnen verarbeiten kann. Wenn dies der Fall ist, können Sie sich einen Codec auf Speex-Basis anschauen, der Ihnen bei einer geringeren Bandbreitennutzung eine noch bessere Qualität bietet - jedoch mit einer höheren CPU-Auslastung.
Dieser Link kann auch für Sie nützlich sein.