Antwort
RFC 4648 verwendet das Gleichheitszeichen als Padding, wenn am Ende weniger als 24 Eingabebits für einen vollständigen 4-Zeichen-Block vorliegen. Bei einem verbleibenden Byte entstehen zwei Padding-Zeichen, bei zwei verbleibenden Bytes eines; referenzierende Spezifikationen können Padding ausdrücklich entbehrlich machen.
Was kannst du als Nächstes tun?
Behandle '=' nicht als Nutzdatenzeichen und prüfe bei Base64url oder protokollspezifischen Varianten, ob deren Spezifikation Padding verlangt, erlaubt oder weglässt.