Das heißt Amazon erstellt Rechnungen in Deinem Namen, mit Deiner Steuernummer oder USt-ID-Nummer? Wenn dem so ist, und in den Rechnungen Umsatzsteuer ausgewiesen ist, dann schuldest Du diese auch dem Finanzamt. Einen Vorsteuerabzug hast Du aber als Kleinunternehmer nicht.
Damit bist Du natürlich auch zur Abgabe von Umsatzsteuererklärungen verpflichtet, in denen Du die unberechtigt in Rechnung gestellte Umsatzsteuer erklärst.