Wenn Du keine Dateien von Ihm angenommen hast, dann brauchst Du dir eigentlich keine Sorgen machen. Hast Du irgendwas von Ihm angenommen? Wenn er sich so wieso nicht mehr meldet, dann spricht ja eigentlich so wieso nichts dagegen Ihn wieder zu löschen.
Du sagtest, dass Du von einer privaten Nummer angerufen wurdest. Du meinst damit auf deinem Handy, oder? Wenn Du deine Handynummer nicht bei Skype angegeben hast, dann glaube ich kaum, dass es sich dabei um den Typen handelt. Woher sollte er auch deine Nummer haben? Das selbe gilt für deine Festnetznummer.
Ich würde einfach mal ans Handy/Telefon gehen und einfach nur "Hallo" sagen, passieren kann da auch nichts und dann kannst Du dir auch im klarem sein, wer das nun wirklich war.