Γεννήθηκε στις 15/12/1933 στην Αθήνα στου Χαροκόπου και ήταν ο τρίτος από τα έξι παιδιά της οικογένειας. Ο πατέρας του Στέφανος Πάνου εργαζόταν ως διαχειριστής της βασιλικής φρουράς και η μητέρα του Ελευθερία Σακελλαριάδη ασχολείτο με τα οικιακά. Μεγάλωσε σε γειτονιά με πολλούς πρόσφυγες και από μικρό παιδί έζησε μέσα στη μουσική, στους κεμετζέδες και στα τραγούδια των Ποντίων. Απέκτησε ακούσματα από τα ρεμπέτικα που ήταν διάχυτα παντού στην περιοχή αλλά και από τον αδελφό της μητέρας του Περικλή Σακελλαριάδη που έπαιζε κλασική κιθάρα. Μέσα στα δύσκολα χρόνια της κατοχής προσπαθεί να επιβιώσει πουλώντας τσιγάρα και κάνοντας διάφορες δουλειές ενώ παράλληλα μυείται από το μεγαλύτερο αδελφό του Ευάγγελο και τον φίλο του Λευτέρη Ευσταθιάδη στον κόσμο της μουσικής και των οργάνων. Από εννέα ετών ξεκινάει να παίζει μαντολίνο και κιθάρα και την άνοιξη του 1947 γνωρίζεται με το Γιάννη Σταματίου (Σπόρος), μαζί του κάνει την πρώτη του επαγγελματική εμφάνιση στην ταβέρνα του Σιλιβάνη στο Κουκάκι με αμοιβή το όποιο φιλοδώρημα των πελατών και ένα πιάτο φαγητό. Το 1948 ανεβαίνει ως ταλέντο στο Αλκαζάρ, στη Φρεγάδα του Λάσκου και παίζει κιθάρα μαζί με τον αδελφό του ενώ η αδελφή του τραγουδάει και αργότερα σμίγει με το φίλο του το Λευτέρη και μαζί παίζουν στα πάρτι και στους χορούς. Εκείνη την εποχή γνωρίζεται με το Νίκο Καρανικόλα τον Κώστα Σιμόπουλο και τον Ορφέα Κρεούζη και μαζί παίζουν σε διάφορα μέρη της Αθήνας και της επαρχίας. Για μια περίπου δεκαετία ο Άκης Πάνου αρχίζει την περιπλάνηση του με όλους τους καλλιτέχνες της εποχής σε διάφορα κέντρα, ενδεικτικά αναφέρουμε τους Γιώργο Τσιμπίδη, Αντώνη Μουστάκα, Γιώργο Χατζηδάκη, Βαγγέλη Νταράλα, Σεβάς Χανούμ,Σταύρο Τζουανάκο, Κώστα Παπαδόπουλο, Βούλα Γκίκα και πολλούς άλλους. Το 1957-58 παίζει στο κέντρο «Απόψε φίλα με» του Χρήστου Κολοκοτρώνη όπου τα ονόματα του μαγαζιού είναι η Σωτηρία Μπέλλου, ο Καραπατάκης και ο Μανώλης Αγγελόπουλος. Το τελευταίο κέντρο που εμφανίζεται είναι «ο Θείος» το 1958.