وقد كان يعاني من صعوبة في الاستيعاب، وربما كان مردُّ ذلك إلى خجله في طفولته. ويشاع أن أينشتاين الطفل قد رسب في مادة الرياضيات فيما بعد، إلا أن المرجح أن التعديل في تقييم درجات التلاميذ آنذاك أثار أن الطفل أينشتاين قد تأخّر ورسب في مادة الرياضيات. وتبنَّى اثنان من أعمام أينشتاين رعايته ودعم اهتمام هذا الطفل بالعلم بشكل عام فزوداهبكتبٍ تتعلق بالعلوم والرياضيات.
بعد تكرر خسائر الورشة التي أنشأها والداه في عام 1894، انتقلت عائلته إلى مدينة بافيا في إيطاليا، واستغل أينشتاين الابن الفرصة السانحة للانسحاب من المدرسة في ميونخالتي كره فيها النظام الصارم والروح الخانقة. وأمضى بعدها أينشتاين سنةً مع والديه في مدينة ميلانو حتى تبين أن من الواجب عليه تحديد طريقه في الحياة فأنهى دراسته الثانوية في مدينةأراو السويسرية، وتقدَّم بعدها إلى امتحانات المعهد الاتحادي السويسري للتقنية في زيورخ عام 1895،[35] وقد أحب أينشتاين طرق التدريس فيه، وكان كثيراً مايقتطع من وقته ليدرسالفيزياء بمفرده، أو ليعزف على كمانه،[36][37] إلى أن اجتاز الامتحانات وتخرَّج في عام 1900، لكن مُدرِّسيه لم يُرشِّحوه للدخول إلى الجامعة.[38]
كان أينشتاين قد تنازل عن أوراقه الرسمية الألمانية في عام 1896، حتى لا يؤدي الخدمة العسكرية التي كان يكره أداؤها بشدة، مما جعله بلا هوية إثبات شخصية أو إنتماءٍ لأي بلدٍ معين،[22] وفي عام 1898، إلتقى أينشتاين "بميلفا ماريك" زميلته الصربية على مقاعد الدراسة ووقع في غرامها، وكان في فترة الدراسة يتناقش مع أصدقائه المقربين في المواضيع العلمية. وبعد تخرجه في عام 1900 عمل أينشتاين مدرّساً بديلاً، وفي العام الذي يليه حصل على حق المواطنة السويسرية، ورُزق بطفلةٍ غير شرعية من صديقته أسمياها (ليسيرل) في يناير من العام 1901.[39][40][41]