השכונה הוותיקה ביותר במושבה, שכונת זמארין, ממוקמת על גבעה רמה בקצה הצוק הצפון מזרחי של המושבה ומתנשאת מעל ליקב כרמל ההיסטורי. שכונת זמארין הקטנה אמנם מרוחקת דקות הליכה ספורות ממרכז המושבה, אך זוהי שכונה מבודדת וייחודית הן בנראותה והן באופייה. בכניסתה ניצבת כיכר ובה נטועים עצי תות מעוטרים בעלים ירוקים גדולים ושופעים פרי מתקתק שנטעו מתיישבי זכרון יעקב הראשונים בשנת 1882. מתיישבים אלה אשר מרביתם יוצאי רומניה, קבעו את בתיהם על הגבעה שנרכשה מסגן קונסול צרפת שהיה ערבי נוצרי. על הגבעה נמצאו שרידים ארכיאולוגיים רבים המעידים כי המקום היה מיושב עוד מימים ימימה. לאורך הרחובות המרוצפים של הגבעה הקסומה בנויים בתי אבן עתיקים מעוטרים בקשתות ותריסי עץ צופים לנוף הרים מרהיב. את גבעת זמארין מקשטים צמחים ופרחים וניתן למצוא בה בתי מלאכה ייחודיים ומסעדת יוקרה.
