בליל הפוגרום בין ה-9 ל-10 בנובמבר 1938 התגורר יעקב אצל משפחתו המארחת. באותו הלילה האב אנסבכר, בנו בן ה -18 ביחד עם אדם מבוגר וחירש שנוכח בבית משפחת אנסבכר, נעצרו על ידי אנשי האס-אה ונלקחו מביתם.

בבוקר נאלץ יעקב לגלות שבית הכנסת ובית הספר היהודי בוורצבורג הושחתו.

הוא רצה לראות את הוריו ואת סבו בוויזנברון כמה שיותר מהר. בדרך לתחנת הרכבת הוא ראה חלונות ראווה שבורים וחנויות שנבזזו בכל מקום.