Orach Chayim, Siman 41

אדין הנושא משאוי איך ינהוג בתפילין ובו סעיף אחד:
הנושא משאוי על ראשו צריך לחלוץ תפילין של ראש עד שיסיר המשאוי ואפילו דבר קל כגון מטפחת אסור להניח על הראש שיש בו תפילין שגנאי הוא כשיש על הראש דבר אחר שאינה מלבוש ואין דרכה להיות על הראש אבל דבר שדרכה להיות על הראש כגון כובע ומצנפת מותר אפילו אם מונח על התפילין ומכל מקום אם הוא משאוי כבד ד' קבין והתפילין נדחקות צריך להסירן:

1דִּין הַנּוֹשֵׂא מַשְּׂאוֹי אֵיךְ יִנְהֹג בַּתְּפִלִּין וּבוֹ סָעִיף אֶחָד:
הַנּוֹשֵׂא מַשּׂאוֹי עַל רֹאשׁוֹ — צָרִיךְ לַחֲלֹץ תְּפִלִּין שֶׁל רֹאשׁ עַד שֶׁיָּסִיר הַמַּשׂאוֹי. וַאֲפִלּוּ דָּבָר קַל, כְּגוֹן מִטְפַּחַת — אָסוּר לְהַנִּיחַ עַל הָרֹאשׁ שֶׁיֵּשׁ בּוֹ תְּפִלִּין, שֶׁגְּנַאי הוּא כְּשֶׁיֵּשׁ עַל הָרֹאשׁ דָּבָר אַחֵר שֶׁאֵינָהּ מַלְבּוּשׁ וְאֵין דַּרְכָּהּ לִהְיוֹת עַל הָרֹאשׁ.
אֲבָל דָּבָר שֶׁדַּרְכָּהּ לִהְיוֹת עַל הָרֹאשׁ כְּגוֹן כּוֹבַע וּמִצְנֶפֶת — מֻתָּר, אֲפִלּוּ אִם מֻנָּח עַל הַתְּפִלִּין.
וּמִכָּל מָקוֹם, אִם הוּא מַשּׂאוֹי כָּבֵד אַרְבָּעָה קַבִּין וְהַתְּפִלִּין נִדְחָקוֹת — צָרִיךְ לַהֲסִירָן:

Vocalized Edition - Kehot Publication Society