Although it's forbidden to make an interruption between putting on the tefilin shel yad and shel rosh (Shulchan Aruch 25:9)

אסור להפסיק בדיבור בין תפלה של יד לתפל' של ראש ואם הפסיק מברך על של ראש על מצות תפילין: הגה ולדידן דנוהגין לברך ב' ברכות אף אם לא הפסיק צריך לחזור ולברך על של ראש להניח וגם על מצות - It is forbidden to speak at all between putting on the two tefillin, and if he spoke, he must make the blessing on the head tefillin. Note: Since we [Ashkenazim] make two blessings, he must make both blessings on the head tefillin

since my minhag is to put on tefillin without a bracha on Chol haMoed, would I be able to make a hefsek between the tefillin shel yad and shel rosh? (By answering kaddish)