It's mentioned in the Medrash Raba - Metzora 17:6 that the Girgashi went to Afriki (sic) instead of fighting with Yehoshua.
גִּרְגָּשִׁי עָמַד [ופנה] מֵאֵלָיו, לְפִיכָךְ נִתְּנָה לוֹ אֶרֶץ יָפָה כְּאַרְצוֹ, הֲדָא הוּא דִכְתִיב (ישעיה לו, יז): עַד בֹּאִי וְלָקַחְתִּי אֶתְכֶם אֶל אֶרֶץ כְּאַרְצְכֶם, זוֹ אַפְרִיקֵי.
In the Medrash Raba in Shelach 17:3 we see a similar story:
אָמַר רַבִּי זַכַּאי דִּשְׁאָב אָמְרוּ יִשְׂרָאֵל לִפְנֵי הַקָּדוֹשׁ בָּרוּךְ הוּא, רִבּוֹנוֹ שֶׁל עוֹלָם בְּכָל מָקוֹם אַתָּה קוֹרֵא אוֹתָהּ אֶרֶץ כְּנַעַן, וְכָאן אֶרֶץ מוֹשְׁבֹתֵיכֶם, אָמַר לָהֶם הַקָּדוֹשׁ בָּרוּךְ הוּא, חַיֵּיכֶם נָתַתִּי אוֹתָהּ לְאַבְרָהָם לְיִצְחָק וּלְיַעֲקֹב, וְכֻלָּם מִן הַמִּקְרָא, וְהַבֵּן יוֹרֵשׁ אֶת הָאָב, לְכָךְ אֶרֶץ מוֹשְׁבֹתֵיכֶם, וְלָמָּה זָכָה כְּנַעַן שֶׁנִּקְרֵאת הָאָרֶץ עַל שְׁמוֹ, כֵּיוָן שֶׁשָּׁמַע שֶׁיִּשְׂרָאֵל בָּאִים, פָּצָה אֶת הַמָּקוֹם, אָמַר הַקָּדוֹשׁ בָּרוּךְ הוּא אַתָּה פָּצִיתָה אֶת הַמָּקוֹם תִּקָּרֵא הָאָרֶץ עַל שִׁמְךָ, וְאֶתֵּן לְךָ אֶרֶץ יָפָה כְּאַרְצְךָ, וְאֵיזוֹ זוֹ אַפְרִיקֵי.
In the Medrash Raba in Shoftim 5:14 we see a similar version of the story:
מִי קִיֵּם הַפָּרָשָׁה הַזֹּאת, יְהוֹשֻׁעַ בִּן נוּן, אָמַר רַבִּי שְׁמוּאֵל בַּר נַחְמָן מֶה עָשָׂה יְהוֹשֻׁעַ, הָיָה פּוֹרֵשׂ דִּאַטְגָּמָא בְּכָל מָקוֹם שֶׁהָיָה הוֹלֵךְ לִכְבּשׁ, וְהָיָה כָּתוּב בָּהּ מִי שֶׁמְבַקֵּשׁ לֵילֵךְ יֵלֵךְ לוֹ, וּמִי שֶׁמְבַקֵּשׁ לַעֲשׂוֹת שָׁלוֹם יַעֲשֶׂה, וּמִי שֶׁיְבַקֵּשׁ לַעֲשׂוֹת מִלְחָמָה, יַעֲשֶׂה, מֶה עָשָׂה הַגִּרְגָּשִׁי, פָּנָה וְהָלַךְ לוֹ מִלִּפְנֵיהֶן, וְנָתַן לוֹ הַקָּדוֹשׁ בָּרוּךְ הוּא אֶרֶץ יָפָה כְּאַרְצוֹ, זוֹ אַפְרִיקֵי.