MMMM la verdad el tamaño de los datos no debería de dar ningún problema, así por así la verdad no podría identificar que es lo que sucede. No obstante, yo te recomendaría trabajar con el módulo de advanced excel y no con el de xlsx (recuerda que este carga en memoria los datos que contenga el archivo, así que quizás por ahi venga el error).

Este módulo es mas utilizado para cuando necesites hacer un documento sencillo y pues es una opción muy buena. Sin embargo, en este caso te recomiendo no cargar los datos en memoria y abrir el excel físicamente con el módulo de AdvancedExcel o con el de excel normal, espero haberte ayudado.