Для начала можно проанализировать словарь, посмотреть статистику. Там видно сколько и каких чисел присутствует в файле. Не рекомендую использовать мой парсер для обработки файлов больше 250 MB. Что касаемо конца строки - кому надо сообразит как сделать из CRLF один LF (или наоборот) за 5 секунд. Хотя бы с помощью AkelPad.