На офсайте основной версии библиотеки есть подробная документация и куча примеров (правда, на java, но на деле там разницы с C# практически нет). Страничка примеров - https://poi.apache.org/spreadsheet/quick-guide.html
Конкретно для чтения ищем там примеры с названиями типа "Getting the cell contents", "Reading and writing".