Java: InputStream слишком медленный для чтения огромных файлов

Я запустил этот код с файлом размером 183 МБ. Он напечатал «Прошло 250 мс».

final InputStream in = new BufferedInputStream(new FileInputStream("file.txt"));
final long start = System.currentTimeMillis();
int cnt = 0;
final byte[] buf = new byte[1000];
while (in.read(buf) != -1) cnt++;
in.close();
System.out.println("Elapsed " + (System.currentTimeMillis() - start) + " ms");

я бы попробовал это

// create the file so we have something to read.
final String fileName = "1.2.fasta";
FileOutputStream fos = new FileOutputStream(fileName);
fos.write(new byte[54 * 1024 * 1024]);
fos.close();

// read the file in one hit.
long start = System.nanoTime();
FileChannel fc = new FileInputStream(fileName).getChannel();
ByteBuffer bb = fc.map(FileChannel.MapMode.READ_ONLY, 0, fc.size());
while (bb.remaining() > 0)
    bb.getLong();
long time = System.nanoTime() - start;
System.out.printf("Took %.3f seconds to read %.1f MB%n", time / 1e9, fc.size() / 1e6);
fc.close();
((DirectBuffer) bb).cleaner().clean();

отпечатки

Took 0.016 seconds to read 56.6 MB

Используйте BufferedInputStream:

InputStream buffy = new BufferedInputStream(inputStream);

Как отмечалось выше, используйте BufferedInputStream. Вы также можете использовать пакет NIO. Обратите внимание, что для большинства файлов BufferedInputStream будет так же быстро читать, как и NIO. Однако для очень больших файлов NIO может работать лучше, потому что вы можете выполнять файловые операции с отображением памяти. Кроме того, пакет NIO выполняет прерываемый ввод-вывод, а пакет java.io — нет. Это означает, что если вы хотите отменить операцию из другого потока, вы должны использовать NIO, чтобы сделать ее надежной.

ByteBuffer buf = ByteBuffer.allocate(BUF_SIZE);
FileChannel fileChannel = fileInputStream.getChannel();
int readCount = 0;
while ( (readCount = fileChannel.read(buf)) > 0) {
  buf.flip();
  while (buf.hasRemaining()) {
    byte b = buf.get();
  }
  buf.clear();
}