Wczytywanie pliku z archiwum zip do byte[] w wydajny sposób

Question

Aktualnie używam tej funkcji (oraz biblioteki System.IO.Compression) do tego zadania, Niestety wymaga ona przechowania w pamięci 3 kopii danego pliku podczas wczytywania. Jest to uciążliwe przy wczytywaniu większego pliku, w tym wypadku załadowanie pliku ~1,2GB wymaga 3.3GB pamięci oraz powoduje 6 wywołań GC. Czy jest jakaś wydajniejsza metoda na wczytywanie danych? Mogę użyć innej biblioteki, ale ta akurat była najlepiej udokumentowana.

using System.IO;
using System.IO.Compression;
//...
private static byte[] LoadFile(ZipArchive source, string filename)
{
    using var stream = source.GetEntry(filename).Open();
    using var ms = new MemoryStream();
    stream.CopyTo(ms);
    return ms.ToArray();
}

Answer 1

Tak na oko (nie odpalałem), to coś takiego?

	private static byte[] LoadFile(ZipArchive source, string filename)
	{
		var entry = source.GetEntry(filename);
		using var stream = entry.Open();
		
		byte[] buffer = new byte[entry.Length];
		stream.Read(buffer, 0, (int)entry.Length);
		return buffer;
	}

 

Comments

Chyba działa. Mój testowy plik wczytał się bezbłędnie, aplikacja zajmuje w RAMie tyle, ile powinna (czyli 1,2gb + ~50mb na resztę testowego kodu), oraz GC nie jest ani razu wywołany. Dzięki za pomoc!
EDIT: wczytanie 100 000 małych plików też nie sprawia problemu, kod wykonuje się tyle samo czasu co "oryginał".

Answer 2

No co się dziwić jak sam konwertujesz to do tablicy z metody toArray to nie będzie optymalne, też po co tworzysz memory stream ? 
 

byte[] data = File.ReadAllBytes("D:\z.7z");

Masz do tego optymalną i gotową metode https://docs.microsoft.com/pl-pl/dotnet/api/system.io.file.readallbytes?view=net-6.0

Koła się na nowo nie wymyśla, bo nie jest to potrzebne

Comments

To co wrzuciłeś to bajty całego archiwum, a on czyta konkretny plik z archiwum.

---

dobrze, ale równie dobrze może tam być link do pliku ....  np tekstowego 

byte[] newdata = File.ReadAllBytes("D:\t.txt");

aj, dobra po-noworoczne zwolnienie, zwracam honor, rozumiem  zauważyłem dopiero entry...