Visual Studio C#'ta liste kutusuna çok veri aktarınca yavaşlıyor ve bir süre sonra donuyor

SadeceBirİnsanAHuman · 9 Ağustos 2023

C# ile dosyadaki verileri satır satır liste kutusuna aktarıyorum. 1 milyon veri gibi yüksek miktarda verilerde ilerleme zamanla aşırı yavaşlıyor. En sonunda donuyor. Hiç ilerlememeye başlıyor. Bu problemi nasıl çözerim?

Nizel G · 9 Ağustos 2023

SadeceBirİnsanAHuman dedi:
Peki birden fazla liste kutusu sorunu çözer mi? Örneğin her kutuya 100.000 satır eklemek çözüm olur mu?

Bu şekilde de yığılma olur. Liste kutularındaki veri ne ki?

SadeceBirİnsanAHuman · 9 Ağustos 2023

Nizel G dedi:
Bu şekilde de yığılma olur. Liste kutularındaki veri ne ki?

Şunun gibi milyonlarca satır.

SQL:

(1, 'Server thread/INFO', '[ClearLag] 60 saniye sonra temizlik yapilacak!')

Nizel G · 9 Ağustos 2023

SadeceBirİnsanAHuman dedi:
Şunun gibi milyonlarca satır.

SQL:

(1, 'Server thread/INFO', '[ClearLag] 60 saniye sonra temizlik yapilacak!')

Bi' buton koyarsınız "Daha fazla görüntüle" diye. Butona basıldığında sonraki 100 satırı girer, eski 100 satırı siler. Bir de "Eskiyi görüntüle" ile de tam tersini yaparsınız. Arama fonksiyonu koyacaksanız listeden değil hafızadaki milyonluk veriden arar. Böylece arayüze yük bindirmezsiniz.

Hafızada veri durabilir, ama arayüzde sorun yaşatıyor böyle.

SadeceBirİnsanAHuman · 9 Ağustos 2023

Nizel G dedi:
Arayüze yük bindirmezsiniz.

Test ettim, gerçekten arayüz sebebiyle performans sorunu yaşanıyormuş. Verileri arka planda belleğe yükleyince anında yaptı. Arayüze ekleyince yavaşladı. Arada ciddi bir fark var.

Ayrıca liste kutusu değil, geniş yazı alanı nesnesini kullanıyormuşum. Bilgi için teşekkürler.

Güncelleme yapmak istiyorum. Sorun verilerin belleğe aktarılmasıyla ilgili. Şimdi uyguladığım bir başka testte fark ettim. Değişkenin boyutu büyüdükçe sanırım ekleme işlemi yavaşlıyor.

Bu sorunu dizi ile çözdüm. Her dizi ayrı log dosyasını tarıyor. Sonra log dosyasındaki satırları değişkene ekliyor. Büyük dosyalar sıkıntı çıkarabilir ama küçük dosyalarda gayet başarılı bir yöntem.

Nexor · 9 Ağustos 2023

Thread kullanarak ve Sayfalama işlemleri yaparak boğulmasını önleyebilirsin.

SadeceBirİnsanAHuman · 9 Ağustos 2023

Nexor dedi:
Thread kullanarak ve sayfalama işlemleri yaparak boğulmasını önleyebilirsin.

Bu mantıklı bir seçim olmaz. Çünkü ben SQL kodlarını kopyalayıp yapıştırıyorum. Dediğin gibi yaparsam iş uzar.

Nexor · 9 Ağustos 2023

SadeceBirİnsanAHuman dedi:
Bu mantıklı bir seçim olmaz. Çünkü ben SQL kodlarını kopyalayıp yapıştırıyorum. Dediğin gibi yaparsam iş uzar.

SQL kodunu düzenlemen lazım, mantıklı olan bu bence.

bitwise · 9 Ağustos 2023

Neden batch - batch eklemiyorsun?

5000 satir oku -> listeye at -> process et -> DB'ye yaz -> listeyi temizle -> 5000 satir daha oku vs

5000'lik bir buffer ile batch process etmis olursun.

SadeceBirİnsanAHuman · 9 Ağustos 2023

bitwise dedi:
5.000 satir oku -> listeye at -> process et -> DB'ye yaz -> listeyi temizle -> 5.000 satir daha oku vs.

Bunu yapmam doğru olmaz. Kod log dosyası sebebiyle bazen hata veriyor. Log dosyasında bazı hatalar oluşuyor. Örneğin görünmeyen karakterler bug oluşturuyor. Bu gibi sebeplerle kontrol edip aktarmam gerekiyor.

bitwise · 9 Ağustos 2023

SadeceBirİnsanAHuman dedi:
Bunu yapmam doğru olmaz. Kod log dosyası sebebiyle bazen hata veriyor. Log dosyasında bazı hatalar oluşuyor. Örneğin görünmeyen karakterler bug oluşturuyor. Bu gibi sebeplerle kontrol edip aktarmam gerekiyor.

Parca parca islerken kontrol etmis olmuyor musun zaten? Bu dedigin hepsini neden tek seferde memory e doldurdugunu aciklamiyor.

Visual Studio C#'ta liste kutusuna çok veri aktarınca yavaşlıyor ve bir süre sonra donuyor

Ayrıntılı düzenleme

SadeceBirİnsanAHuman

Gigapat

Nizel G

Megapat

SadeceBirİnsanAHuman

Gigapat

Nizel G

Megapat

SadeceBirİnsanAHuman

Gigapat

Nexor

Hectopat

SadeceBirİnsanAHuman

Gigapat

Nexor

Hectopat

bitwise

Gigapat

SadeceBirİnsanAHuman

Gigapat

bitwise

Gigapat

Benzer konular