Sayfa yükleniyor

Destek Müşteri Girişi Sepet (0)

Ders 93 – Bellek ve generator kullanımı

Büyük dosyaları satır satır işleyerek RAM tüketimini azaltın, Python generator'ları ve PHP benzer çözümlerle bellek dostu kod yazmayı öğrenin.

Ders 93 – Bellek ve generator kullanımı

Modern veri işleme senaryolarında dosyalar genellikle gigabaytlarca veri içerir. Tüm dosyayı bir seferde belleğe yüklemek, uygulamanın çökmesine ya da sistem performansının ciddi şekilde düşmesine yol açabilir. Bu derste, Python’da generator kullanarak büyük dosyaları satır satır nasıl okuyacağınızı ve aynı mantığı PHP ile nasıl uygulayabileceğinizi adım adım inceleyeceğiz.

Temeller

Python’da bir list oluşturduğunuzda, listedeki tüm elemanlar RAM’e yerleştirilir. Büyük bir dosyanın tüm satırlarını bir listeye atmak, bellek tüketimini kat kat artırır. Generator ise lazy evaluation (tembel değerlendirme) prensibiyle çalışır; her seferinde yalnızca bir eleman üretir ve bir sonraki elemana geçene kadar önceki elemanı serbest bırakır.

PHP’de de benzer bir yaklaşım Generator sınıfı ile mümkündür. yield ifadesi, bir fonksiyonun çalışmasını durdurup bir değer döndürür, daha sonra tekrar çağrıldığında kaldığı yerden devam eder.

Adım adım generator oluşturma

  1. Fonksiyon tanımlama: def anahtar kelimesiyle bir fonksiyon oluşturun.
  2. Dosyayı satır satır açma: with open('dosya.txt','r') as f: ifadesi dosyayı güvenli bir şekilde açar.
  3. Yield kullanma: Döngü içinde yield line yazarak her satırı tek tek dışarı aktarın.
  4. Kullanım: Generator nesnesini for line in read_lines('dosya.txt'): şeklinde döngüye sokarak işleyin.

Örnek kod

Python örneği:

def read_lines(path):
    """Dosyayı satır satır okur ve her satırı yield eder."""
    with open(path, 'r', encoding='utf-8') as f:
        for line in f:
            yield line.rstrip('\n')

# Kullanım
for satir in read_lines('buyuk_dosya.txt'):
    # burada satırı işleyin
    print(satir)

PHP örnekleri (generator kullanımı):

function readLines(string $path): Generator {
    $handle = fopen($path, 'r');
    if ($handle === false) {
        throw new RuntimeException("Dosya açılamadı: $path");
    }
    while (($line = fgets($handle)) !== false) {
        yield rtrim($line, "\r\n");
    }
    fclose($handle);
}

// Kullanım
foreach (readLines('buyuk_dosya.txt') as $satir) {
    echo $satir . PHP_EOL;
}
// Dosya satırlarını toplu işlemek yerine bir callback ile işleyelim
function processFile(string $path, callable $callback): void {
    foreach (readLines($path) as $satir) {
        $callback($satir);
    }
}

processFile('buyuk_dosya.txt', function(string $satir) {
    // Örneğin, satırda bir kelime arayalım
    if (strpos($satir, 'hata') !== false) {
        echo "Hata bulundu: $satir\n";
    }
});

Sık yapılan hatalar

  • Dosyayı read() ile tamamen okumak ve ardından splitlines() kullanmak; bu, belleği anında tüketir.
  • Generator içinde return kullanmak; return bir değer döndürmez, sadece döngüyü sonlandırır.
  • Dosya tanıtıcısını (handle) kapatmayı unutmak; with (Python) ve finally (PHP) bloklarıyla kapatmak gerekir.
  • UTF‑8 olmayan dosyaları varsayılan kodlamayla açmak; encoding='utf-8' ve mb_convert_encoding gibi önlemler alın.

Özet ve kontrol listesi

Generator'lar, büyük veri setlerini işlemek için bellek dostu bir çözümdür. Python ve PHP’de benzer sözdizimleriyle aynı mantığı uygulayabilirsiniz. Aşağıdaki kontrol listesi, öğrendiklerinizi pekiştirmenize yardımcı olur:

  • ✅ Tüm dosyayı RAM’e yüklemeden satır satır okuyabiliyor musunuz?
  • ✅ yield ifadesinin nasıl çalıştığını açıklayabilir misiniz?
  • ✅ Bir dosya okuma hatasını (ör. dosya bulunamadı) uygun bir istisna ile yakalıyor musunuz?
  • ✅ Generator kullanan bir fonksiyonu başka bir fonksiyona (callback) parametre olarak geçirebiliyor musunuz?
  • ❓ Kalan sorularınızı bir sonraki derse hazırlayın.

SSS

Soru 1: Generator ile bir listeyi neden tercih etmeliyim?

Cevap: Generator, yalnızca ihtiyaç duyulan elemanı üretir, bu da bellek tüketimini O(1) seviyesine düşürür. Büyük veri setlerinde liste oluşturmak O(n) bellek kullanır ve sisteminizi yavaşlatabilir.

Soru 2: PHP’de yield sadece fonksiyon içinde mi kullanılabilir?

Cevap: Evet, yield yalnızca bir fonksiyon ya da metod içinde kullanılabilir. Fonksiyon bir Generator nesnesi döndürür ve bu nesne foreach gibi döngülerle tüketilir.

Soru 3: Generator bir kez tüketildikten sonra tekrar kullanılabilir mi?

Cevap: Hayır. Generator bir kez iterasyona girildiğinde tüketilir. Tekrar başlatmak için fonksiyonu yeniden çağırmanız gerekir.

Bu ders, büyük dosyaları bellek dostu bir şekilde işlemek için temel bir yapı sunar. Uygulamaları kendi projelerinizde deneyerek kavramları pekiştirmeyi unutmayın.

Paylaş

Yorumlar

Henüz onaylanmış yorum yok. İlk yorumu siz yazın.

Yorum yaz

Yorumunuz yönetici onayından sonra yayınlanır.

İlgili yazılar

Ders 100 – İleri yol haritası

Python ile web, veri, otomasyon ve AI alanlarına yön veren ileri seviye bir yol haritası, adım ad…

Ders 99 – Kontrol listesi: üretim

Üretim ortamı için log, health, config ve secret yönetimini kapsayan kontrol listesi, adım adım ö…

Ders 98 – Mikroservis iletişimi fikri

Mikroservis mimarisinde HTTP/JSON sözleşmesiyle versiyonlu endpoint oluşturma, adım adım örnekler…

Ders 97 – Veri doğrulama katmanı

Veri doğrulama katmanını Pydantic ve Cerberus ile nasıl kuracağınızı adım adım öğrenin, örnek PHP…

Demo
Büyütülmüş Görsel