Modern veri işleme senaryolarında dosyalar genellikle gigabaytlarca veri içerir. Tüm dosyayı bir seferde belleğe yüklemek, uygulamanın çökmesine ya da sistem performansının ciddi şekilde düşmesine yol açabilir. Bu derste, Python’da generator kullanarak büyük dosyaları satır satır nasıl okuyacağınızı ve aynı mantığı PHP ile nasıl uygulayabileceğinizi adım adım inceleyeceğiz.
Temeller
Python’da bir list oluşturduğunuzda, listedeki tüm elemanlar RAM’e yerleştirilir. Büyük bir dosyanın tüm satırlarını bir listeye atmak, bellek tüketimini kat kat artırır. Generator ise lazy evaluation (tembel değerlendirme) prensibiyle çalışır; her seferinde yalnızca bir eleman üretir ve bir sonraki elemana geçene kadar önceki elemanı serbest bırakır.
PHP’de de benzer bir yaklaşım Generator sınıfı ile mümkündür. yield ifadesi, bir fonksiyonun çalışmasını durdurup bir değer döndürür, daha sonra tekrar çağrıldığında kaldığı yerden devam eder.
Adım adım generator oluşturma
- Fonksiyon tanımlama:
defanahtar kelimesiyle bir fonksiyon oluşturun. - Dosyayı satır satır açma:
with open('dosya.txt','r') as f:ifadesi dosyayı güvenli bir şekilde açar. - Yield kullanma: Döngü içinde
yield lineyazarak her satırı tek tek dışarı aktarın. - Kullanım: Generator nesnesini
for line in read_lines('dosya.txt'):şeklinde döngüye sokarak işleyin.
Örnek kod
Python örneği:
def read_lines(path):
"""Dosyayı satır satır okur ve her satırı yield eder."""
with open(path, 'r', encoding='utf-8') as f:
for line in f:
yield line.rstrip('\n')
# Kullanım
for satir in read_lines('buyuk_dosya.txt'):
# burada satırı işleyin
print(satir)
PHP örnekleri (generator kullanımı):
function readLines(string $path): Generator {
$handle = fopen($path, 'r');
if ($handle === false) {
throw new RuntimeException("Dosya açılamadı: $path");
}
while (($line = fgets($handle)) !== false) {
yield rtrim($line, "\r\n");
}
fclose($handle);
}
// Kullanım
foreach (readLines('buyuk_dosya.txt') as $satir) {
echo $satir . PHP_EOL;
}
// Dosya satırlarını toplu işlemek yerine bir callback ile işleyelim
function processFile(string $path, callable $callback): void {
foreach (readLines($path) as $satir) {
$callback($satir);
}
}
processFile('buyuk_dosya.txt', function(string $satir) {
// Örneğin, satırda bir kelime arayalım
if (strpos($satir, 'hata') !== false) {
echo "Hata bulundu: $satir\n";
}
});
Sık yapılan hatalar
- Dosyayı
read()ile tamamen okumak ve ardındansplitlines()kullanmak; bu, belleği anında tüketir. - Generator içinde
returnkullanmak;returnbir değer döndürmez, sadece döngüyü sonlandırır. - Dosya tanıtıcısını (handle) kapatmayı unutmak;
with(Python) vefinally(PHP) bloklarıyla kapatmak gerekir. - UTF‑8 olmayan dosyaları varsayılan kodlamayla açmak;
encoding='utf-8'vemb_convert_encodinggibi önlemler alın.
Özet ve kontrol listesi
Generator'lar, büyük veri setlerini işlemek için bellek dostu bir çözümdür. Python ve PHP’de benzer sözdizimleriyle aynı mantığı uygulayabilirsiniz. Aşağıdaki kontrol listesi, öğrendiklerinizi pekiştirmenize yardımcı olur:
- ✅ Tüm dosyayı RAM’e yüklemeden satır satır okuyabiliyor musunuz?
- ✅
yieldifadesinin nasıl çalıştığını açıklayabilir misiniz? - ✅ Bir dosya okuma hatasını (ör. dosya bulunamadı) uygun bir istisna ile yakalıyor musunuz?
- ✅ Generator kullanan bir fonksiyonu başka bir fonksiyona (callback) parametre olarak geçirebiliyor musunuz?
- ❓ Kalan sorularınızı bir sonraki derse hazırlayın.
SSS
Soru 1: Generator ile bir listeyi neden tercih etmeliyim?
Cevap: Generator, yalnızca ihtiyaç duyulan elemanı üretir, bu da bellek tüketimini O(1) seviyesine düşürür. Büyük veri setlerinde liste oluşturmak O(n) bellek kullanır ve sisteminizi yavaşlatabilir.
Soru 2: PHP’de yield sadece fonksiyon içinde mi kullanılabilir?
Cevap: Evet, yield yalnızca bir fonksiyon ya da metod içinde kullanılabilir. Fonksiyon bir Generator nesnesi döndürür ve bu nesne foreach gibi döngülerle tüketilir.
Soru 3: Generator bir kez tüketildikten sonra tekrar kullanılabilir mi?
Cevap: Hayır. Generator bir kez iterasyona girildiğinde tüketilir. Tekrar başlatmak için fonksiyonu yeniden çağırmanız gerekir.
Bu ders, büyük dosyaları bellek dostu bir şekilde işlemek için temel bir yapı sunar. Uygulamaları kendi projelerinizde deneyerek kavramları pekiştirmeyi unutmayın.
Yorumlar
Henüz onaylanmış yorum yok. İlk yorumu siz yazın.
Yorum yaz
Yorumunuz yönetici onayından sonra yayınlanır.