Arkadaşlar merhaba, uzun zamandır PHP ile çalışıyorum ama son zamanlarda büyük veri kümeleriyle uğraşırken ciddi performans sorunları yaşamaya başladım. Özellikle 500 binden fazla kaydı olan bir veritabanından veri çekerken, sorgular dakikalarca sürebiliyor. MySQL tarafında indexleri optimize ettim, sorguları basitleştirdim ama yine de PHP tarafında bellek tüketimi aşırı artıyor ve sayfalar geç yükleniyor. Bu durum sadece sunucu kaynaklarıyla mı ilgili, yoksa PHP'nin kendisinde mi bir sınırlama var anlamadım.
Özellikle foreach döngüleriyle büyük diziler üzerinde işlem yaparken, bellek sınırına takılıp "Allowed memory size exhausted" hatası alıyorum. Elbette memory_limit değerini artırabilirim ama bu geçici bir çözüm gibi geliyor. Sürekli 256MB veya 512MB bellek kullanmak normal mi? Yoksa yanlış bir yaklaşım mı izliyorum? Bu konuda tecrübesi olan var mı, nasıl bir yol izlememi önerirsiniz? Mesela veriyi parça parça çekmek için LIMIT ve OFFSET kullanıyorum ama bu sefer de pagination için count sorgusu patlıyor.
Bir de merak ettiğim, PHP 8.0 ve üzeri sürümlerde JIT derleyici büyük veri işlemlerinde gerçekten fark yaratıyor mu? Yoksa bu tarz durumlarda hala Node.js veya Python gibi dillere geçmek mi daha mantıklı? Kendi projemde veriyi filtreleme, gruplama gibi işlemleri SQL seviyesinde halletmeye çalışıyorum ama yine de PHP tarafında dizi işlemleri gerekiyor. Sizler bu tip senaryolarda hangi teknikleri kullanıyorsunuz? Özellikle generatörler, yield gibi yapılar işe yarıyor mu, yoksa tamamen Redis gibi ara katmanlara mı yönelmek lazım? Fikirlerinizi merak ediyorum.
Özellikle foreach döngüleriyle büyük diziler üzerinde işlem yaparken, bellek sınırına takılıp "Allowed memory size exhausted" hatası alıyorum. Elbette memory_limit değerini artırabilirim ama bu geçici bir çözüm gibi geliyor. Sürekli 256MB veya 512MB bellek kullanmak normal mi? Yoksa yanlış bir yaklaşım mı izliyorum? Bu konuda tecrübesi olan var mı, nasıl bir yol izlememi önerirsiniz? Mesela veriyi parça parça çekmek için LIMIT ve OFFSET kullanıyorum ama bu sefer de pagination için count sorgusu patlıyor.
Bir de merak ettiğim, PHP 8.0 ve üzeri sürümlerde JIT derleyici büyük veri işlemlerinde gerçekten fark yaratıyor mu? Yoksa bu tarz durumlarda hala Node.js veya Python gibi dillere geçmek mi daha mantıklı? Kendi projemde veriyi filtreleme, gruplama gibi işlemleri SQL seviyesinde halletmeye çalışıyorum ama yine de PHP tarafında dizi işlemleri gerekiyor. Sizler bu tip senaryolarda hangi teknikleri kullanıyorsunuz? Özellikle generatörler, yield gibi yapılar işe yarıyor mu, yoksa tamamen Redis gibi ara katmanlara mı yönelmek lazım? Fikirlerinizi merak ediyorum.