Bilgi Bankası

"Over Core Pipe Limit" Hatası Nedir ve Neden Oluşur?

CentOS Web Panel (CWP) üzerinde karşılaşılan "Over Core Pipe Limit" hatası, sunucunun işlemci çekirdekleri (core) başına açılabilen maksimum eş zamanlı bağlantı sayısının aşılması durumunda ortaya çıkar. Bu durum genellikle yüksek trafikli web sitelerinde, yoğun veritabanı sorgularında veya kötü optimize edilmiş web uygulamalarında görülür.

Nedenleri:

• Yüksek Trafik: Web sitenize gelen eş zamanlı kullanıcı sayısının artması, sunucunun daha fazla bağlantı açmasına neden olur.
• Kötü Optimize Edilmiş Web Uygulamaları: Verimsiz kodlanmış web uygulamaları, gereksiz yere çok sayıda bağlantı açarak sunucuyu zorlayabilir.
• Veritabanı Sorunları: Yavaş veya optimize edilmemiş veritabanı sorguları, bağlantıların daha uzun süre açık kalmasına ve dolayısıyla sınırın aşılmasına yol açabilir.
• DDoS Saldırıları: Dağıtılmış hizmet reddi (DDoS) saldırıları, sunucuyu sahte trafikle boğarak kaynakların tükenmesine neden olabilir.
• Yanlış Yapılandırılmış Sunucu: Sunucu ayarlarının (örn. `ulimit` değerleri) yetersiz olması, sistemin kapasitesini sınırlayabilir.

Sonuçları:

• Web Sitesi Yavaşlaması: Kullanıcılar web sitenizde yavaşlamalar ve performans sorunları yaşayabilir.
• Hatalı Sayfalar: Bazı sayfalar yüklenemeyebilir veya hatalı görüntülenebilir.
• Sunucu Çökmesi: Aşırı yüklenme durumunda sunucu tamamen çökebilir.
• Hizmet Kesintisi: Web siteniz ve diğer hizmetler kullanılamaz hale gelebilir.

Bu Hatayı Nasıl Teşhis Edebilirim?

"Over Core Pipe Limit" hatasını teşhis etmek için aşağıdaki adımları izleyebilirsiniz:

1. CWP Kontrol Paneli: CWP kontrol panelinde sistem kaynaklarını (CPU, RAM, disk G/Ç) ve sunucu yükünü (load average) izleyin. Yüksek değerler, potansiyel bir sorun olduğunu gösterir.
2. Sunucu Günlükleri: Apache veya Nginx gibi web sunucularının hata günlüklerini (`/var/log/httpd/error_log` veya `/var/log/nginx/error.log`) inceleyin. Bu günlüklerde "Over Core Pipe Limit" hatasıyla ilgili mesajlar bulabilirsiniz.
3. Sistem Günlükleri: Sistem günlüklerini (`/var/log/messages` veya `/var/log/syslog`) inceleyin. Bu günlüklerde de hata ile ilgili bilgiler yer alabilir.
4. `netstat` ve `ss` Komutları: Bu komutlar, sunucu üzerindeki ağ bağlantılarını gösterir. Çok sayıda `TIME_WAIT` veya `CLOSE_WAIT` durumundaki bağlantı, kaynakların tükenmesine işaret edebilir.

netstat -an | grep :80 | wc -l
ss -s
  

1. `top` veya `htop` Komutları: Bu komutlar, işlemci ve bellek kullanımını gösterir. Hangi işlemlerin en çok kaynak tükettiğini belirleyebilirsiniz.
2. `lsof` Komutu: Bu komut, açık dosyaları listeler. Çok sayıda dosya tanımlayıcısının (file descriptor) kullanılması, "Over Core Pipe Limit" hatasının bir nedeni olabilir.

lsof | wc -l
lsof -u apache | wc -l # Apache kullanıcısının açtığı dosya sayısı
  

1. MySQL/MariaDB Günlükleri: Veritabanı sunucunuzun günlüklerini inceleyin. Yavaş sorgular veya bağlantı hataları, sorunun kaynağı olabilir.

Örnek: Apache hata günlüğünde şu tür bir hata mesajı görebilirsiniz:

[Wed Oct 25 10:00:00.000000 2023] [core:error] [pid 12345] AH00052: child pid 6789 exit signal Segmentation fault (11)
[Wed Oct 25 10:00:00.000000 2023] [core:error] [pid 12345] AH00052: child pid 9012 exit signal Segmentation fault (11)
...

`ulimit` Değerlerini Nasıl Kontrol Edebilirim ve Artırabilirim?

`ulimit` komutu, bir kullanıcının veya işlemin kullanabileceği sistem kaynaklarını (dosya sayısı, bellek, işlemci süresi vb.) sınırlar. "Over Core Pipe Limit" hatasını çözmek için `ulimit` değerlerini kontrol etmek ve gerekirse artırmak önemlidir.

`ulimit` Değerlerini Kontrol Etme:

• Geçerli Kullanıcı İçin:

  ulimit -a
  ulimit -n # Açık dosya sayısı limiti
      

• Belirli Bir Kullanıcı İçin (root yetkisi gereklidir):

  su - apache -c "ulimit -a" # Apache kullanıcısı için
      

`ulimit` Değerlerini Artırma:

1. Geçici Olarak Artırma (Sadece Geçerli Oturum İçin):

   ulimit -n 65535 # Açık dosya sayısını 65535'e ayarla
       

   Önemli: Bu değişiklik, sunucu yeniden başlatıldığında kaybolur.
2. Kalıcı Olarak Artırma:
   1. `/etc/security/limits.conf` Dosyasını Düzenleyin:

      Bu dosya, kullanıcılar ve gruplar için kalıcı `ulimit` değerlerini tanımlar. Dosyayı bir metin düzenleyiciyle açın (root yetkisi gereklidir).

      sudo nano /etc/security/limits.conf
              

      Dosyaya aşağıdaki satırları ekleyin (örneğin, apache kullanıcısı için):

      apache  soft  nofile  65535
      apache  hard  nofile  65535
              

      Burada `soft` ve `hard` limitler belirtilir. `hard` limit, `soft` limitten daha yüksek veya eşit olmalıdır. `nofile`, açık dosya sayısı limitini temsil eder.

   2. `/etc/pam.d/common-session` Dosyasını Düzenleyin:

      Bu dosya, oturum açma sırasında `limits.conf` dosyasındaki ayarların uygulanmasını sağlar. Dosyayı bir metin düzenleyiciyle açın (root yetkisi gereklidir).

      sudo nano /etc/pam.d/common-session
              

      Dosyanın sonuna aşağıdaki satırı ekleyin:

      session required pam_limits.so
              

   3. Sunucuyu Yeniden Başlatın:

      Değişikliklerin etkili olması için sunucuyu yeniden başlatın.

      sudo reboot
              

Dikkat Edilmesi Gerekenler:

• Çok yüksek `ulimit` değerleri ayarlamak, sistem kaynaklarını gereksiz yere tüketebilir ve performansı olumsuz etkileyebilir. Değerleri, sunucunuzun ihtiyaçlarına ve kapasitesine göre ayarlayın.
• `ulimit` değerlerini artırmadan önce, sorunun temel nedenini (örn. kötü optimize edilmiş web uygulaması, yavaş veritabanı sorguları) çözmeye çalışın.

Web Sunucu (Apache/Nginx) Ayarlarını Nasıl Optimize Edebilirim?

Web sunucunuzun (Apache veya Nginx) ayarlarını optimize etmek, "Over Core Pipe Limit" hatasını önlemenin önemli bir yoludur. İşte bazı optimizasyon önerileri:

Apache Optimizasyonu:

• MPM (Multi-Processing Module) Seçimi:

  Apache, farklı MPM'ler (örn. `prefork`, `worker`, `event`) kullanarak istekleri işleyebilir. `event` MPM, daha iyi performans ve ölçeklenebilirlik sunar.

  MPM'yi kontrol etmek için:

  httpd -V | grep MPM
      

  MPM'yi değiştirmek için, Apache yapılandırma dosyasını (`/etc/httpd/conf/httpd.conf` veya `/etc/apache2/apache2.conf`) düzenleyin ve ilgili satırları yorum satırı yapın veya kaldırın. Ardından, istediğiniz MPM'yi etkinleştirin.

• `MaxRequestWorkers` (veya `MaxClients`):

  Bu ayar, Apache'nin aynı anda işleyebileceği maksimum istek sayısını belirler. Değeri, sunucunuzun RAM'ine ve işlemci gücüne göre ayarlayın. Çok yüksek bir değer, sunucunun aşırı yüklenmesine neden olabilir. Çok düşük bir değer, performansı sınırlayabilir.

  Değeri ayarlamak için, Apache yapılandırma dosyasını düzenleyin ve aşağıdaki satırı ekleyin veya değiştirin:

  <IfModule mpm_event_module>
      StartServers             3
      MinSpareThreads          75
      MaxSpareThreads          250
      ThreadsPerChild          25
      MaxRequestWorkers        400
      MaxConnectionsPerChild   0
  </IfModule>
      

  Önemli: `MaxRequestWorkers` değeri, `ulimit -n` değerinden düşük olmalıdır.

• `KeepAlive` Ayarları:

  `KeepAlive`, istemcilerin aynı TCP bağlantısı üzerinden birden fazla istek göndermesine izin verir. Bu, bağlantı kurma ve kapatma maliyetini azaltarak performansı artırabilir.

  Ancak, çok yüksek bir `KeepAliveTimeout` değeri, sunucunun gereksiz yere bağlantıları açık tutmasına ve kaynakları tüketmesine neden olabilir. Değeri, ihtiyaçlarınıza göre ayarlayın.

  KeepAlive On
  KeepAliveTimeout 5
  MaxKeepAliveRequests 100
      

• Modüllerin Devre Dışı Bırakılması:

  Kullanmadığınız Apache modüllerini devre dışı bırakmak, sunucunun kaynak tüketimini azaltabilir. Örneğin, `mod_status` veya `mod_info` gibi modüller, güvenlik açıkları oluşturabilir ve gereksiz yere kaynak tüketebilir.

  Modülleri devre dışı bırakmak için, Apache yapılandırma dosyasını düzenleyin ve ilgili `LoadModule` satırlarını yorum satırı yapın.

• Önbellekleme (Caching):

  Apache'de önbellekleme modüllerini (örn. `mod_cache`, `mod_expires`) kullanarak statik içerikleri (resimler, CSS dosyaları, JavaScript dosyaları) önbelleğe alabilirsiniz. Bu, sunucunun yükünü azaltır ve web sitesi hızını artırır.

Nginx Optimizasyonu:

• `worker_processes` ve `worker_connections`:

  `worker_processes`, Nginx'in çalıştıracağı işlemci sayısını belirler. Genellikle, sunucunuzdaki işlemci çekirdeği sayısına eşitlenmesi önerilir.

  `worker_connections`, her bir işlemcinin aynı anda işleyebileceği maksimum bağlantı sayısını belirler. Değeri, sunucunuzun RAM'ine ve işlemci gücüne göre ayarlayın.

  worker_processes auto;
  events {
      worker_connections 1024;
  }
      

• `keepalive_timeout`:

  Bu ayar, Nginx'in istemcilerle kurduğu bağlantıları ne kadar süreyle açık tutacağını belirler. Çok yüksek bir değer, sunucunun gereksiz yere bağlantıları açık tutmasına ve kaynakları tüketmesine neden olabilir. Değeri, ihtiyaçlarınıza göre ayarlayın.

  keepalive_timeout 60;
      

• Gzip Sıkıştırması:

  Gzip sıkıştırması, web sunucusundan istemciye gönderilen dosyaların boyutunu küçültür. Bu, bant genişliği kullanımını azaltır ve web sitesi hızını artırır.

  gzip on;
  gzip_vary on;
  gzip_proxied any;
  gzip_comp_level 6;
  gzip_buffers 16 8k;
  gzip_http_version 1.1;
  gzip_types text/plain text/css application/json application/javascript text/xml application/xml application/rss+xml application/atom+xml image/svg+xml;
      

• Önbellekleme (Caching):

  Nginx'de önbellekleme modüllerini kullanarak statik içerikleri (resimler, CSS dosyaları, JavaScript dosyaları) önbelleğe alabilirsiniz. Bu, sunucunun yükünü azaltır ve web sitesi hızını artırır.

Ortak Optimizasyonlar (Apache ve Nginx):

• HTTP/2:

  HTTP/2, HTTP/1.1'e göre daha hızlı ve verimli bir protokoldür. HTTP/2'yi etkinleştirmek, web sitesi hızını önemli ölçüde artırabilir.

• CDN (Content Delivery Network):

  CDN, web sitenizin içeriğini dünya genelindeki sunucularda depolayarak kullanıcıların içeriğe daha hızlı erişmesini sağlar. CDN kullanmak, sunucunuzun yükünü azaltır ve web sitesi hızını artırır.

Veritabanı Performansını Nasıl İyileştirebilirim?

Veritabanı performansı, web sitenizin genel performansı üzerinde büyük bir etkiye sahiptir. Yavaş veya optimize edilmemiş veritabanı sorguları, "Over Core Pipe Limit" hatasına ve diğer performans sorunlarına yol açabilir.

Veritabanı Optimizasyon İpuçları:

• Sorgu Optimizasyonu:
  • `EXPLAIN` Komutu: Bu komut, bir sorgunun nasıl yürütüleceğini gösterir. Sorgunun yavaş kısımlarını belirlemek ve optimize etmek için kullanabilirsiniz.
  • Index'ler: Veritabanı tablolarına index'ler eklemek, sorgu hızını önemli ölçüde artırabilir. Ancak, çok fazla index eklemek, yazma işlemlerini yavaşlatabilir. Index'leri dikkatli bir şekilde seçin.
  • Sorgu Yazımını İyileştirme: Gereksiz `JOIN` işlemlerinden kaçının, `WHERE` koşullarını optimize edin ve `SELECT *` yerine sadece gerekli sütunları seçin.
• Veritabanı Sunucu Ayarları:
  • `innodb_buffer_pool_size` (MySQL/MariaDB): Bu ayar, InnoDB motorunun verileri ve index'leri önbelleğe almak için kullanacağı bellek miktarını belirler. Değeri, sunucunuzun RAM'ine göre ayarlayın. Genellikle, RAM'in %50-80'i önerilir.
  • `query_cache_size` (MySQL): Bu ayar, sorguların sonuçlarını önbelleğe almak için kullanılacak bellek miktarını belirler. Ancak, MySQL 8.0'da bu özellik kaldırılmıştır.
  • `max_connections`: Bu ayar, veritabanı sunucusuna aynı anda bağlanabilecek maksimum bağlantı sayısını belirler. Değeri, sunucunuzun kapasitesine göre ayarlayın.
• Veritabanı Bakımı:
  • Tablo Optimizasyonu: Düzenli olarak tabloları optimize etmek, performansı artırabilir. MySQL/MariaDB'de `OPTIMIZE TABLE` komutunu kullanabilirsiniz.
  • Index Bakımı: Kullanılmayan veya gereksiz index'leri silin.
  • Log Rotasyonu: Veritabanı günlüklerinin boyutunu kontrol altında tutmak için düzenli olarak log rotasyonu yapın.
• Veritabanı İzleme:
  • MySQL Enterprise Monitor (MySQL) veya MariaDB Enterprise Server (MariaDB): Bu araçlar, veritabanı sunucunuzun performansını izlemenize ve sorunları tespit etmenize yardımcı olabilir.
  • `SHOW PROCESSLIST` (MySQL/MariaDB): Bu komut, şu anda çalışan sorguları gösterir. Yavaş sorguları belirlemek için kullanabilirsiniz.

Örnek: Yavaş bir sorguyu tespit etmek ve optimize etmek için aşağıdaki adımları izleyebilirsiniz:

1. Yavaş Sorgu Günlüğünü Etkinleştirin:

   MySQL/MariaDB yapılandırma dosyasında (`/etc/my.cnf` veya `/etc/mysql/my.cnf`), aşağıdaki satırları ekleyin veya değiştirin:

   slow_query_log = 1
   slow_query_log_file = /var/log/mysql/mysql-slow.log
   long_query_time = 2 # 2 saniyeden uzun süren sorguları günlüğe kaydet
       

   Veritabanı sunucusunu yeniden başlatın.

2. Yavaş Sorgu Günlüğünü İnceleyin:

   Günlük dosyasını inceleyerek yavaş sorguları belirleyin.

3. `EXPLAIN` Komutunu Kullanın:

   Yavaş sorgu için `EXPLAIN` komutunu çalıştırın ve sorgunun nasıl yürütüleceğini inceleyin.

4. Index Ekleyin veya Sorguyu Yeniden Yazın:

   `EXPLAIN` çıktısına göre, gerekli index'leri ekleyin veya sorguyu daha verimli bir şekilde yeniden yazın.

"Over Core Pipe Limit" Hatasını Önlemek İçin Proaktif Önlemler Nelerdir?

"Over Core Pipe Limit" hatasıyla karşılaşmamak için proaktif önlemler almak, sunucunuzun kararlılığını ve performansını artırabilir.

Proaktif Önlemler:

• Düzenli Sistem İzleme:
  • CPU, RAM, disk G/Ç, ağ trafiği ve sunucu yükünü (load average) düzenli olarak izleyin. Yüksek değerler, potansiyel bir sorun olduğunu gösterir.
  • CWP kontrol panelini veya `top`, `htop`, `vmstat` gibi komut satırı araçlarını kullanabilirsiniz.
• Güvenlik Duvarı ve DDoS Koruması:
  • Sunucunuzu yetkisiz erişime ve DDoS saldırılarına karşı korumak için bir güvenlik duvarı (örn. `iptables`, `firewalld`) kullanın.
  • DDoS saldırılarını engellemek için bir DDoS koruma hizmeti (örn. Cloudflare, Akamai) kullanabilirsiniz.
• Web Uygulaması Güvenliği:
  • Web uygulamalarınızdaki güvenlik açıklarını kapatın. SQL injection, XSS (cross-site scripting) ve diğer güvenlik açıklarına karşı önlemler alın.
  • Güncel güvenlik yamalarını uygulayın.
• Yazılım Güncellemeleri:
  • İşletim sistemi, web sunucusu, veritabanı sunucusu ve diğer yazılımları düzenli olarak güncelleyin. Güncellemeler, güvenlik açıklarını kapatır ve performansı artırır.
• Kaynak Sınırlandırması:
  • Kullanıcıların ve uygulamaların kullanabileceği kaynakları (CPU, RAM, disk alanı) sınırlayın. Bu, bir uygulamanın tüm kaynakları tüketmesini ve diğer uygulamaları etkilemesini önler.
  • CWP'de kullanıcı hesapları için kaynak sınırlandırması yapabilirsiniz.
• Yedekleme:
  • Verilerinizi düzenli olarak yedekleyin. Bir sorun olması durumunda, verilerinizi geri yükleyebilirsiniz.
• Kapasite Planlaması:
  • Web sitenizin trafik büyümesini tahmin edin ve sunucunuzun kapasitesini buna göre planlayın. Gerekirse, daha güçlü bir sunucuya geçin veya kaynakları artırın.

Gerçek Hayattan Bir Örnek: Yüksek Trafikli Bir E-ticaret Sitesinde "Over Core Pipe Limit" Hatası ve Çözümü

Vaka Çalışması: Yüksek Trafikli E-ticaret Sitesi

Sorun: Bir e-ticaret sitesi, özellikle kampanya dönemlerinde "Over Core Pipe Limit" hatasıyla sık sık karşılaşıyordu. Bu durum, web sitesi hızının yavaşlamasına, hatalı sayfalara ve hatta sunucu çökmelerine neden oluyordu. Müşteriler alışveriş yapamaz hale geliyor ve şirket gelir kaybı yaşıyordu.

Teşhis:

1. Sistem İzleme: Sunucu kaynaklarının (CPU, RAM, disk G/Ç) kampanya dönemlerinde aşırı yüklendiği tespit edildi.
2. Web Sunucu Günlükleri: Apache hata günlüklerinde "Over Core Pipe Limit" hatasıyla ilgili mesajlar görüldü.
3. Veritabanı Günlükleri: Yavaş sorguların sayısı arttığı tespit edildi.
4. `netstat` Komutu: Çok sayıda `TIME_WAIT` durumundaki bağlantı tespit edildi.

Çözüm:

1. `ulimit` Değerlerinin Artırılması: `/etc/security/limits.conf` dosyası düzenlenerek `ulimit` değerleri artırıldı.
2. Apache Optimizasyonu:
   • MPM `event` olarak değiştirildi.
   • `MaxRequestWorkers` değeri sunucunun kapasitesine göre ayarlandı.
   • `KeepAliveTimeout` değeri optimize edildi.
   • Kullanılmayan modüller devre dışı bırakıldı.
3. Veritabanı Optimizasyonu:
   • Yavaş sorgular tespit edilerek optimize edildi.
   • Index'ler eklendi ve gereksiz index'ler silindi.
   • `innodb_buffer_pool_size` değeri artırıldı.
   • Veritabanı tabloları düzenli olarak optimize edildi.
4. Önbellekleme:
   • Apache'de önbellekleme modülleri kullanılarak statik içerikler önbelleğe alındı.
   • CDN kullanılarak web sitesinin içeriği dünya genelindeki sunucularda depolandı.
5. DDoS Koruması:
   • Bir DDoS koruma hizmeti kullanılarak web sitesi DDoS saldırılarına karşı korundu.

Sonuç:

Uygulanan optimizasyonlar sayesinde, "Over Core Pipe Limit" hatası ortadan kalktı. Web sitesi hızı önemli ölçüde arttı, hatalı sayfalar azaldı ve sunucu çökmeleri önlendi. Müşteriler daha iyi bir alışveriş deneyimi yaşadı ve şirket gelir kaybını önledi.