Ana içeriğe geç
Bulut & Altyapı

GridFTP bilimsel veri aktarımında fiili standart haline geldi

Öne çıkanlar

  • GridFTP, petabaytlarca bilimsel veriyi geniş alan ağlarında hat hızına yakın seviyelerde taşımak için tasarlandı.
  • Mode E blok modu, veriyi paralel TCP akışlarına bölerek tıkanıklık anında hız kaybını en aza indirdi.
  • Üçüncü taraf aktarım modeliyle düzenleyici istemci veriyi doğrudan görmeden transferi yönetti.

Globus ekibinden John Bresnahan, 16 Nisan 2024 tarihli yazısında bilimsel araştırma ekosisteminde yüksek başarımlı veri aktarım protokolü olan GridFTP protokolünün gelişim sürecini ve mimari kararlarını açıkladı. 1990'ların sonunda CERN'deki Büyük Hadron Çarpıştırıcısı ve Argonne Ulusal Laboratuvarı'ndaki Gelişmiş Foton Kaynağı gibi tesisler ayda petabaytlarca veri üretmeye başladı. Dağıtık laboratuvarlar, hesaplama merkezleri ve görselleştirme tesisleri arasındaki bant genişliğini tam kapasiteyle kullanabilmek amacıyla GridFTP geliştirildi.

Protokolün tasarımında üçüncü taraf aktarımı, güvenlik ve geniş alan ağlarında yüksek başarım temel gereksinimler olarak belirlendi. GridFTP, geleneksel FTP protokolünün kontrol ve veri kanallarını ayıran yapısından faydalanarak düzenleyici yazılımın veriyi doğrudan görmeden aktarımı yönetmesini sağladı. Kimlik doğrulama süreçleri için delege edilmiş kimlik bilgisi mekanizması kuruldu ve kontrol kanalı güvenlik katmanıyla korundu.

Yüksek gecikmeli geniş alan ağlarında standart TCP akışlarının paket kaybı sonrası yaşadığı hız düşüşünü aşmak için Mode E adlı genişletilmiş blok modu tasarlandı. Bu yöntem sayesinde veri birden fazla paralel TCP akışına bölünerek tek bir akıştaki tıkanıklığın genel aktarım hızını çökertmesi önlendi. Protokol daha sonra CUBIC gibi yeni tıkanıklık kontrol algoritmalarını bünyesine kattı.

Kaynak

Bu özet yapay zekâ ile hazırlanmıştır; ayrıntılar ve doğrulama için orijinal kaynağa başvurun.