Google kendi veri merkezi var mı
Özet:
– Google, Datacenter Networking için kendi ağ donanımını ve yazılımını oluşturuyor.
– Mevcut nesilleri Jüpiter Fabrics, 1’den fazla petabit/sn toplam ikseksiyon bant genişliği sunabilir.
– Google, veri merkezi ağlarını tasarlamak için bir Clos Toyology, Merkezi Yazılım Kontrol Yığımı ve Özel Protokoller kullanıyor.
– On yıldır yazılım tanımlı ağ (SDN) ‘nin faydalarından yararlanıyor ve tadını çıkarıyorlar.
– Google’ın veri merkezi ağları hız, modülerlik ve kullanılabilirlik için oluşturulmuştur ve paylaşılan altyapıdır.
– Andromeda, Google Cloud Platform’un Yazılım Tanımlı Ağ (SDN) temelinde en son ağ yığınıdır.
– Google, 9 doların bir parçası olarak Nebraska’da yeni bir veri merkezi kuruyor.Veri merkezlerine ve ofislerine 5 milyar yatırım.
Benzersiz sorular:
1. Google veri merkezi ağ altyapısını nasıl oluşturuyor?
Google, veri merkezlerindeki tüm sunucuları birbirine bağlamak için kendi ağ donanımını ve yazılımını oluşturuyor ve dağıtılmış bilgi işlem ve depolama sistemlerini güçlendiriyor. Bunu son on yıldır yapıyorlar.
2. Google’ın mevcut nesil veri merkezi ağının kapasitesi nedir?
Jüpiter Fabrics olarak adlandırılan mevcut nesil, 1’den fazla petabit/sn’den fazla toplam ikna bant genişliği sunabilir. Bu kapasite, 100.000 sunucunun her biri 10 gb/s’de bilgi alışverişi için yeterlidir.
3. Google Datacenter ağlarını nasıl tasarlar??
Google, çok daha büyük bir mantıksal anahtarın özelliklerini sağlamak için ağlarını daha küçük anahtarların bir koleksiyonu etrafında düzenlemeyi içeren bir kapalı topoloji kullanır. Ayrıca, veri merkezinde binlerce anahtarı yönetmek için merkezi bir yazılım kontrol yığını kullanırlar, bu da onları büyük bir kumaş olarak hareket ettirirler. Ayrıca, veri merkezine göre özel protokolleri kullanarak kendi yazılımlarını ve donanımlarını oluştururlar.
4. Google, yazılım tanımlı ağların (SDN) faydalarından ne kadar süredir dağıtıyor ve tadını çıkarıyor?
Google, on yıldır SDN’nin faydalarından yararlanıyor ve keyif alıyor. SDN’yi Datacenter Wan, B4 ve SDN Ağ Sanallaştırma Yığınları Andromeda’ya güç vermek için kullandılar.
5. Google’ın Datacenter ağlarının temel özellikleri nelerdir??
Google’ın veri merkezli ağları benzeri görülmemiş hız, modülerlik ve kullanılabilirlik sunar. En yeni nesil sunucularının bant genişliği taleplerini karşılamak için sürekli olarak yükseltilirler. Bu ağlar ayrıca, Google’ın dahili altyapısını ve hizmetlerini ve Google Cloud platformunu güçlendirerek paylaşılan altyapıdır.
6. Andromeda nedir ve Google Cloud Platform ile nasıl ilişkilidir??
Andromeda, Google’ın ağ sanallaştırma çabaları için yazılım tanımlı bir ağ (SDN) tabanlı substrattır. Google Cloud platformunda sanal ağların ve ağ içi paket işlemenin sağlanması, yapılandırılması ve yönetilmesi için düzenleme noktasıdır.
7. Google’ın veri merkezleri ve ofisleri için yatırım planı nedir?
Google 9 $ yatırım yapmayı planlıyor.5 milyar veri merkezinde ve ofislerinde ve bu planın bir parçası olarak, Nebraska’da yeni bir veri merkezi inşa ediyorlar.
8. Google neden Datacenter Networking için kendi ağ donanımını ve yazılımını oluşturuyor??
Google, kendi ağ donanımlarını ve yazılımlarını oluşturmaya başladı çünkü dağıtılmış bilgi işlem gereksinimlerini karşılayabilecek mevcut çözümler yoktu. Veri merkezleri için harika bilgi işlem altyapısı sağlamak için bunu yapmaya devam ettiler.
9. Google’ın veri merkezi ağlarını tasarlarken kullandığı ilkeler nelerdir??
Google, veri merkezi ağlarını tasarlarken üç temel ilke kullandı: Ağı bir kapalı topoloji etrafında düzenlemek, merkezi bir yazılım kontrol yığını kullanarak ve Veri Merkezi’ne göre uyarlanmış özel protokolleri kullanarak kendi yazılımlarını ve donanımlarını oluşturmak.
10. Google’ın veri merkezi ağları neden paylaşılan altyapı olarak kabul ediliyor??
Google’ın Datacenter Networks, hem dahili altyapılarını hem de hizmetlerini hem de Google Cloud platformunu güçlendiriyor. Bu, aynı ağların dünyadaki geliştiriciler için erişilebilir olduğu ve kendilerini inşa etmek zorunda kalmadan birinci sınıf ağ altyapısından yararlanmalarına izin verdiği anlamına gelir.
11. Google, veri merkezi ağlarının kullanılabilirliğini nasıl sağlar??
Google’ın operasyon ekibi, dağıtılmış sistemlerinin bant genişliği ihtiyaçlarını karşılamak için ağlarının birden fazla neslini altyapılarında konuşlandırdı ve yeniden konuşlandırdı. Ağlarının kullanılabilirliğini sağlamak için dünyanın en iyi ağ mühendisliği ve operasyon ekibiyle yakın çalışırlar.
12. Google Cloud platformunda Andromeda’nın amacı nedir?
Andromeda, Google Cloud platformunda sanal ağları ve ağ içi paket işlemeyi sağlama, yapılandırma ve yönetmek için düzenleme noktası olarak hizmet eder. Platformun ağ özelliklerinin önemli bir bileşenidir.
13. Google’ın Veri Merkezi Ağ Altyapısı Yazılım Tanımlı Ağ (SDN) nasıl kullanıyor??
Google, SDN’yi on yıldır veri merkezi ağ altyapılarına dağıtıyor. SDN’yi Datacenter Wan, B4 ve ağ sanallaştırma yığını Andromeda’ya güç vermek için kullandılar. Ağ sistemlerinde SDN’nin mimari fikirlerini benimsediler.
14. Google’ın veri merkezlerine ve ofislerine yatırımının önemi nedir??
Google’ın 9 dolar yatırımı.5 milyar veri merkezi ve ofisi, altyapılarını ve yeteneklerini genişletme taahhüdlerini yansıtır. Hizmetlerinin büyümesine olan güvenlerini ve Google Cloud’a olan artan talebi gösterir.
15. Google’ın veri merkezi ağ altyapısı Google Cloud Platform’a nasıl katkıda bulunuyor??
Google’ın Veri Merkezi Ağ Altyapısı, hem Google’ın dahili altyapısını ve hizmetlerini hem de Google Cloud platformunu güçlendiren paylaşılan altyapıdır. Bu, dünyanın dört bir yanındaki geliştiricilerin, kendilerini inşa etmek zorunda kalmadan birinci sınıf ağ altyapısından yararlanmalarını sağlayarak yenilikçi internet hizmetleri ve platformlar oluşturmalarını sağlar.
Google, 9 $ ‘ın bir parçası olarak 750 milyon dolarlık yeni veri merkezi açıyor.5b hedef
Makine öğrenimi, büyük verilerle başa çıkmanın ayrılmaz bir parçasıdır. Global Yetenekler Lider, Insights & Innovation liderliğindeki Ryan Den Rooijen’in Londra’daki Büyük Veri İnovasyon Zirvesi’nden önce söylediği gibi (Mart 2017), “Gözlemlediğim sorunların çoğu, bu verilerin nasıl yararlı hale getirileceği ile ilgilidir… anlamlı iş etkisini sağlamak.” Bu nedenle, Google gibi ürünler için makine öğrenimi kullanmanın yanı sıra Google, veri merkezlerinin puanını tahmin etmek için sinir ağlarını da kullanır.
Google kendi veri merkezi var mı
VP & GM, Sistemler ve Hizmetler Altyapısı
Google, Google dosya sisteminden MapReduce’a BigTable’a ve Borg’a kadar dağıtılmış bilgi işlem ve veri işleme konusunda uzun zamandır öncü olmuştur. Başından beri biz’Bunun gibi harika bilgi işlem altyapısının harika bir veri merkezi ağ teknolojisi gerektirdiğini bilin. Ancak Google başlarken kimse dağıtılmış bilgi işlem gereksinimlerimizi karşılayabilecek bir veri merkezi ağı yapmadı.
Bu nedenle, son on yıldır, veri merkezlerimizdeki tüm sunucuları birbirine bağlamak için kendi ağ donanımımızı ve yazılımımızı oluşturuyoruz ve dağıtılmış bilgi işlem ve depolama sistemlerimizi güçlendiriyoruz. Şimdi, Google Cloud Platform aracılığıyla harici geliştiriciler tarafından kullanılmak üzere bu güçlü ve dönüştürücü altyapıyı açtık.
2015 Açık Ağ Zirvesi’nde, ilk kez şirket içi ağ teknolojimizin beş kuşağının ayrıntılarını açıkladık. On yıl önce ilk şirket içi veri merkezi ağımız olan Firehose’dan en yeni nesil Jüpiter Network’ize, biz’VE, tek bir veri merkezi ağının kapasitesini 100x’den fazla artırdı. Mevcut neslimiz – Jüpiter Fabrics – 1’den fazla petabit/sn’den fazla toplam ikna bant genişliği sunabilir. Bunu perspektife koymak için, 100.000 sunucunun her biri 10 gb/s’de bilgi alışverişi için yeterli olacaktır, bu da Kongre Kütüphanesi’nin tüm taranan içeriğini saniyenin 1/10’undan daha az bir sürede okumak için yeterli olacaktır.
Veri merkezi ağlarımızı tasarlarken üç temel ilke kullandık:
- Ağımızı, çok daha büyük bir mantıksal anahtarın özelliklerini sağlamak için daha küçük (daha ucuz) anahtarların bir koleksiyonunun düzenlendiği bir ağ yapılandırması olan bir Clos topolojisi etrafında düzenliyoruz.
- Veri merkezindeki binlerce anahtarı yönetmek için merkezi bir yazılım kontrol yığını kullanıyoruz, bu da onları büyük bir kumaş olarak etkili bir şekilde hareket ettiriyoruz.
- Kendi yazılımımızı ve donanımımızı satıcılardan silikon kullanarak, standart internet protokollerine daha az ve veri merkezine göre uyarlanmış özel protokollere daha fazla güveniyoruz.
Birlikte ele alındığında, ağ kontrol yığınımızın Google ile daha fazla ortak noktası var’S Geleneksel yönlendirici merkezli internet protokollerinden daha fazla dağıtılmış bilgi işlem mimarileri. Hatta bazıları biz bile’On yıldır Google’da Yazılım Tanımlı Ağ (SDN) ‘nin faydalarından yararlanıyor ve tadını çıkarıyor. Birkaç yıl önce SDN’nin Google’a nasıl güç verdiğini açıkladık’S Datacenter Wan, B4, dünyadan biri’s en büyük wans. Geçen yıl GCP’nin ayrıntılarını gösterdik’S SDN Ağ Sanallaştırma Yığını, Andromeda. Aslında, bu sistemlerin her ikisi için mimari fikirler, veri merkezi ağındaki ilk çalışmalarımızdan geliyor.
Harika veri merkezi ağları oluşturmak sadece harika donanım ve yazılım oluşturmakla ilgili değildir. BT’dünyayla ortaklık hakkında’İlk günden itibaren en iyi ağ mühendisliği ve operasyon ekibi. Ağ oluşturma yaklaşımımız, ağın organizasyonunu temelden değiştirir’S verileri, kontrol ve yönetim uçakları. Böyle temel bir değişim bazı çarpmalar olmadan gelmez, ancak operasyon ekibimiz meydan okumadan daha fazlasını karşıladı. Biz’Dağıtılmış sistemlerimizin bant genişliği ihtiyaçlarını karşılamak için gezegensel ölçekli altyapımızda ağımızın birden fazla neslini yeniden konuşlandırdı ve yeniden konuşlandırdı.
Tüm bunları bir araya getirerek, veri merkezi ağlarımız tüm binaların ölçeğinde benzeri görülmemiş bir hız sağlar. Modülerlik için inşa edilmiştir, sunucularımızın en yeni nesli doyumsuz bant genişliği taleplerini karşılamak için sürekli olarak yükseltilirler. En zorlu İnternet hizmetlerinden ve müşterilerinin çalışma süresi gereksinimlerini karşılayan kullanılabilirlik için yönetilirler. En önemlisi, veri merkezi ağlarımız paylaşılan altyapıdır. Bu, tüm Google’ı güçlendiren aynı ağlar anlamına gelir’Sah Dahili Altyapı ve Hizmetler ayrıca Google Cloud Platformu Power. Bir sonraki harika internet hizmeti veya platformunun, onu icat etmek zorunda kalmadan birinci sınıf ağ altyapısını kullanabilmesi için bu özelliği dünyanın dört bir yanındaki geliştiricilere açma konusunda en çok heyecanlıyız.
Google Cloud
Andromeda bölgesine girin: Google Cloud Platform’un en son ağ yığını
Andromeda, ağ sanallaştırma çabalarımız için yazılım tanımlı bir ağ (SDN) tabanlı substrattır. Sanal ağları ve ağ içi paket işleme sağlanması, yapılandırılması ve yönetilmesi için düzenleme noktasıdır.
Amin Vahdat tarafından • 3 dakikalık okuma
- Google Cloud
- Altyapı
- Sistemler
Google, 9 $ ‘ın bir parçası olarak 750 milyon dolarlık yeni veri merkezi açıyor.5b hedef
Google Cloud Soars’a olan talep olarak Google, 9 $ yatırım yapma stratejisinin bir parçası olarak Nebraska’da yeni bir veri merkezi kuruyor.2022’de 5 milyar veri merkezi ve ofisinde.
Google, 9 dolar harcama vaadini yerine getiriyor.Nebraska’da 750 milyon dolarlık yeni bir veri merkezinin açılmasıyla 2022’de yeni Google veri merkezlerinde ve ofislerinde 5 milyar.
Omaha, NEB’deki büyük yeni Google Kampüsü., toplam 1’den fazla binadan oluşacak.Google Cloud hizmetlerine ve altyapısına olan talep yükseliyor. Google Cloud’da’Son dördüncü çeyrekte, şirket satış artışının yıllık yüzde 45 oranında 5 dolara ulaştığını bildirdi.5 milyar.
“[Yeni Veri Merkezi] yerel topluluğa daha fazla fırsat ve müşterilerimizin işlerini büyütmesi ve dijital hizmetler kullanması için daha fazla kaynak getirecek,” dedi Stacy Trackey Meagher, Google Cloud Genel Müdürü’S Merkez Bölgesi, bir açıklamada.
Nebraska’daki yeni Google Veri Merkezi, Mountain View, Kaliforniya’nın bir parçasıdır.-tabanlı arama ve bulut devi’toplam 9 dolar yatırım yapmayı planlıyor.5 milyar veri merkezinde ve u.S.-2022 sonuna kadar temelli ofisler.
Synergy Araştırma Grubuna göre Google, dünyanın dört bir yanında yeni veri merkezleri oluşturma konusunda en büyük harcama yapanlardan biridir ve büyüyen bulut müşteri taleplerini karşılamak için hipers ölçekli veri merkezleri inşa etmek ve donatmak için her yıl milyarlarca yatırım yapmak. Google, Amazon Web Services ve Microsoft, her biri en az 60 veya daha fazla veri merkezi konumunu barındıran dünyanın en geniş veri merkezi ayak izlerine sahiptir.
Veri merkezleri “hayati çapalar” Müşterilere ve yerel topluluklara, Google CEO’su Sundar Pichai’yi bu ay bir blog gönderisinde söyledi.
“Veri merkezlerine yapılan yatırımlarımız, insanların ve işletmelerin gelişmesine yardımcı olan dijital araçları ve hizmetleri güçlendirmeye devam edecektir,” dedi Google’s pichai.
Google’S Veri Merkezi Genişleme Planları
Nebraska’daki yeni veri merkezine ek olarak Google.
“U’da.S. Son beş yılda biz’VE, 26 eyalette ofislerimize ve veri merkezlerimize 37 milyar dolardan fazla yatırım yaptı ve 40.000’den fazla tam zamanlı iş yarattı. O’S’ye 40 milyar dolardan fazla araştırma ve geliştirmeye ek olarak.S. 2020 ve 2021’de,” dedi Pichai.
Veri merkezleri, amiral gemisi Google Cloud Platform (GCP) sunumu da dahil olmak üzere Google Cloud hizmetlerini ve altyapısını etkinleştirir.
2021’de GCP, 2020’ye kıyasla toplam anlaşma hacminde yüzde 80’den fazla büyüme kaydetti ve 1 milyar doları aşan anlaşma sayısındaki yüzde 65’ten fazla büyüme kaydetti.
Genel olarak, Google Cloud artık yıllık gelir çalışma oranı 22 $.16 milyar.
Google Veri Merkezi SSS Bölüm 3
Google, veri merkezlerini nerede oluşturacağına nasıl karar veriyor??
Google, veri merkezlerinin yerlerini, müşteri konumunu, mevcut işgücünü, iletim altyapısına yakınlığı, vergi indirimlerine, fayda oranlarına ve diğer ilgili faktörleri içeren faktörlerin bir kombinasyonuna dayanarak seçer. Son zamanlarda bulut altyapısını genişletmeye odaklanması, belirli yerler için kurumsal bulut müşteri talebi ve yüksek yoğunluklu nüfus merkezlerine yakınlık gibi daha fazla husus ekledi.
ST seçimi. Ghislain, bir veri merkezi için Belçika (2010 yılında açılan) enerji altyapısı, geliştirilebilir arazi, yüksek teknoloji işleri için güçlü bir yerel destek ve yakındaki okullarda ve üniversitelerde teknoloji eğitimini aktif olarak destekleyen bir teknoloji kümesinin varlığına dayanıyordu.
Olumlu bir iş iklimi başka bir faktördür. Google’a göre, mevcut arazi ve güç ile birleştiğinde, Oklahoma’yı özellikle çekici hale getirdi’P Pryor Creek sitesi duyurulduğunda operasyonlar kıdemli direktörü. Oregon’da, olumlu iş ortamı, satış vergisi olmayan bir eyalette yer almak anlamına gelir. Yerel Wasco İlçe Komiserleri, Google’ı emlak vergilerinin çoğundan muaf tutarken, 1 $ ‘lık bir kerelik ödeme yapmasını gerektirir.7 yerel yönetimlere ve her yıl en az 1 milyon dolarlık ödemelere.
Yenilenebilir enerji kaynaklarına yakınlık da giderek daha önemli hale geliyor. Google, yenilenebilir kaynaklara stratejik olarak yatırım yapıyor ve yeni veri merkezlerine otururken çevresel ayak izini dikkate alıyor.
Google veri merkezleri yenilenebilir enerji kullanıyor mu?
Google, dünyadaki herhangi bir şirketten daha fazla yenilenebilir enerji alıyor. IT 2016 Enerji kullanımının yarısından fazlasını açıklamak için yeterli enerji aldı. 2017 yılında şirket, yüzde 100 yenilenebilir enerji ile tüm enerji kullanımını tamamen dengelemeyi bekliyor. Bunu yapmak için Google, 2 için 20 satın alma anlaşması imzaladı.6 gigawatt (GW) yenilenebilir enerji. Bu, yenilenebilir enerjinin her yerde veya Google’ın ihtiyaç duyduğu miktarlarda mevcut olmayabilir, ancak Google, tükettiği gibi aynı miktarda yenilenebilir enerji satın alıyor.
Google ayrıca 2 dolar taahhüt etti.Dünya genelinde güç şebekesine eklenebilecek güneş ve rüzgar enerjisi geliştirmek için 5 milyar özkaynak finansmanı. Yenilenebilir projeleri finanse etme istekliliği, yenilenebilir enerji piyasasını mevcut açısından kademeli olarak genişletme ve yenilenebilir enerjinin satın alınma yollarını değiştirerek. Bu süreçte, yenilenebilir kaynakların kullanılması herkes için daha kolay ve daha uygun maliyetli hale gelir.
Hamina, Finlandiya’daki Google Veri Merkezi’nin yanında bir rüzgar türbini görünümü
Sürdürülebilirlik, veri merkezlerinin içine de bir odak noktasıdır. ST. Ghislain, Belçika, veri merkezleri Google’dı’Tamamen ücretsiz soğutmaya güvenen ilk. Ve bu tesis’Sitemiz su arıtma tesisi, veri merkezlerinin bölgeye dokunmak yerine bir endüstriyel kanaldan suyu geri dönüştürmesine izin verir’S Tatlı su temini.
Google veri merkezleri ne kadar enerji kullanıyor?
Veri merkezi enerji kullanımı, 5’in büyük bir yığınını temsil eder.7 Terawatt Saatleri Ana Şirketi Alfabesi, 2015 yılında kullanılır. Ortalama 1 puanla.12 (1 sanayi ortalamasına karşı.7) Google, veri merkezlerinin tipik bir veri merkezinin enerjisinin yarısını kullandığını söylüyor. Bunun büyüyen bir kısmı yenilenebilir, güç satın alma anlaşmaları yoluyla sağlanır.
Google veri merkezlerinde ne tür bir donanım ve yazılım kullanıyor??
BT’s Google’ın 2004’ten bu yana kendi internet altyapısını emtia bileşenlerinden kurduğu bir sır yok ve çevik, yazılım tanımlı veri merkezlerine neden. Ortaya çıkan hiyerarşik ağ tasarımı, tüm veri merkezlerinde standarttır.
Donanıma, Google’ın 2012 yılında tanıtılan Switch, Google tarafından tasarlanan özel sunucular ve Jüpiter tarafından yönetiliyor. Ölçek ekonomileriyle Google, en iyi fırsatları elde etmek için doğrudan üreticilerle sözleşme yapar.
Yevgeniy Sverdlik
Google’S Jüpiter Networking Switch’ler Google Cloud’da San Francisco’da Sergilenen 2017’de
Google’S sunucuları ve ağ yazılımı Linux açık kaynak işletim sisteminin sertleştirilmiş bir sürümünü çalıştırır. Bireysel programlar şirket içinde yazılmıştır. Bunlar, bilgimizin en iyisini içerir:
- Google Web Server (GWS)-Google’ın çevrimiçi hizmetleri için kullandığı özel Linux tabanlı web sunucusu.
- Depolama Sistemleri:
- Colossus-Google Dosya Sisteminin yerini alan küme düzeyinde dosya sistemi
- Kafein – Teragoogle’ın yerine 2010 yılında başlatılan sürekli bir endeksleme sistemi
- Hummingbird – 2013 yılında tanıtılan büyük arama endeksi algoritması.
Google ayrıca verilerinin çoğunu depolamak için kullandığı birkaç soyutlama geliştirdi:
- Protokol Tamponları-İletişim protokollerinde, veri depolamada ve daha fazlasında kullanılmak üzere yapılandırılmış verileri serileştirmenin dil bağımsız, platformdan bağımsız, genişletilebilir bir yolu
- Sstable (Sıralı Dizeler Tablosu) – Anahtarlardan hem anahtarların hem de değerlerin keyfi bayt dizeleri olduğu kalıcı, düzenli, değişmez bir harita. BigTable’ın yapı taşlarından biri olarak da kullanılır
- Recordio – Google ile uyumlu IO arabirimlerini tanımlayan bir dosya’S IO özellikleri
Google veri merkezlerinde makine öğrenimi nasıl kullanıyor??
Makine öğrenimi, büyük verilerle başa çıkmanın ayrılmaz bir parçasıdır. Global Yetenekler Lider, Insights & Innovation liderliğindeki Ryan Den Rooijen’in Londra’daki Büyük Veri İnovasyon Zirvesi’nden önce söylediği gibi (Mart 2017), “Gözlemlediğim sorunların çoğu, bu verilerin nasıl yararlı hale getirileceği ile ilgilidir… anlamlı iş etkisini sağlamak.” Bu nedenle, Google gibi ürünler için makine öğrenimi kullanmanın yanı sıra Google, veri merkezlerinin puanını tahmin etmek için sinir ağlarını da kullanır.
Google, her 30 saniyede bir PUE’yi hesaplar ve yükü, harici hava sıcaklığını ve mekanik ve soğutma ekipmanlarının seviyelerini sürekli olarak izler. Bu veriler, Google mühendislerinin, enerji yönetimini geliştirmeye yardımcı olmak için kullanılabilecek kalıpları ortaya çıkarmak için birçok değişkenin karmaşık etkileşimlerini analiz eden bir öngörücü model geliştirmesine olanak tanır. Örneğin, Google birkaç gün boyunca bazı sunucuları çevrimdışı aldığında, Mühendisler bu modeli enerji verimliliğini korumak ve paradan tasarruf etmek için soğutmayı ayarlamak için kullandılar. Model 99.Yüzde 6 doğru.
Temmuz 2016’da Google. Bu sistem, veri merkezi soğutma ünitelerinin enerji tüketimini% 40 ve genel puan% 15 oranında azaltmıştı. Sistem, sıcaklıkları bir saat önceden tahmin ederek soğutmanın beklenti olarak ayarlanmasına izin verir.
Google diğer şirketlerde alan kiralıyor mu?’ Veri merkezleri?
Evet. Google, mantıklı olduğunda başkalarından alan kiralıyor. Her Google Veri Merkezi’nin adı kapıda yok. Bunun yerine, şirket veri merkezi ihtiyaçlarını karşılamak için çeşitli stratejiler kullanıyor. Örneğin, önbellek alanları için alan kiralar ve küresel bulut veri merkezi sunumu için karışık bir yapı ve kiralama stratejisi kullanır.
Google kendi veri merkezi var mı
Amin Vahdat
VP & GM, Sistemler ve Hizmetler Altyapısı
Veri merkezi ağları, modern depo ölçekli ve bulut bilişimin temelini oluşturur. 100’ün altındaki GB/s bant genişliğinde on binlerce sunucu arasında, on binlerce sunucu arasındaki tekdüze, keyfi iletişimin altında yatan garantisi, hesaplama ve depolamayı dönüştürdü. Bu modelin birincil yararı basit ama derindir: daha yüksek seviyeli bir hizmete artımlı bir sunucu veya depolama cihazı eklemek, servis kapasitesi ve özelliğinde orantılı bir artış sağlar. Google’da Jüpiter Data Center Network teknolojimiz, kullanıcılarımız için AI ve Makine Öğrenimi, Compute Engine, Bigquery Analytics, Somar veritabanları ve düzinelerce daha fazlası gibi kullanıcılarımız için temel hizmetler için bu tür ölçeklendirme özelliğini desteklemektedir.
Son sekiz yılı optik devre anahtarlamasını (OCS) ve dalga bölünmesi çoğullamasını (WDM) Jüpiter’e entegre ederek geçirdik. Onlarca yıllık geleneksel bilgelik bunu yapmanın pratik olmadığını öne sürse de, OC’lerin yazılım tanımlı ağ (SDN) mimarimizle kombinasyonunun yeni yetenekleri sağladığını öne sürdü: artımlı ağ oluşturma desteği heterojen teknolojilerle; daha yüksek performans ve düşük gecikme, maliyet ve güç tüketimi; gerçek zamanlı uygulama önceliği ve iletişim kalıpları; ve sıfır indirme süresi yükseltmeleri. Jüpiter, tüm bunları% 10 oranında azaltırken, verimi% 30 oranında artırarak,% 40 daha az güç kullanarak,% 30 daha az maliyet elde ederek ve bilinen en iyi alternatiflerden 50x daha az kesinti sağlar. Bugün Sigcomm 2022’de sunduğumuz makalede bunu nasıl yaptığımız hakkında daha fazla bilgi edinebilirsiniz, Jüpiter Evolving: Google’ın Datacenter ağını optik devre anahtarları ve yazılım tanımlı ağ ile dönüştürmek.
İşte bu projeye genel bir bakış.
Gelişen Jüpiter Veri Merkezi Ağları
2015 yılında, Jüpiter Veri Merkezi ağlarımızın, 1pb/sn’den fazla toplu bant genişliğini desteklediğini, tekdüze 40GB/s’ye sahip 30.000’den fazla sunucuya nasıl ölçeklendiğini gösterdik. Bugün Jüpiter, 6pb/sn’den fazla veri merkezi bant genişliğini destekliyor. Üç fikirden yararlanarak daha önce hiç görülmemiş bu performans ve ölçek seviyesini sunduk:
- Yazılım Tanımlı Ağ (SDN) – Veri merkezi ağındaki binlerce anahtarlama yongasını programlamak ve yönetmek için mantıksal olarak merkezi ve hiyerarşik bir kontrol düzlemi.
- Clos Topolojisi – Rasgele büyük ağlara ölçeklenebilen daha küçük radix anahtar yongalarından inşa edilen engelleyici olmayan çok aşamalı bir anahtarlama topolojisi.
- Tüccar Anahtarı Silikon – Birleştirilmiş bir depolama ve veri ağı için uygun maliyetli, emtia genel amaçlı Ethernet anahtarlama bileşenleri.
Bu üç sütuna dayanarak, Jüpiter’S Mimari Yaklaşımı, dağıtılmış sistem mimarisinde bir SEA değişimini destekledi ve bir bütün olarak endüstrinin veri merkezi ağlarını nasıl inşa ettiği ve yönettiği yolunu belirledi.
Ancak, hiper ölçekli veri merkezi için iki temel zorluk kaldı. İlk olarak, veri merkezi ağlarının tüm binanın ölçeğinde konuşlandırılması gerekir – belki 40 MW veya daha fazla altyapı. Ayrıca, binaya dağıtılan sunucular ve depolama aygıtları her zaman gelişmektedir, örneğin 40GB/s’den 100GB/s’ye 200GB/s’ye ve bugün 400GB/s Native Ağ Bağlantıları. Bu nedenle, Veri Merkezi Ağı, yeni öğelere bağlanan ayakta durmak için dinamik olarak gelişmelidir.
Ne yazık ki, aşağıda gösterildiği gibi, Clos topolojileri, ona bağlanabilecek en hızlı cihazlar için tek tip destekli bir omurga tabakası gerektirir. Bina ölçekli, kapanış tabanlı bir veri merkezi ağının dağıtılması, günün en yeni neslinin sabit bir hızında çalışan çok büyük bir omurga tabakasının önceden dağıtılması anlamına geliyordu. Bunun nedeni, kapanan topolojilerin doğası gereği gerektirir her şeyden önce Toplama Bloklarından 1’den omurgaya fanout; Omurgaya kademeli olarak eklemek, tüm veri merkezinin yeniden kablonunu yeniden kablonun. Daha hızlı hat oranlarında çalışan yeni cihazları desteklemenin bir yolu, daha yeni hızı desteklemek için tüm omurga tabakasını değiştirmek olacaktır, ancak bu, anahtarları barındıran yüzlerce bireysel raf ve bina boyunca uzanan on binlerce fiber çifti göz önüne alındığında pratik olmayacaktır.
incir. 200GB/s bağlantı noktası hızına sahip yeni bir toplama bloğu (yeşil), 100 GB/s bağlantı noktası hızı ve 200GB/s bağlantı noktası hızına sahip bir yeni omurga bloğuna (mavi) bağlanır. Bu modelde, yeni toplama bloğundan ve yeni omurga bloğundan gelen bağlantıların sadece% 25’i 200GB/s’de çalışıyor.
İdeal olarak, veri merkezi ağı, heterojen ağ öğelerini bir “Büyüdükçe ÖDEME” Model, sadece gerektiğinde ağ öğeleri ekleme ve en yeni nesil teknolojiyi kademeli olarak destekleme. Ağ, sunucular ve depolama için sağladığı aynı idealize ölçeklendirme modelini destekleyerek, daha önce dağıtılandan farklı bir teknolojiye sahip olsa bile, ağ kapasitesinin artımlı eklenmesine izin verecektir.
İkincisi, tek tip bina ölçeği bant genişliği bir güç olsa da, veri merkezi ağlarının doğası gereği çok kiracı olduğunu ve sürekli olarak bakım ve lokalize başarısızlıklara tabi olduğunu düşündüğünüzde sınırlayıcı hale gelir. Tek bir veri merkezi ağı, bant genişliğine ve gecikme varyasyonuna karşı değişen düzeyde öncelik ve hassasiyetle yüzlerce bireysel hizmete ev sahipliği yapar. Örneğin, Web arama sonuçlarının gerçek zamanlı olarak sunulması, gerçek zamanlı gecikme garantileri ve bant genişliği tahsisi gerektirebilirken, çok saatlik bir parti analitik işi kısa süreler boyunca daha esnek bant genişliği gereksinimlerine sahip olabilir. Bu göz önüne alındığında, veri merkezi ağı, gerçek zamanlı iletişim kalıplarına ve ağın uygulamaya duyarlı optimizasyonuna dayalı olarak bant genişliği ve hizmetleri tahsis etmelidir. İdeal olarak, ağ kapasitesinin% 10’unun bir yükseltme için geçici olarak kaldırılması gerekiyorsa, bu% 10’unun tüm kiracılara eşit olarak dağıtılmaması, ancak bireysel başvuru gereksinimlerine ve önceliğe göre paylaştırılması gerekir.
Kalan bu zorlukları ele almak ilk başta imkansız görünüyordu. Veri merkezi ağları, büyük fiziksel ölçekte hiyerarşik topolojiler etrafında inşa edildi, böylece artımlı heterojenliği ve dinamik uygulama uyarlamasını desteklemek tasarıma dahil edilemeyecek. Bu çıkmazı geliştirerek ve tanıtarak kırdık Optik Devre Anahtarı (OCS) Jüpiter mimarisine. Bir optik devre anahtarı (aşağıda gösterilmiştir) bir optik fiber giriş bağlantı noktasını, rasgele bağlantı noktası-port eşlemeleri oluşturmak için iki boyutta döndürülebilecek iki mikro-elektromanik sistem (MEM) aynası ile bir çıkış bağlantı noktasına dinamik olarak eşler.
incir. MEMS Aynaları aracılığıyla N çıkış liflerine tek bir OCS aygıt eşleştirme N girişinin çalışması.
Aşağıda gösterildiği gibi Veri Merkezi Paket Anahtarları arasında bir OCS ara katmanı sunarak veri merkezi ağları için keyfi mantıksal topolojiler oluşturabileceğimiz anlayışına sahibiz.
incir. Fiberler yoluyla fiziksel olarak bağlanan toplama blokları OCS anahtarlarına. Çıktı liflerine giriş permütasyonunu bağlamak için her OCS anahtarını yapılandırarak mantıksal bir topoloji gerçekleştirilebilir.
Bunu yapmak, daha önce hiç elde edilmeyen ölçek, üretilebilirlik, programlanabilirlik ve güvenilirlik seviyeleri ile OCS ve yerel WDM alıcı -vericileri oluşturmamızı gerektirdi. Akademik araştırma optik anahtarların faydalarını araştırırken, geleneksel bilgelik OCS teknolojisinin ticari olarak uygulanabilir olmadığını öne sürdü. Birkaç yıl boyunca tasarladık ve inşa ettik Apollo OCS Bu şimdi veri merkezi ağlarımızın büyük çoğunluğunun temelini oluşturuyor.
OCS’nin göze çarpan bir yararı. OCS, bir giriş bağlantı noktasından inanılmaz hassasiyet ve az kayıpla bir çıkış bağlantı noktasına ışığı yansıtır. Işık, veri merkezi binaları arasında verileri güvenilir ve verimli bir şekilde iletmek için gereken WDM alıcı vericilerindeki elektro-optik dönüşüm yoluyla üretilir. Dolayısıyla, OCS bir parçası olur altyapı binası, veri hızı ve dalga boyu agnostiktir ve elektrik altyapısı, 40GB/s ila 100GB/s ila 200GB/s ila ve ötesinde iletim ve kodlama oranlarından geçerken yükseltme gerektirmez.
Bir OCS katmanı ile omurga katmanını veri merkezi ağlarımızdan çıkardık, bunun yerine heterojen toplama bloklarını doğrudan bir ağda birleştirdik, ilk kez veri merkezindeki kapanış topolojilerinin ötesine geçtik. Hem fiziksel kapasiteyi hem de uygulama iletişim modellerini yansıtan dinamik mantıksal topolojiler oluşturduk. Ağımızdaki anahtarlar tarafından görülen mantıksal bağlantıyı yeniden yapılandırmak artık standart işletim prosedürüdür ve topolojiyi bir modelden diğerine dinamik olarak geliştirmek, uygulamayı görülebilir etkisi olmadan dinamik olarak geliştirir. Bunu, binlerce bağımlı ve bağımsız işlemi sorunsuz bir şekilde düzenlemek için Orion yazılım tanımlı ağ kontrol düzlemimize dayanarak, bağlantı drenajlarını yönlendirme yazılımı ve OCS yeniden yapılandırmasıyla koordine ederek yaptık.
incir. Topoloji mühendisliğine ulaşan çoklu OCS
Özellikle ilginç bir zorluk, ilk kez, örgü topolojiler üzerindeki en kısa yol yönlendirmesinin artık veri merkezimizin gerektirdiği performansı ve sağlamlığı sağlayamamasıydı. Tipik olarak dağıtılan kapalı topolojilerin yan etkisi, ağ üzerinden birçok yol mevcut olsa da, hepsinin aynı uzunluk ve bağlantı kapasitesine sahip olması, böylece kayıtsız paket dağılımı veya Cesur yük dengeleme, Yeterli performans sağlar. Jüpiter’de, dinamik tanıtmak için SDN kontrol düzlemimizden yararlanıyoruz trafik mühendisliği, Google için öncü teknikler benimseme’S B4 WAN: Bağlantı kapasitesi, gerçek zamanlı iletişim kalıpları ve bireysel uygulama önceliğini gözlemlerken trafiği en kısa ve en kısa olmayan yollar arasında bölüyoruz (aşağıdaki şekilde kırmızı oklar).
incir. Anahtarlardaki akış tabloları trafik mühendisliği gerçekleştirin
Birlikte ele alındığında, Google’ı güçlendiren Jüpiter Veri Merkezi Ağları’nı tamamen yeniden araştırdık’S depo ölçekli bilgisayarlar, yol boyunca bir dizi endüstri ilkini tanıttı:
- Optik Devre Anahtarları Bina ölçekli ağlar için birlikte çalışabilirlik noktası olarak, heterojen teknolojileri, yükseltmeleri ve hizmet gereksinimlerini sorunsuz bir şekilde desteklemektedir.
- Daha yüksek performans, daha düşük gecikme, daha düşük maliyet ve daha düşük güç tüketimi için doğrudan örgü tabanlı ağ topolojileri.
- Gerçek zamanlı topoloji ve trafik mühendisliği, gerçek zamanlı bakım ve başarısızlıkları gözlemlerken, ağ bağlantısını ve yolları uygulama önceliği ve iletişim kalıplarına uyacak şekilde uyarlamak için.
- Pahalı ve zahmetli olan ihtiyacını ortadan kaldırarak, yerelleştirilmiş kapasite eklemesi/kaldırılmasıyla hitsiz ağ yükseltmeleri “Tüm Hizmetler Çıkış” Daha önce yüzlerce bireysel müşteri ve hizmeti gerektiren stil yükseltmeleri, hizmetlerini genişletilmiş bina kesinti süresi için taşıması için.
Temel teknoloji etkileyici olsa da, çalışmalarımızın nihai amacı, Google ve Google Cloud’a güç veren en zorlu dağıtılmış hizmetler için birlikte dönüştürücü yetenekler sağlayan performans, verimlilik ve güvenilirlik sunmaya devam etmektir. Yukarıda belirtildiği gibi, Jüpiter ağımız% 40 daha az güç tüketir,% 30 daha az maliyete maruz kalır ve farkında olduğumuz en iyi alternatiflerden 50x daha az kesinti sağlarken, akış tamamlanmasını% 10 azaltır ve verimi% 30 oranında iyileştirir. Bugün Sigcomm’da bu teknolojik başarının ayrıntılarını paylaşmaktan gurur duyuyoruz ve bulgularımızı toplulukla tartışmayı dört gözle bekliyoruz.
Tebrikler ve Jüpiter üzerinde her gün çalışan sayısız Googleer’a ve bu son araştırmanın yazarlarına teşekkür ederiz: Leon Poutievski, Omid Mashayekhi, Joon Ong, Arjun Singh, Mukarram Tariq, Rui Wang, Jianan Zhang, Virginia Beauregard, Patrick Conker, Steve Gribble, Patrick Conner, Hatve Grick, Hathen, Hat, Hathen, Hathen, Hathen, Hathen, Hat, Hathen, Hathen, Hat, Hat, Hat, Hat, Hat, Hat, Hat, Hat, Hat, Hathen, Patrick Conner, Steve Gribble, Rishi Krif Karthik Nagaraj, Jason Ornstein, Samir Sawhney, Ryohei Urata, Lorenzo Vicisano, Kevin Yasumura, Shidong Zhang, Junlan Zhou, Amin Vahdat.
1. Bir Toplama Bloğu.