Checkpoints
Create a Cloud SQL instance
/ 30
Whitelist the Cloud Shell instance to access your SQL instance
/ 30
Create a bts database and flights table using the create_table.sql file
/ 40
Google Cloud SQL'e Veri Yükleme
GSP196
Genel bakış
Bu laboratuvarda, CSV metin dosyalarındaki verileri Cloud SQL'e aktaracak, ardından basit sorgular kullanarak bazı temel veri analizleri gerçekleştireceksiniz.
Bu laboratuvarda kullanılan veri kümesi ABD Ulaşım İstatistikleri Bürosu'ndan alınmıştır ve ABD'deki yurt içi uçuşlarla ilgili geçmiş bilgileri içerir. Veri bilimi alanına ait birçok kavram ve tekniği açıklamak için kullanılabilen bu veri kümesinden, Google Cloud Platform'da Veri Bilimi görevi kapsamındaki tüm laboratuvarlarda yararlanılır.
Hedefler
- Cloud SQL örneği oluşturma
- Cloud SQL veritabanı oluşturma
- Metin verilerini Cloud SQL'e aktarma
- Sorguları kullanarak ilk veri modeli oluşturma
Kurulum ve gereksinimler
Laboratuvarı Başlat düğmesini tıklamadan önce
Buradaki talimatları okuyun. Laboratuvarlar süreli olduğundan duraklatılamaz. Laboratuvarı Başlat'ı tıkladığınızda başlayan zamanlayıcı, Google Cloud kaynaklarının ne süreyle kullanımınıza açık durumda kalacağını gösterir.
Bu uygulamalı laboratuvarı kullanarak, laboratuvar etkinliklerini gerçek bir bulut ortamında (Simülasyon veya demo ortamında değil.) gerçekleştirebilirsiniz. Bu olanağın sunulabilmesi için size yeni, geçici kimlik bilgileri verilir. Bu kimlik bilgilerini laboratuvar süresince Google Cloud'da oturum açmak ve Google Cloud'a erişmek için kullanırsınız.
Bu laboratuvarı tamamlamak için şunlar gerekir:
- Standart bir internet tarayıcısına erişim (Chrome Tarayıcı önerilir).
- Laboratuvarı tamamlamak için yeterli süre. (Laboratuvarlar, başlatıldıktan sonra duraklatılamaz)
Laboratuvarınızı başlatma ve Google Cloud Console'da oturum açma
-
Laboratuvarı Başlat düğmesini tıklayın. Laboratuvar için ödeme yapmanız gerekiyorsa ödeme yöntemini seçebileceğiniz bir pop-up açılır. Soldaki Laboratuvar Ayrıntıları panelinde şunlar yer alır:
- Google Cloud Console'u aç düğmesi
- Kalan süre
- Bu laboratuvarda kullanmanız gereken geçici kimlik bilgileri
- Bu laboratuvarda ilerlemek için gerekebilecek diğer bilgiler
-
Google Cloud Console'u aç'ı tıklayın (veya Chrome Tarayıcı'yı kullanıyorsanız sağ tıklayıp Bağlantıyı gizli pencerede aç'ı seçin).
Laboratuvar, kaynakları çalıştırır ve sonra Oturum açın sayfasını gösteren başka bir sekme açar.
İpucu: Sekmeleri ayrı pencerelerde, yan yana açın.
Not: Hesap seçin iletişim kutusunu görürseniz Başka bir hesap kullan'ı tıklayın. -
Gerekirse aşağıdaki kullanıcı adını kopyalayıp Oturum açın iletişim kutusuna yapıştırın.
{{{user_0.username | "Username"}}} Kullanıcı adını Laboratuvar ayrıntıları panelinde de bulabilirsiniz.
-
İleri'yi tıklayın.
-
Aşağıdaki şifreyi kopyalayıp Hoş geldiniz iletişim kutusuna yapıştırın.
{{{user_0.password | "Password"}}} Şifreyi Laboratuvar ayrıntıları panelinde de bulabilirsiniz.
-
İleri'yi tıklayın.
Önemli: Laboratuvarın sizinle paylaştığı giriş bilgilerini kullanmanız gerekir. Google Cloud hesabınızın kimlik bilgilerini kullanmayın. Not: Bu laboratuvarda kendi Google Cloud hesabınızı kullanabilmek için ek ücret ödemeniz gerekebilir. -
Sonraki sayfalarda ilgili düğmeleri tıklayarak ilerleyin:
- Şartları ve koşulları kabul edin.
- Geçici bir hesap kullandığınızdan kurtarma seçenekleri veya iki faktörlü kimlik doğrulama eklemeyin.
- Ücretsiz denemelere kaydolmayın.
Birkaç saniye sonra Google Cloud Console bu sekmede açılır.
Cloud Shell'i etkinleştirme
Cloud Shell, çok sayıda geliştirme aracı içeren bir sanal makinedir. 5 GB boyutunda kalıcı bir ana dizin sunar ve Google Cloud üzerinde çalışır. Cloud Shell, Google Cloud kaynaklarınıza komut satırı erişimi sağlar.
- Google Cloud Console'un üst kısmından Cloud Shell'i etkinleştir
simgesini tıklayın.
Bağlandığınızda, kimliğiniz doğrulanmış olur. Proje ise PROJECT_ID'nize göre ayarlanmıştır. Çıkış, bu oturum için PROJECT_ID'yi tanımlayan bir satır içerir:
gcloud
, Google Cloud'un komut satırı aracıdır. Cloud Shell'e önceden yüklenmiştir ve sekmeyle tamamlamayı destekler.
- (İsteğe bağlı) Etkin hesap adını şu komutla listeleyebilirsiniz:
-
Yetkilendir'i tıklayın.
-
Çıkışınız aşağıdaki gibi görünecektir:
Çıkış:
- (İsteğe bağlı) Proje kimliğini şu komutla listeleyebilirsiniz:
Çıkış:
Örnek çıkış:
gcloud
ile ilgili tüm belgeleri, Google Cloud'daki gcloud CLI'ya genel bakış rehberinde bulabilirsiniz.
1. görev: Ortamınızı hazırlayın
Bu laboratuvar, O'Reilly Media, Inc. tarafından yayınlanan Data Science on Google Cloud Platform, 2nd Edition (Google Cloud Platform'da Veri Bilimi, 2. Baskı) kitabı için geliştirilmiş bir grup kod örneğinden ve komut dosyasından yararlanır. Laboratuvar, "Creating Compelling Dashboard" (İlgi Çekici Kontrol Panelleri Oluşturma) başlıklı Bölüm 3'ün ilk kısmında ele alınan Google Cloud SQL'i yapılandırma ve veri görevlerini içe aktarma işlemlerini kapsar. Bölüm 2'de kullanılan örnek depoyu Github'dan Cloud Shell'e klonlayıp laboratuvar görevlerinin tümünü buradan gerçekleştireceksiniz.
Google Cloud Repository'den Veri Bilimi Deposunu Klonlama
- Cloud Shell'de depoyu klonlamak için aşağıdaki komutları girin:
- Depo dizinini şu şekilde değiştirin:
- Laboratuvarın ilerleyen bölümlerinde proje kimliğiniz için kullanılacak ortam değişkenlerini ve verilerinizi kapsayacak depolama paketini oluşturun:
- Dosyayı Cloud Storage paketinde saklamak için aşağıdaki komutu girin:
2. görev: Cloud SQL örneği oluşturma
- Cloud SQL örneği oluşturmak için aşağıdaki komutları girin:
Bu işlemin tamamlanması birkaç dakika sürebilir.
Tamamlanan görevi test etme
Yerine getirdiğiniz görevi doğrulamak için İlerleme durumumu kontrol et'i tıklayın. Cloud SQL örneğini başarıyla oluşturduysanız bir değerlendirme puanı görürsünüz.
- Cloud Shell IP adresiyle bir ortam değişkeni oluşturun:
- SQL örneğinize yönetim erişimi sağlamak için Cloud Shell örneğini izin verilenler listesine ekleyin:
- İstendiğinde, yapılan değişikliği kabul etmek için Y tuşuna basın.
Tamamlanan görevi test etme
Yerine getirdiğiniz görevi doğrulamak için İlerleme durumumu kontrol et'i tıklayın. SQL örneğine erişmek için Cloud Shell'i izin verilenler listesine başarıyla eklediyseniz bir değerlendirme puanı görürsünüz.
Veritabanı ve tablo oluşturma
Verileri bir Postgres tablosuna aktarmak için öncelikle boş bir veritabanı ve doğru şemayı kullanarak bir tablo oluşturmanız gerekir.
-
Cloud Console'un gezinme menüsünde (
) SQL'i tıklayın.
-
Bir örneğin Genel bakış sayfasını açmak için
flights
örnek adını tıklayın. -
Soldaki SQL gezinme menüsünde, Databases'i (Veritabanları) tıklayın.
-
Create database'i (Veritabanı oluştur) tıklayın.
-
Yeni veritabanı iletişim kutusuna veritabanı adı olarak
bts
girin. -
Create'i (Oluştur) tıklayın.
-
Bir örneğin Genel bakış sayfasını açmak için SQL gezinme menüsünden Overview'i (Genel bakış) seçin.
-
Üst tarafta, IMPORT'u (İÇE AKTAR) seçin.
-
Cloud Storage dosyası alanında Browse'u (Göz at) tıklayın.
-
Buckets (Paketler) bölümünde, paket adınızın karşısındaki oku tıklayın.
-
create_table.sql
dosyasını seçin. -
Select'i (Seç) tıklayın.
-
File format (Dosya biçimi) bölümünde SQL'i seçin.
-
Cloud SQL örneğinizde
bts
veritabanını belirleyin. -
İçe aktarma işlemini başlatmak için Import'u (İçe aktar) tıklayın.
Boş tablo birkaç saniye içinde oluşturulacaktır.
Tamamlanan görevi test etme
Yerine getirdiğiniz görevi doğrulamak için İlerleme durumumu kontrol et'i tıklayın. create_table.sql dosyasından yararlanarak bts veritabanını ve uçuş tablosunu başarıyla oluşturduysanız bir değerlendirme puanı görürsünüz.
3. görev: Cloud SQL örneğine verileri ekleme
Boş veritabanını ve tabloyu oluşturdunuz. Şimdi de CSV dosyalarını bu tabloya yükleyeceksiniz. Paketinizdeki 201501.csv dosyasını bulup biçim olarak CSV, veritabanı olarak bts, tablo olarak da flights girip Ocak verilerini yüklersiniz.
-
Cloud SQL örneği sayfanızda IMPORT'u (İÇE AKTAR) tıklayın.
-
Cloud Storage dosyası alanında Browse'u (Göz at) tıklayın, ardından paket adınızın karşısındaki oku ve
201501.csv
'yi tıklayın. -
Select'i (Seç) tıklayın.
-
Dosya biçimi olarak CSV'yi seçin.
-
bts
veritabanını seçin ve tablonuz olarakflights
yazın. -
IMPORT'u (İÇE AKTAR) tıklayın:
4. görev: Veritabanıyla etkileşimde bulunma
- Aşağıdaki komutu kullanarak Cloud Shell'den Cloud SQL örneğine bağlanın:
-
Şifre istendiğinde
Passw0rd
değerini girin. Yazarken harfleri görmeyebilirsiniz. -
Açılan komut isteminde bts veritabanına bağlanın:
-
Şifre istendiğinde
Passw0rd
değerini girin. -
Ardından, en yoğun 5 havaalanını getirmek için bir sorgu çalıştırın:
Veritabanı görece küçük olduğundan (yalnızca Ocak), bu sorgu etkili olsa da başka aylar eklendikçe veritabanı yavaşlayacaktır.
İlişkisel veritabanları, verilerin küçük bir alt kümesini getiren anlık sorgular gerçekleştirdiğiniz küçük veritabanları için uygundur. Daha büyük veritabanları için ilgili sütunları dizine ekleyerek ilişkisel veritabanının performansını ayarlayabilirsiniz. Dahası, ilişkisel veritabanları genellikle işlemleri desteklediğinden ve güçlü tutarlılığı garanti ettiğinden, sık güncellenen veriler için mükemmel bir seçenektir.
Buna karşın, aşağıdaki durumlarda ilişkisel veritabanları iyi bir seçenek değildir:
- Verileriniz genelde salt okunur durumdaysa
- Veri kümelerinizin boyutları terabayt aralığına giriyorsa
- Tablonun tamamını taramanız gerekiyorsa (örneğin, bir sütunun maksimum değerini hesaplamak için) veya veri akış hızınız yüksekse
Bu, uçuş gecikmesi kullanım alanını tanımlar. Bu durumda, ilişkisel veritabanından analiz veri ambarına, yani BigQuery'ye geçin. Analiz veri ambarı hem SQL kullanmamıza olanak sağlar hem de büyük veri kümeleriyle ve anlık sorgularla (yani, sütunların dizine eklenmesi gerekmeden) çalışmak için daha uygundur.
Tebrikler!
Artık nasıl tablo oluşturacağınızı ve Cloud Storage'da depolanan metin verilerini Google Cloud SQL'e nasıl aktaracağınızı biliyorsunuz.
Sonraki adımlar / Daha fazla bilgi
Buradan sonra aşağıdaki adımlarla devam edebilirsiniz:
Google Cloud eğitimi ve sertifikası
...Google Cloud teknolojilerinden en iyi şekilde yararlanmanıza yardımcı olur. Derslerimizde teknik becerilere odaklanırken en iyi uygulamalara da yer veriyoruz. Gerekli yetkinlik seviyesine hızlıca ulaşmanız ve öğrenim maceranızı sürdürebilmeniz için sizlere yardımcı olmayı amaçlıyoruz. Temel kavramlardan ileri seviyeye kadar farklı eğitim programlarımız mevcut. Ayrıca, yoğun gündeminize uyması için talep üzerine sağlanan, canlı ve sanal eğitim alternatiflerimiz de var. Sertifikasyonlar ise Google Cloud teknolojilerindeki becerilerinizi ve uzmanlığınızı doğrulamanıza ve kanıtlamanıza yardımcı oluyor.
Kılavuzun Son Güncellenme Tarihi: 28 Kasım 2023
Laboratuvarın Son Test Edilme Tarihi: 28 Kasım 2023
Telif Hakkı 2024 Google LLC Tüm hakları saklıdır. Google ve Google logosu, Google LLC şirketinin ticari markalarıdır. Diğer tüm şirket ve ürün adları ilişkili oldukları şirketlerin ticari markaları olabilir.