Talha Turan'ın kişisel web sitesi – Veri Mühendisliği, Bulut Bilişim, Yazılım Geliştirme, İpuçları
Python kullanarak bir SQL Server’daki (bu örnekte Azure SQL veritabanı) bir tabloda yer alan veriyi, Parquet formatında AWS S3 bucket’ına aktarmak için gerekli kodu kısaca inceleyelim. Ön gereksinimler Azure SQL veritabanından veriyi çekme Örnek olarak aşağıdaki desende, tablo_1 adında ve içinde deneme için iki satırlık veri olan bir tablomuz olduğunu düşünelim. Kodu çalıştırdığımızda aşağıdaki gibi… Yazının devamı Python ile SQL Server’dan S3 Bucket’a veri aktarımı
Microsoft SQL Server’dan AWS S3 bucket üzerindeki bir klasöre veri aktarımı için öncelikle NiFi arayüzünden Controller Settings bölümünden SQL Server JDBC sürücüsünün eklenmesi gerekir. Controller Settings Controller Services sekmesine geçilir ve yeni bir kayıt eklemek için artı simgesine tıklanır. Açılan Add Controller Service penceresinde arama kutusundan aratılarak DBCPConnectionPool seçilir ve Add butonuna tıklanır. Kayıt eklendikten… Yazının devamı Apache NiFi ile SQL Server’dan AWS S3’e Veri Aktarımı