IBM Cloud Data Engine adalah layanan pusat IBM Cloud untuk data lake. Menggabungkan IBM Cloud Data Engine dengan data di IBM Cloud Object Storage memungkinkan Anda membuat ruang kerja aktif untuk berbagai kasus penggunaan analitik big data.
IBM Cloud Data Engine menggunakan Apache Spark, sebuah mesin pemrosesan data dalam memori yang bersifat sumber terbuka, cepat, dapat diperluas, serta dioptimalkan untuk latensi rendah dan analisis data secara ad hoc.
Tidak diperlukan ETL atau definisi skema untuk mengaktifkan kueri SQL. Menganalisis data di mana data tersebut berada di IBM Cloud Object Storage menggunakan editor kueri dan REST API kami.
Jalankan kueri sebanyak yang Anda butuhkan; Dengan harga bayar per kueri, Anda hanya membayar untuk pemindaian data. Kompresi atau partisi data untuk mendorong penghematan dan kinerja.
IBM Cloud Data Engine sangat tersedia dan mengeksekusi kueri menggunakan sumber daya komputasi di berbagai fasilitas.
Kontrol akses ke data Anda dengan IBM Identity and Access Management dan IBM Key Protect. Memberikan kepada pengguna kontrol terperinci atas bucket IBM Cloud Object Storage Anda.
IBM Cloud Data Engine mendukung berbagai format data seperti CSV, JSON, dan Parquet, serta memungkinkan ANSI SQL standar.
Layanan penyimpanan data berskala web yang sangat aman, hemat biaya, dan tangguh, memastikan akses berkelanjutan ke data Anda.
Mentransfer kumpulan data besar ke dan dari IBM Cloud Object Storage dengan andal dan dengan kecepatan maksimum.
Mempercepat pemindahan data dalam jumlah besar yang aman ke dalam IBM Cloud Object Storage, menggunakan perangkat penyimpanan portabel berkapasitas 120 TB yang kokoh dan dapat digunakan.
Untuk menggunakan IBM Cloud Data Engine, Anda memerlukan akun IBM Cloud Object Store untuk menyimpan kumpulan hasil kueri Anda.
Ikuti langkah-langkah berikut untuk memulai:
Anda sekarang siap untuk mengirimkan pertanyaan terhadap kumpulan data sampel kami atau milik Anda sendiri.
Anda harus membawa akun IBM Cloud Object Storage Anda sendiri, dan Anda bertanggung jawab atas setiap dan semua biaya yang Anda keluarkan untuk akun IBM Cloud Object Storage Anda, selain biaya IBM Cloud Data Engine.
1. IBM Cloud Data Engine memindai data dalam volume data Anda.
2. IBM Cloud Data Engine menulis hasilnya ke dalam file baru di bucket IBM Cloud Object Storage yang Anda tentukan.
IBM Cloud Data Engine dibangun di atas Apache Spark dan menggunakan Spark SQL untuk menjalankan kueri Anda. Anda dapat mengirimkan pertanyaan Anda melalui UI atau REST API.
Saat ini, IBM Cloud Data Engine belum terintegrasi dengan IBM Watson Knowledge Catalog. Namun, integrasi ini sangat penting dalam daftar prioritas kami sehingga pelanggan dapat mempublikasikan kueri, meta data, dan kumpulan data ke katalog serta aset data referensi yang terdaftar di katalog.
IBM Cloud Data Engine tersedia secara global.
IBM Cloud Data Engine memberikan Anda kendali untuk mengakses data Anda menggunakan kebijakan IBM Identity and Access Management.
IBM Cloud Data Engine dirancang agar toleran terhadap kesalahan dan sangat tersedia. Platform ini mendukung IBM Cloud SLA.
IBM Cloud Data Engine tersedia di IBM Cloud. Anda akan dikenakan biaya per kueri, berdasarkan jumlah data yang dipindai per bulan. Tidak akan ada biaya untuk kueri yang gagal, tetapi Anda akan ditagih untuk kueri yang dibatalkan berdasarkan jumlah data yang dipindai.
Tidak.
Anda hanya akan dikenakan biaya untuk data yang telah dipindai pada saat Anda membatalkan kueri.
Tidak ada biaya tambahan untuk IBM Cloud Data Engine. Anda akan dikenakan biaya untuk data yang disimpan di IBM Cloud Object Storage. Menggunakan IBM Cloud Data Engine akan meningkatkan penggunaan IBM Cloud Object Storage dan tagihan bulanan Anda. Anda bertanggung jawab untuk menghapus volume yang tidak lagi ingin Anda simpan di IBM Cloud Object Storage.