Seri Pendiri SaaS: Perjalanan Dremio Menuju Status Unicorn

Posting dari tamu oleh Afza Wajid, Bill Tarr, dan Mark Birch, AWS

Dengan berkembangnya sistem keterlibatan dan kecerdasan, ada penekanan yang makin besar untuk memberikan wawasan data di seluruh organisasi modern. Namun, agar data dapat dianalisis secara efektif, diperlukan keahlian khusus dan kode kustom yang mahal untuk memusatkan data di seluruh sistem penyimpanan yang berbeda sebelum data tersebut dapat dianalisis. Dengan munculnya kerangka kerja penyimpanan data terdistribusi sumber terbuka seperti Hadoop, developer dapat secara langsung mengueri sumber data terdistribusi, tetapi ilmuwan dan analis data masih belum dapat memperoleh nilai dari data dengan cara mandiri.

Dremio, startup unicorn yang didanai Seri D yang didirikan pada tahun 2015, menyederhanakan tumpukan analitik dengan mesin kueri beperforma tinggi dan sangat efisien yang memungkinkan konsumen data untuk secara langsung melakukan kueri ke penyimpanan danau data cloud berskala petabita, sekaligus menghilangkan transfer data dan penguncian vendor secara masif, serta memitigasi risiko keamanan. Selain itu, lapisan layanan mandiri semantik yang menghubungkan sumber data ke alat kecerdasan meningkatkan waktu untuk mendapatkan nilai bagi para ilmuwan dan analis data. Dremio kini memperluas jangkauan solusinya dengan meluncurkan Dremio Cloud, sebuah danau data cloud-native sebagai layanan yang menyederhanakan pengalaman pelanggan.

Tim AWS SaaS Factory mengundang Pendiri dan Chief Product Officer Dremio, Tomer Shiran, untuk mendiskusikan perjalanan Dremio menuju perangkat lunak sebagai layanan dan untuk berbagi pembelajaran penting bagi bisnis yang membangun penawaran SaaS dan platform sebagai layanan (PaaS) di AWS. Shiran, seorang wirausahawan dengan pengalaman lebih dari 15 tahun di bidang perangkat lunak korporasi, pernah menduduki posisi di bidang manajemen produk dan teknik di Hewlett Packard, Microsoft, dan IBM Research. Sebelum bergabung dengan Dremio, ia adalah VP of Product di MapR dan membantu mengembangkan perusahaan dari lima karyawan menjadi hampir 400 karyawan serta ratusan pelanggan perusahaan. Baca terus untuk mengetahui selengkapnya mengenai perjalanan Dremio menuju status unicorn.

SaaS Factory: Tomer, terima kasih telah meluangkan waktu untuk berbincang dengan kami hari ini. Sebagai permulaan, ceritakan sedikit mengenai proposisi nilai yang menjadi dasar pendirian Dremio.

Tomer Shiran: Semua orang menginginkan lebih banyak data. Namun, makin banyak data yang ada, makin sulit untuk mendapatkan wawasan yang berarti dari data tersebut secara efisien. Penyimpanan danau data cloud seperti Amazon S3 telah menjadi tujuan pilihan untuk menyimpan data dalam jumlah besar karena murah, dapat diskalakan, dan mudah dikelola. Namun, untuk menganalisis data tersebut, perusahaan secara historis perlu memindahkan dan menyalin data tersebut ke dalam gudang data milik sendiri, sebuah proses yang mahal, kompleks, berisiko, dan tidak fleksibel.

Mesin danau data Dremio berada di antara penyimpanan danau data cloud dan konsumen data, yang memungkinkan mereka untuk secara langsung meminta data untuk dasbor beperforma tinggi dan analitik interaktif tanpa perlu menyalin data ke dalam gudang data milik sendiri, lalu perlu membuat tabel agregasi, ekstraksi, kubus, atau turunan lainnya. Dremio juga menyediakan lapisan semantik bersama yang memberdayakan analis data untuk menemukan, menguratori, menganalisis, dan berbagi set data dengan cara mandiri, serta memusatkan keamanan dan tata kelola data untuk tim data. Hasilnya adalah arsitektur data yang lebih sederhana dan lebih ramping yang mengurangi waktu untuk mendapatkan nilai sekaligus meningkatkan keamanan data dan menghilangkan penguncian vendor.

Secara lebih luas, inovasi sumber terbuka dan kepemimpinan pemikiran industri sangat penting bagi proposisi nilai Dremio. Misalnya, Apache Arrow pada awalnya merupakan format memori internal kami sendiri yang diputuskan untuk menjadi sumber terbuka. Sekarang Apache Arrow menjadi standar untuk komputasi dalam memori, dengan lebih dari 20 juta unduhan setiap bulannya. Baru-baru ini, kami menciptakan Project Nessie, yang membawa kontrol versi seperti Git ke danau data, mempercepat ketangkasan rekayasa data, ilmu data, dan analisis.

SaaS Factory: Minggu ini, Anda meluncurkan Dremio Cloud. Beritahu kami mengapa Anda memilih pendekatan arsitektur unik yang Anda ambil.

Tomer Shiran: Dremio Cloud adalah mesin kueri danau data cloud-native yang dihadirkan sebagai layanan yang disesuaikan dengan beban kerja pelanggan. Makin banyak perusahaan yang menginginkan layanan yang terkelola penuh yang memungkinkan mereka untuk fokus mendapatkan nilai dari data, alih-alih mengkhawatirkan pengaturan dan administrasi sistem. Jadi, mengembangkan penawaran SaaS Dremio adalah perkembangan alami dalam cerita kami.

Dremio Cloud menyediakan konkurensi tinggi dan kueri latensi rendah secara langsung di Amazon S3, serta lapisan semantik yang membuat data dapat dikonsumsi, konsisten, dan aman bagi analis dan ilmuwan data. Terdiri dari bidang kontrol yang selalu aktif yang menerima kueri dari klien dan bertanggung jawab atas perencanaan kueri dan manajemen mesin, serta bidang data yang terdiri dari mesin komputasi yang bertanggung jawab atas eksekusi kueri.

Bidang kontrol multipenghuni merupakan pusat dari pengalaman pelanggan Dremio Cloud, melakukan hosting semua interaksi yang berhadapan dengan klien, termasuk antarmuka pengguna, API REST, dan titik akhir kueri data. Saat pengguna bisnis ingin menjalankan analisis dengan Dremio Cloud, mereka menghubungkan alat BI pilihan mereka, seperti Tableau, Power BI, SageMaker, Looker, atau notebook Jupyter, ke bidang kontrol di app.dremio.cloud. Bidang kontrol dengan aman mendelegasikan eksekusi kueri ke mesin komputasi yang secara otomatis disediakan di akun AWS pelanggan sehingga semua pemrosesan data terjadi di dalam akun pelanggan.

Arsitektur bidang data terdiri dari beberapa mesin komputasi berukuran tepat untuk mendukung beban kerja yang berbeda. Dibangun di atas arsitektur multimesin ini, Dremio Cloud memperkenalkan kemampuan mesin untuk menskalakan secara dinamis berdasarkan ukuran beban kerja sehingga membantu perusahaan mengatasi semua tingkat konkurensi sekaligus mempertahankan performa yang konsisten. Semua data disimpan dan diproses di dalam akun pelanggan, serta dienkripsi saat bergerak dan saat diam, yang memastikan bahwa pelanggan memiliki kontrol penuh atas data mereka. Selain itu, tidak ada koneksi masuk ke dalam bidang data sehingga pelanggan tidak perlu membobol firewall/grup keamanan mereka. Fitur-fitur ini menghasilkan kisah keamanan dan tata kelola yang lebih kuat bagi pelanggan kami.

Pendekatan yang kami lakukan membutuhkan inovasi teknis yang signifikan, termasuk menggunakan Apache Arrow secara menyeluruh untuk meningkatkan performa kueri secara dramatis. Tanpa Arrow, serialisasi dan deserialisasi struktur data menjadi tidak efisien, yang berakibat pada pemborosan memori dan sumber daya CPU. Arrow memungkinkan Dremio menggabungkan manfaat struktur data kolom dengan komputasi dalam memori sehingga memberikan manfaat performa dan fleksibilitas data yang kompleks serta skema dinamis.

SaaS Factory: Siapa saja pelanggan inti Anda, dan bagaimana hal ini berubah setelah Dremio Cloud diperkenalkan?

Tomer Shiran: Dremio selalu dirancang untuk digunakan oleh perusahaan mana pun yang ingin menggunakan data perusahaan secara strategis. Ratusan korporasi di seluruh industri menggunakan Dremio untuk mendukung danau data cloud mereka, termasuk lembaga keuangan seperti Standard Chartered Bank, perusahaan farmasi seperti Johnson & Johnson, dan produsen seperti Honeywell. Amazon sendiri menggunakan Dremio untuk menganalisis dan memberdayakan intelijen bisnis pada data di danau data internalnya, seperti data rantai pasokan.

Meski begitu, kami telah merancang Dremio Cloud agar dapat diskalakan secara dua arah sehingga startup yang didukung oleh ventura yang memiliki banyak data untuk dianalisis tetapi belum tentu memiliki sumber daya untuk mengoperasikan infrastruktur data mereka sendiri atau lebih memilih untuk tidak menghabiskan uang hasil jerih payah mereka di gudang data cloud, dapat menggunakannya secara efektif.

SaaS Factory: Penambahan produk SaaS melibatkan transformasi bisnis dan organisasi yang komprehensif. Bagaimana berbagai fungsi organisasi berevolusi agar lebih selaras dengan bisnis SaaS dan model penyampaiannya?

Tomer Shiran: Memang. Di sisi rekayasa produk, kami menciptakan ratusan ribu pengujian otomatis dan proses CI/CD yang komprehensif. Kami memperluas organisasi pengembangan produk kami dengan menyertakan tim rekayasa reliabilitas situs (SRE), DevOps, dan keamanan, dengan para pemimpin dari perusahaan, seperti Google dan Salesforce. Hasilnya, kami sekarang dapat merilis pembaruan untuk Dremio Cloud setiap hari.

Selain perubahan pada tim rekayasa produk, kami menyelaraskan tim yang berhadapan langsung dengan pelanggan di dalam perusahaan untuk mendukung model adopsi layanan mandiri. Tim penjualan dan pemasaran kami fokus untuk mengarahkan prospek berkualitas tinggi ke penawaran Dremio Cloud secara online, sementara tim sukses pelanggan dan tim dukungan kami memanfaatkan data operasional dan otomatisasi untuk memberikan dukungan yang proaktif dan tepat sasaran guna memastikan kepuasan pelanggan yang kuat. Hal yang paling menarik adalah kami dapat menggunakan Dremio secara internal dengan data kami sendiri sebagai fondasi untuk hal ini!

SaaS Factory: Bagaimana Anda melibatkan AWS saat mengembangkan Dremio Cloud?

Tomer Shiran: Kami selalu memiliki hubungan khusus dengan Amazon, yang bermitra dengan berbagai tim di dalam perusahaan. Kami bekerja sama dengan berbagai tim layanan AWS, seperti Amazon S3, AWS Glue, dan Amazon Lake Formation, untuk menghadirkan integrasi antara layanan kami dan berkolaborasi pada fitur-fitur baru. Kami bermitra dengan tim AWS Marketplace untuk mendistribusikan Dremio melalui marketplace sehingga perusahaan dapat menggunakan produk kami dan membayar melalui AWS. Tim penjualan dan pemasaran kami bekerja sama dengan Jaringan Partner AWS dan organisasi penjualan AWS untuk menghadirkan Dremio kepada pelanggan AWS sehingga memungkinkan pelanggan AWS untuk membangun danau data generasi berikutnya.

Kami juga memiliki hak istimewa untuk bekerja sama dengan tim AWS SaaS Factory selama beberapa tahun terakhir. Saat kami memulai perjalanan kami untuk membangun Dremio Cloud, kami ingin memanfaatkan teknologi canggih dan praktik terbaik guna menciptakan layanan cloud terbaik di kelasnya. Karena banyak layanan SaaS dan PaaS telah dibangun di AWS dalam 10 tahun terakhir, termasuk layanan AWS itu sendiri, kami ingin menghindari tantangan dan keterbatasan yang dialami layanan lain, sekaligus memanfaatkan apa yang berfungsi dengan baik. Untuk melakukannya, kami bermitra dengan tim SaaS Factory untuk mengembangkan arsitektur yang memberikan skalabilitas, keamanan, dan performa yang tak tertandingi, serta mengembangkan strategi penetapan harga berbasis penggunaan yang fleksibel untuk memastikan model pengiriman SaaS yang dioptimalkan bagi pelanggan di semua segmen.

SaaS Factory: Dremio kini secara resmi menjadi ‘Unicorn’ berdasarkan putaran pendanaan seri D terbaru Anda pada Januari 2021. Jika Anda berbicara dengan calon pendiri, apa saran Anda untuk mereka?

Tomer Shiran: Jika ada kebutuhan yang signifikan di pasar yang membuat Anda bersemangat, jangan ragu untuk meluncurkan startup Anda sendiri. Namun, luangkan waktu untuk membangun produk terbaik dalam kategori tersebut. Misalnya, di ruang infrastruktur data, dibutuhkan banyak sekali kekayaan intelektual untuk menghasilkan produk yang solid. Kami menghabiskan waktu selama lima tahun di Dremio untuk membangun apa yang kami pikir akan benar-benar menjadi mesin danau data generasi berikutnya, dengan fokus pada inovasi dan kesuksesan pelanggan. Setelah Anda membangun fondasi yang kuat, pertumbuhan eksponensial akan lebih mudah diwujudkan. Saat ini, enam tahun setelah didirikan, Dremio memberdayakan danau data cloud dari banyak perusahaan terbesar di dunia dan telah mengumpulkan lebih dari 200 juta USD dalam pendanaan ventura pada tahun lalu.

Dremio dan AWS sangat antusias dengan masa depan manajemen data dan inovasi yang kami hadirkan dengan Dremio Cloud. Jika Anda tertarik untuk mempelajari selengkapnya, silakan kunjungi halaman Dremio Cloud!

Tentang AWS SaaS Factory

AWS SaaS Factory membantu organisasi di setiap tahap perjalanan SaaS. Jika ingin membuat produk baru, memigrasi aplikasi yang sudah ada, atau mengoptimalkan solusi SaaS di AWS, AWS SaaS Factory Program dapat membantu. Pembangun dan operator SaaS didorong untuk menghubungi perwakilan akun mereka guna menanyakan mengenai model keterlibatan dan bekerja dengan tim AWS SaaS Factory.

Kunjungi Hub Wawasan AWS SaaS Factory untuk menemukan lebih banyak konten teknis dan bisnis serta praktik terbaik. Daftar untuk mendapatkan informasi terbaru mengenai berita, sumber daya, dan acara SaaS di AWS.