Di ajang Kafka Summit Bangalore 2024, India, Confluent Inc. memperkenalkan kemampuan baru yang akan menyederhanakan integrasi artificial intelligence (AI) dan memperluas akses stream processing terhadap aneka beban kerja.
Permudah Integrasi Data dan AI
Confluent akan segera menghadirkan AI Inference Model melalui Confluent Cloud for Apache Flink. Fitur ini bertujuan menjawab tantangan integrasi mesin AI dan data pipeline. Masalah yang kerap dihadapi dalam menerapkan AI, khususnya AI generatif, adalah kebutuhan pasokan data terbaru dan kaya akan konteks.
Namun para developer sering kali harus menggunakan lebih dari satu tool dan bahasa pemrograman ketika bekerja dengan model AI dan jalur pemrosesan data. Akibatnya beban kerja semakin kompleks dan terfragmentasi.
Di sinilah AI Model Inference berperan dalam menyederhanakan pengembangan dan deployment aplikasi AI. Dengan menggunakan SQL statement yang simpel pada Apache Flink, para pengembang dapat melakukan panggilan ke AI engine, seperti OpenAI, AWS SageMaker, GCP Vertex, dan Microsoft Azure. Dengan cara ini, menurut Confluent, perusahaan dapat mengorkestrasi pekerjaan data cleaning dan data processing di satu platform.
Shaun Clowes, Chief Product Officer di Confluent, menjelaskan bahwa AI Model Inference akan mengatasi kerumitan dalam penggunaan data streaming untuk pengembangan AI sehingga organisasi dapat berinovasi lebih cepat dan memberikan pengalaman pelanggan yang lebih baik.
Ia juga menekankan peran Apache Kafka dan Flink, yang juga disediakan Confluent, sebagai penghubung kunci untuk mendorong pengembangan aplikasi AI dan machine learning melalui data yang tersedia tepat waktu dan akurat.
Beberapa manfaat yang ditawarkan fitur AI Model Inference seperti menyederhanakan pengembangan AI karena pengembang dapat berinteraksi dengan model AI menggunakan SQL syntax yang lebih mereka pahami.
Koordinasi yang lebih lancar antara pemrosesan data dan workflow AI juga diharapkan akan meningkatkan efisiensi dan mengurai kompleksitas operasional.
Sementara aliran data yang lebih banyak, terbaru, dan kontekstual akan memungkinkan model-model AI generatif memberikan respons, jawaban yang lebih akurat.
Stream Processing di Lingkungan Hybrid
Masih di ajang Kafka Summit yang dihadiri lebih 3000 peserta itu, Confluent juga menghadirkan Confluent Platform for Apache Link yang dijanjikan tersedia akhir tahun ini. Penawaran terbaru ini berupa layanan managed service yang memungkinkan stream processing oleh distribusi Flink dilakukan di lingkungan on-premises atau hybrid.