- (021) 53660861
- tableau@ilogoindonesia.id
- AKR Tower – 9th Floor Jl. Panjang no. 5

Artificial Intelligence (AI) telah mengubah cara organisasi menganalisis data. Kini, pengguna tidak lagi harus memahami bahasa SQL atau membuat dashboard yang kompleks untuk mendapatkan insight. Cukup dengan mengetik pertanyaan menggunakan bahasa sehari-hari, AI dapat menghasilkan grafik, menjelaskan tren, hingga memberikan rekomendasi berdasarkan data yang tersedia.
Namun, semakin banyak perusahaan mengadopsi AI untuk kebutuhan analitik, muncul satu pertanyaan yang tidak kalah penting: bagaimana memastikan bahwa jawaban AI benar-benar akurat dan dapat dipercaya?
Banyak organisasi masih memilih model AI berdasarkan popularitas, kecepatan, atau biaya. Padahal, model yang memberikan hasil terbaik untuk satu jenis data belum tentu menghasilkan performa yang sama pada lingkungan bisnis yang berbeda. Inilah yang mendorong Tableau Research mengembangkan Lexara, sebuah pendekatan untuk mengevaluasi kualitas Large Language Model (LLM) dalam proses Conversational Visual Analytics. Tujuannya bukan mencari AI yang paling cepat menjawab, tetapi AI yang paling tepat dalam memahami kebutuhan pengguna dan menghasilkan analisis yang dapat dipertanggungjawabkan.
Banyak solusi AI terlihat sangat meyakinkan ketika digunakan pada contoh data yang sederhana. Pertanyaan dijawab dengan cepat, visualisasi terlihat menarik, dan penjelasan terdengar meyakinkan.
Namun, kondisi di lingkungan perusahaan jauh lebih kompleks. Data berasal dari berbagai sistem, memiliki istilah bisnis yang berbeda, serta melibatkan aturan dan definisi yang sering kali hanya dipahami oleh tim internal. Dalam kondisi seperti ini, AI dapat menghasilkan jawaban yang terlihat benar, tetapi sebenarnya menggunakan metrik yang salah, memilih grafik yang kurang sesuai, atau mengabaikan konteks dari percakapan sebelumnya.
Karena itu, keberhasilan implementasi AI tidak cukup diukur dari seberapa cepat model memberikan jawaban. Organisasi juga perlu mengetahui apakah AI memahami maksud pengguna, memilih data yang tepat, serta mampu memberikan penjelasan yang relevan dan konsisten.
Selama ini, banyak proses evaluasi AI hanya berfokus pada benar atau salah. Padahal, dalam analisis data, kualitas jawaban tidak selalu bersifat hitam putih.
Misalnya, AI mungkin berhasil memilih data yang benar tetapi menggunakan jenis grafik yang kurang efektif. Atau AI memberikan visualisasi yang tepat, namun penjelasan yang menyertainya tidak cukup membantu pengguna memahami hasil analisis.
Lexara memperkenalkan pendekatan evaluasi yang lebih menyeluruh. Selain memeriksa akurasi data, pendekatan ini juga menilai kualitas visualisasi, kesesuaian grafik dengan tujuan analisis, penggunaan filter dan pengurutan data, hingga kemampuan AI menjelaskan hasil secara logis dan mudah dipahami.
Dengan cara ini, organisasi memperoleh gambaran yang lebih realistis mengenai kualitas AI sebelum diterapkan pada proses bisnis sehari-hari.
Salah satu tantangan terbesar dalam analitik berbasis AI adalah memahami cara pengguna berbicara tentang data.
Di dalam perusahaan, satu istilah dapat memiliki arti yang berbeda. Kata "penjualan", misalnya, bisa berarti nilai transaksi, jumlah unit yang terjual, atau pendapatan bersih setelah dikurangi retur. Jika AI tidak memahami konteks tersebut, hasil analisis dapat menyesatkan meskipun prosesnya terlihat benar.
Karena itu, proses evaluasi AI juga harus mempertimbangkan kemampuan model dalam memahami bahasa bisnis, mengenali istilah yang digunakan organisasi, serta menjaga konteks selama percakapan berlangsung. Semakin baik AI memahami konteks tersebut, semakin besar pula kepercayaan pengguna terhadap hasil analisis yang diberikan.
Keberhasilan implementasi AI tidak hanya ditentukan oleh kecanggihan teknologi, tetapi juga oleh tingkat kepercayaan pengguna.
Jika pengguna beberapa kali menemukan jawaban yang tidak konsisten atau visualisasi yang kurang tepat, mereka akan kembali menggunakan cara manual meskipun AI sebenarnya mampu mempercepat pekerjaan. Sebaliknya, ketika organisasi memiliki mekanisme evaluasi yang jelas, proses pemilihan model AI menjadi lebih objektif dan risiko kesalahan dapat dikurangi sejak awal.
Pendekatan seperti ini juga membantu tim IT, data analyst, maupun data scientist memilih kombinasi model dan prompt yang paling sesuai dengan kebutuhan organisasi. Hasilnya bukan hanya analisis yang lebih cepat, tetapi juga keputusan bisnis yang lebih akurat dan dapat dipertanggungjawabkan. Evaluasi AI akhirnya menjadi bagian penting dari tata kelola data dan strategi implementasi AI secara keseluruhan.
Pemanfaatan AI dalam analisis data terus berkembang dan membuka peluang besar bagi organisasi untuk bekerja lebih cepat serta menghasilkan insight dengan lebih mudah. Namun, keberhasilan implementasi AI tidak cukup hanya bergantung pada kemampuan menghasilkan jawaban dalam hitungan detik.
Organisasi juga perlu memastikan bahwa AI memahami konteks bisnis, menggunakan data yang tepat, menyajikan visualisasi yang sesuai, dan memberikan penjelasan yang dapat dipercaya. Riset Tableau melalui Lexara menunjukkan bahwa evaluasi AI harus dilakukan secara menyeluruh, dengan mempertimbangkan kualitas visualisasi, akurasi data, serta pengalaman pengguna.
Di era ketika AI semakin menjadi bagian dari proses pengambilan keputusan, kemampuan memilih dan mengevaluasi model AI sama pentingnya dengan kemampuan memanfaatkan AI itu sendiri. Dengan pendekatan evaluasi yang tepat, perusahaan dapat membangun analitik berbasis AI yang tidak hanya cepat, tetapi juga akurat, transparan, dan memberikan nilai nyata bagi bisnis.
tableau Indonesia merupakan bagian dari PT. iLogo Infralogy Indonesia, yang bertindak sebagai Distributor resmi tableau. Selain itu, kami juga berperan sebagai penyedia layanan (vendor) sekaligus distributor berbagai produk Infrastruktur IT dan Cybersecurity terbaik di Indonesia.
Tableau Indonesia adalah bagian dari PT. iLogo Infralogy Indonesia, yang bertindak sebagai partner resmi Tableau. Selain itu, kami juga berperan sebagai penyedia layanan (vendor) sekaligus distributor berbagai produk Infrastruktur IT dan Cybersecurity terbaik di Indonesia.