POV AI Indonesia — Platform Intelijen Sentimen Ekonomi
Platform intelijen ekonomi otonom yang memantau indikator paling sensitif secara politis di Indonesia (harga BBM, nilai tukar Rupiah) melalui crawling terjadwal multi-sumber dan analisis bertenaga LLM. Menggantikan jam penelitian analis manual dengan intelijen terstruktur otomatis yang disampaikan secara real-time.
// Tantangan Utama
- Information Overload: Analis yang memantau harga BBM dan pergerakan Rupiah harus memeriksa secara manual lusinan sumber berita, portal pemerintah, dan saluran sosial — tugas harian 3-4 jam.
- Volatilitas Sumber: Target web scraping sering mengubah struktur HTML, memerlukan arsitektur scraper yang tangguh yang tidak rusak pada pembaruan situs minor.
- Subjektivitas Sentimen: Berita mentah tidak menangkap sentimen publik yang sebenarnya — analisis LLM memerlukan kalibrasi untuk membedakan pelaporan faktual dari reaksi publik yang emosional.
- Kesegaran Data: Kondisi ekonomi berubah dengan cepat; lag analisis 24 jam membuat intelijen tidak relevan untuk pengambilan keputusan selama peristiwa yang bergerak cepat.
// Pendekatan & Solusi
1. Web Crawler Adaptif Multi-Sumber
Scraper berbasis CSS selector dengan pola XPath fallback menargetkan 15+ sumber keuangan dan pemerintah. Monitoring kesehatan scraper mendeteksi perubahan struktural sumber dan memberi peringatan untuk re-kalibrasi, mencegah gap data yang diam.
2. Pipeline Analisis Terstruktur Bertenaga LLM
Konten mentah yang di-scrape melewati pipeline prompt LLM terstruktur yang menghasilkan: (1) ringkasan harga/nilai faktual, (2) skor sentimen publik (-5 hingga +5), (3) penilaian arah tren, dan (4) kesimpulan eksekutif — semua dalam di bawah 8 detik per siklus.
3. Siklus Intelijen Terjadwal Cron
Scheduler cron yang dapat dikonfigurasi menjalankan siklus crawl-analisis-simpan pada interval yang ditentukan pengguna (per jam hingga harian), memastikan kesegaran intelijen disesuaikan dengan volatilitas setiap indikator yang dipantau.
// Mengapa Tech Stack Ini?
| Teknologi | Alasan Pemilihan |
|---|---|
| Python + BeautifulSoup / Requests | Ekosistem scraping Python yang kaya memungkinkan adaptasi cepat ke sumber target baru; strategi ganda CSS selector + XPath mempertahankan ketahanan terhadap perubahan struktur HTML minor. |
| LLM via OpenAI / OpenRouter | Prompting output terstruktur (mode JSON) memastikan hasil analisis yang konsisten dan dapat di-parse mesin di ribuan siklus crawl tanpa kontrol kualitas manual. |
| FastAPI + PostgreSQL | FastAPI menyajikan endpoint API intelijen real-time ke dashboard frontend; PostgreSQL menyimpan data tren historis yang memungkinkan analisis trajektori sentimen multi-minggu. |
| Docker + Cron | Scheduler yang dikontainerisasi memastikan lingkungan eksekusi yang konsisten di berbagai deployment; penjadwalan berbasis cron menyediakan siklus refresh intelijen yang dapat diprediksi tanpa overhead infrastruktur. |
// Hasil & Dampak Bisnis
- 15+ - Sumber Data Dipantau (Media keuangan, portal pemerintah, dan saluran diskusi publik)
- <8s - Waktu Siklus Analisis (Dari crawl mentah ke ringkasan intelijen terstruktur per siklus)
- 100% - Operasi Otonom (Nol intervensi analis manual diperlukan untuk siklus intelijen rutin)
- Live - Status Produksi (Aktif memantau indikator ekonomi Indonesia di idn.povai.my.id)
// Galeri Proyek
