Rumah Keuangan Pribadi Menyiapkan Data Anda untuk Prediktif Analytics - dummies

Menyiapkan Data Anda untuk Prediktif Analytics - dummies

Daftar Isi:

Video: The Great Gildersleeve: The Circus / The Haunted House / The Burglar 2025

Video: The Great Gildersleeve: The Circus / The Haunted House / The Burglar 2025
Anonim

Bila Anda telah menentukan tujuan model, langkah selanjutnya dalam analisis prediktif adalah mengidentifikasi dan menyiapkan data yang akan Anda gunakan untuk membangun model Anda. Informasi berikut menyentuh aktivitas yang paling penting. Urutan umum langkah-langkah terlihat seperti ini:

  1. Identifikasi sumber data Anda.

    Data bisa dalam format yang berbeda atau berada di berbagai lokasi.

  2. Identifikasi bagaimana Anda akan mengakses data tersebut.

    Terkadang, Anda perlu memperoleh data pihak ketiga, atau data yang dimiliki oleh divisi yang berbeda dalam organisasi Anda, dll.

  3. Pertimbangkan variabel mana yang akan disertakan dalam analisis Anda.

    Satu pendekatan standar adalah memulai dengan berbagai variabel dan hilangkan yang tidak menawarkan nilai prediktif untuk model.

  4. Tentukan apakah akan menggunakan variabel turunan.

    Dalam banyak kasus, variabel turunan (seperti rasio harga per saham yang digunakan untuk menganalisis harga saham) akan memiliki dampak langsung yang lebih besar pada model daripada variabel mentah.

  5. Jelajahi kualitas data Anda, berusaha memahami keadaan dan keterbatasannya.

    Keakuratan prediksi model berhubungan langsung dengan variabel yang Anda pilih dan kualitas data Anda. Anda ingin menjawab beberapa pertanyaan spesifik data pada saat ini:

    • Apakah data sudah lengkap?
    • Apakah ada outlier?
    • Apakah data perlu dibersihkan?
    • Apakah Anda perlu mengisi nilai yang hilang, menyimpannya sebagaimana adanya, atau menghilangkannya sama sekali?

Memahami data dan propertinya dapat membantu Anda memilih algoritma yang paling berguna dalam membangun model Anda. Sebagai contoh:

  • Algoritma regresi dapat digunakan untuk menganalisis data deret waktu.
  • Algoritma klasifikasi dapat digunakan untuk menganalisis data diskrit.
  • Algoritma asosiasi dapat digunakan untuk data dengan atribut yang berkorelasi.

Algoritma individual dan teknik prediktif memiliki kelemahan dan kekuatan yang berbeda. Yang terpenting, keakuratan model bergantung pada memiliki kuantitas dan kualitas data yang besar. Data Anda harus memiliki jumlah record yang cukup untuk memberikan hasil yang bermakna secara statistik.

Mengumpulkan data yang relevan (sebaiknya banyak catatan dalam jangka waktu lama), melakukan preprocessing, dan mengekstrak fitur dengan nilai prediktif yang paling banyak adalah tempat Anda menghabiskan sebagian besar waktu Anda. Tapi Anda tetap harus memilih algoritma dengan bijak, sebuah algoritma yang harus sesuai dengan masalah bisnis.

Persiapan data sangat spesifik untuk proyek yang sedang Anda kerjakan dan algoritma yang Anda pilih untuk dipekerjakan.Bergantung pada persyaratan proyek, Anda akan menyiapkan data Anda sesuai dan memasukkannya ke algoritma saat Anda membuat model untuk memenuhi kebutuhan bisnis.

Dataset yang digunakan untuk melatih dan menguji model harus berisi informasi bisnis yang relevan untuk menjawab masalah yang ingin Anda selesaikan. Jika tujuan Anda adalah (misalnya) untuk menentukan calon pelanggan mana yang cenderung melakukan churn, maka kumpulan data yang Anda pilih harus berisi informasi tentang pelanggan yang telah mengalami mutasi di masa lalu selain pelanggan yang belum memilikinya.

Beberapa model dibuat untuk menambang data dan memahami hubungan mendasar - misalnya, algoritma yang dibangun dengan algoritma pengelompokan - tidak memerlukan hasil akhir tertentu.

Underfitting

Underfitting adalah saat model Anda tidak dapat mendeteksi adanya hubungan dalam data Anda. Ini biasanya merupakan indikasi bahwa variabel penting - yang memiliki kekuatan prediktif - tidak disertakan dalam analisis Anda.

Jika variabel yang digunakan dalam model Anda tidak memiliki daya prediktif tinggi, cobalah menambahkan variabel spesifik-domain baru dan jalankan ulang model Anda. Tujuan akhirnya adalah untuk meningkatkan kinerja model pada data pelatihan.

Masalah lain yang harus diperhatikan adalah musiman (bila Anda memiliki pola musiman, jika Anda gagal menganalisis beberapa musim, Anda mungkin mendapat masalah.) Misalnya, analisis saham yang hanya mencakup data dari seekor banteng pasar (di mana harga saham secara keseluruhan naik) tidak memperhitungkan krisis atau gelembung yang dapat membawa koreksi besar terhadap keseluruhan kinerja saham. Gagal memasukkan data yang membentang di pasar beruang banting dan (bila harga saham secara keseluruhan turun) membuat model tidak menghasilkan pilihan portofolio terbaik.

Overfitting

Overfitting adalah saat model Anda menyertakan data yang tidak memiliki kekuatan prediktif namun hanya spesifik untuk kumpulan data yang Anda analisis. Noise - variasi acak dalam kumpulan data - dapat menemukan jalannya ke dalam model, sehingga model pada dataset berbeda menghasilkan penurunan besar dalam kinerja dan keakuratan model.

Menyiapkan Data Anda untuk Prediktif Analytics - dummies

Pilihan Editor

Bagaimana Mengkonversi ke Mode Bitmap di Photoshop Elements 12 - dummies

Bagaimana Mengkonversi ke Mode Bitmap di Photoshop Elements 12 - dummies

Kadang Anda mungkin ingin berkonversi gambar ke mode bitmap di Photoshop Elements. Modus bitmap paling sering digunakan dalam seni garis cetak, seperti logo hitam putih, ilustrasi, atau efek hitam putih yang Anda buat dari gambar RGB Anda. Juga, Anda dapat memindai tanda tangan analog Anda sebagai gambar bitmap dan mengimpornya ke yang lain ...

Bagaimana Memperbaiki Distorsi Kamera di Photoshop Elements - dummies

Bagaimana Memperbaiki Distorsi Kamera di Photoshop Elements - dummies

Jika Anda pernah mencoba menangkap yang menjulang pencakar langit atau katedral di lensa kamera Anda, Anda tahu bahwa itu sering melibatkan memiringkan kamera Anda dan meletakkan leher Anda dalam posisi yang tidak wajar. Dan kemudian, setelah semua itu, apa yang Anda berakhir dengan adalah pandangan terdistorsi tentang bangunan yang mengesankan di ...

Bagaimana membuat Novel Grafis di Photoshop Elements 11 - dummies

Bagaimana membuat Novel Grafis di Photoshop Elements 11 - dummies

Filter Novel Grafis baru di Photoshop Elements 11 mengambil sedikit eksperimen untuk mendapatkan efek yang Anda inginkan. Tapi setelah Anda mengatur setting Anda, tampilan ini cukup menarik. Ini menciptakan tampilan ilustratif seolah dilakukan dengan pena atau grafit. Berikut adalah langkah-langkah untuk menerapkan filter Novel Grafis yang baru ...

Pilihan Editor

Menyoroti Peran Terapis dalam Mengobati Gangguan Bipolar - dummies

Menyoroti Peran Terapis dalam Mengobati Gangguan Bipolar - dummies

Setelah psikiater secara efektif mengulang fungsi otak dengan benar Minuman obat, masalah Anda mungkin sebagian besar bisa dipecahkan. Bagi banyak orang dengan gangguan bipolar, bagaimanapun, obat hanya memberikan sedikit kelegaan; Beberapa gejala terus berlanjut dan Anda memerlukan intervensi tambahan untuk mencapai pemulihan yang lebih lengkap. Bahkan jika Anda mengalami kelegaan gejala penuh, sistem Anda mungkin ...

Bagaimana cara menyimpan buku harian mimpi - dummies

Bagaimana cara menyimpan buku harian mimpi - dummies

Buku harian mimpi membantu Anda memantau impian Anda dan menemukan tema atau bagaimana Anda mimpi telah menjadi kenyataan atau berwawasan. Manfaatkan impian Anda dengan mengikuti tip berikut untuk sebuah jurnal mimpi yang berwawasan: Personalisasikan buku harian Anda: Ini bisa rapi dan rapi, buku sketsa besar tanpa garis, buku spiral sederhana, atau ...

Pilihan Editor

Bagaimana Mengenal Seseorang di Facebook - dummies

Bagaimana Mengenal Seseorang di Facebook - dummies

Hal itu terjadi pada semua orang: Setelah beberapa saat, Anda mulai merasa Seperti beberapa orang yang mengacaukan Facebook untuk Anda dan ingin berteman dengan beberapa orang. Mungkin Anda hanya merasa memiliki terlalu banyak teman, atau mungkin Anda dan seorang teman secara sah terpisah. Mungkin Anda mengalami kejatuhan besar dan hanya butuh ...

Cara Memperbarui Daftar Teman Facebook Anda - dummies

Cara Memperbarui Daftar Teman Facebook Anda - dummies

Setelah membuat dan mulai menggunakan daftar Teman Facebook Anda, Anda dapat terus menambahkan orang ke mereka sekaligus Anda menambahkan mereka sebagai teman. Ketika Anda yang mengirim Permintaan Teman, ikuti langkah-langkah ini untuk juga menambahkan orang tersebut ke Daftar Teman tertentu: Dari Timeline-nya, setelah Anda menambahkan dia sebagai ...

Cara mengunggah foto ke Facebook - dummies

Cara mengunggah foto ke Facebook - dummies

Facebook adalah tempat yang tepat untuk menyimpan foto dan video Anda. karena itu adalah tempat dimana sebagian besar teman Anda bisa melihatnya. Jika Anda memiliki beberapa foto yang ingin Anda bagikan dengan cepat, ikuti langkah-langkah ini untuk menampilkannya ke teman Anda: