Penyusunan Instrumen Riset

The Survey as a Social Occasion Speakers should not say things that they believe to be false (truthfulness) Speakers should make comments that are relevant to the purpose of conversations (relevance) Speakers should make their contributions as informative as possible and not repeat themselves (nonredundancy) Speakers should express themselves as clearly as possible (clarity)

Open-ended & closed-ended questions (1) Open-ended atau free-response question: responden menjawab dengan pilihan kata sendiri Closed-ended atau fixed-response question: responden memilih jawaban yang disediakan

Open-ended & closed-ended questions (2) Bagaimana IS/IT governance di organisasi menurut Anda? (open-ended) Bagaimana IS/IT governance di organisasi menurut Anda? (close-ended) Jelek Biasa Bagus

Open-ended & closed-ended questions (3) Audit SI/TI apa yang dilakukan di organisasi Anda? (open-ended) Audit SI/TI apa yang dilakukan di organisasi Anda? (close-ended) Finansial Non-finansial Tidak dilakukan audit SI/TI Tidak tahu

Open-ended & closed-ended questions (4) Kelebihan open-ended: Kebebasan responden untuk menjawab. Jawaban yang panjang lebar jadi bahan untuk gali informasi Pemahaman kita sendiri bisa jadi lebih jelas

Open-ended & closed-ended questions (5) Masalah: Responden lebih capek karena tidak bisa hanya memberi tanda Jawaban yang panjangnya variatif Perlu iter yang ahli, bisa mencari kejelasan dari jawaban yang kabur, pintar probing, dan bisa memastikan jawabannya konkrit Coding-nya ribet, time-consuming, dan bisa muncul error

Open-ended & closed-ended questions (6) Kelebihan close-ended: Menjawabnya lebih mudah Coding lebih mudah Administrasi lebih mudah

Open-ended & closed-ended questions (7) Masalah: Membuatnya relatif susah, jawaban penting tidak masuk, bisa jadi pilihan jawaban tidak ada yang sesuai (“Lainnya: ….”, elisitasi) Kalau pilihan jawaban terlalu banyak (lebih baik open-ended) Responden kurang terlibat

Open-ended & closed-ended questions (8) Ingat tujuan penelitian. Kalau klasifikasi lebih cocok closed-ended. Kalau eksploratif lebih cocok open-ended Seberapa banyak penguasaan responden terhadap hal yang ditanyakan. Kalau banyak, closed-ended. Kalau sedikit dan closed-ended, orang yang ngga tau bisa milih. JANGAN BERTANYA MENGENAI HAL YANG ORANG TIDAK TAHU.

Open-ended & closed-ended questions (9) Apakah jawaban mereka lebih terstruktur? Kalau tidak sebaiknya open-ended. Motivasi responden. Perlu niat dalam menjawab open-ended Penguasaan pembuat alat terhadap hal yang mau diteliti. Kalau tidak terlalu sebaiknya open-ended.

Response format Yes/no Kategori. Apa ada nilai tengah? “Tidak tahu”, “ragu2”

Skala Likert (1) IT GOVERNANCE   Hal yang dimaksud dengan IT Governance di sini adalah kapasitas organisasi untuk mengontrol pembuatan dan pengimplementasian strategi TI. Berikut ini adalah sejumlah deskripsi mengenai IT Governance, tulislah jawaban Anda di ruang kosong yang disediakan dengan salah satu dari yang berikut ini: 4: Sangat sesuai 3: Agak sesuai 2: Tidak tahu/ragu-ragu 1: Tidak sesuai, belum tercapai 0: Sangat tidak sesuai, masalah besar 1. Struktur Pengambilan Keputusan Manajemen Puncak 1 Awareness terhadap lingkungan bisnis Manajemen puncak aware terhadap lingkungan bisnis dan aware terhadap perlunya reformasi manajemen dan reformasi bisnis. 2 Posisi TI dalam reformasi manajemen dan bisnis Bagi manajemen puncak TI adalah sumber dan alat untuk menciptakan diferensiasi kompetitif dan untuk menciptakan nilai tambah dalam reformasi manajemen dan reformasi bisnis. TI dianggap lebih dari “alat rasionalisasi operasi dan labor-savings”.

Skala Likert (2) Contoh 2: customer satisfaction Secara keseluruhan bagaimana Anda menilai produk ini: Sangat memuaskan Cukup memuaskan Kurang memuaskan Sangat tidak memuaskan

Pertimbangan dalam membuat skala Berapa kategorinya? Dua (misalnya yes, no, bisa juga tiga “tidak tau”)? Lima (misalnya skala likert)? Lainnya? 7-11 cukup. More refined, ada indikasi lebih valid. Short-term/working/active memory: 5 – 9 items Labelnya kata atau angka?

Ranking (1) Berilah ranking dari 1 sampai 10 berdasarkan derajat kepentingannya menurut Anda: ___ Optimizing enterprise-wide IT services ___ Implementing business transformation initiatives ___ Updating obsolete systems ___ Optimizing organizational effectiveness ___ Restructuring the IT function ___ Connecting to customers, suppliers and or partners electronically ___ Instituting cross-functional information systems ___ Using IT for competitive breakthrough ___ Improving the systems application process ___ Developing and electronic business strategy

Ranking (2) Apakah pilihan jawaban sudah yang paling cocok/penting? Perlu elisitasi

Elisitasi (1) Menurut anda, apakah keuntungan-keuntungan/segi positif yang diperoleh jika seorang individu dapat mengakses Internet? Apakah kerugian-kerugian/segi negatif yang diperoleh jika seorang individu dapat mengakses Internet? Selain keuntungan-keuntungan dan kerugian-kerugian di atas, hal-hal apakah yang terlintas di pikiran anda jika mendengar "mengakses Internet"?

Elisitasi (2) Mengikuti perkembangan trend dan teknologi, Mendapatkan kabar terbaru dengan mudah, Menghubungi orang lain di luar negeri dengan cepat dan mudah, Menambah pengetahuan mengenai berbagai macam hal, Mendapatkan informasi dengan mudah, Mendapatkan kabar terbaru dengan cepat, Mendapatkan informasi dengan cepat, Memperoleh berbagai macam file dan program komputer, Mendapatkan bahan untuk menyelesaikan tugas kuliah/paper, Membuka wawasan pemikiran, Mendapatkan informasi tanpa keluar rumah, Menghubungi orang dengan mudah, Menghubungi orang dengan cepat, Berbisnis melalui Internet, Mengisi waktu luang, Mendapatkan tagihan telepon yang mahal, Memperoleh hiburan kapan saja, Memiliki pola pikir yang maju, Memperluas pergaulan, Mendapatkan tagihan yang mahal dari perusahaan penyedia jasa Internet, Berbincang-bincang dengan orang, Membuat saluran telepon sibuk sehingga tidak dapat menerima panggilan telepon dari luar, Menjadi lupa waktu, Menghubungi orang dengan biaya yang relatif murah, Berbelanja melalui Internet, Menjadi ketagihan/kecanduan mengakses Internet, Mendapatkan informasi yang tidak benar/menyesatkan, Melihat bahan-bahan porno (pornografi)

FGD Focus group discussion: diskusi unstructured atau semi-structured antara partisipan (karakteristik sama dengan sampel) dimoderatori iter yang pinter. Bagus untuk elisitasi, explore, inventori, identifikasi aspek penting, masalah, dsb.

Existing questions Menggunakan alat yang sudah ada, terutama yang sudah valid Bisa buat diperbandingkan, analisa lintas-/antarkasus Unless questionnaire items have been copyrighted, no permission is required

Preliminaries Semakin abstrak topik sebaiknya semakin banyak item Alat harus sependek mungkin dan sufficient menggali data yang diperlukan

The Opening (1) Interesting, nonthreatening, and easy topic at the beginning to get them involved and motivate them to cooperate. Kalau perlu sebenarnya tidak berhubungan Sesuatu yang menarik: intrinsik (tujuan, minat, harapan)

The Opening (2) Bagus kalo pertanyaan pertama open-ended karena…

The Opening (3) … orang senang berbicara dan didengarkan dengan serius

The Opening (4) Termasuk dalam kategori apakah organisasi Anda saat ini? Bukan pengguna teknologi telekomunikasi dan informasi (non-ICT user), di mana organisasi: tidak menggunakan telepon dan/atau faks, dan tidak menggunakan komputer Bukan pengguna teknologi informasi (non-IT user), di mana organisasi: menggunakan telepon dan/atau faks, dan Pengguna teknologi telekomunikasi dan informasi namun tidak menggunakan jaringan komputer (non-networked ICT user), di mana organisasi: menggunakan komputer namun tidak ada jaringan komputer dan/atau Internet Pengguna teknologi telekomunikasi dan informasi secara intensif (intensive ICT user), di mana organisasi: menggunakan komputer dan terhubung dengan jaringan komputer dan Internet.

Sensitive & routine questions Boring/sensitive/routine questions di belakang, kalo di depan terlalu berisiko Di depan bisa tersinggung: foot in the door technique Data kontrol di belakang, di depan bikin capek duluan dan dianggap bagian survai Yang susah2 di tengah, nggak di depan sehingga punishing, tidak di belakang waktu sudah capek

Data kontrol (1) Personal info dan variabel2 yang relevan: nama, usia, jenis kelamin, pendapatan, dsb. Variabel2 kontrol Kontrol terhadap responden Kategorisasi untuk break-downs

Data kontrol (2) Nama organisasi/departemen/perusahaan : Bergerak di bidang/industri: Apakah organisasi menciptakan dan/atau menjual solusi teknologi informasi (TI) kepada pelanggan? (Y/T) Kepemilikan: PMDN PMA Joint-venture BUMN Lainnya Jumlah tenaga kerja dalam organisasi: Perkiraan pendapatan tahunan: Jabatan: Tanggung jawab: Apakah Anda bertanggung jawab untuk : pengelolaan sistem informasi (SI)/teknologi informasi (TI) organisasi? (Y/T) perencanaan SI/TI organisasi? (Y/T) menentukan kebutuhan tenaga kerja SI/TI organisasi? (Y/T) menentukan syarat-syarat/kualifikasi tenaga kerja SI/TI yang dibutuhkan? (Y/T)

Item writing (1) Item harus pendek, gampang dibaca, tidak ambigu. Jelas bagi peneliti blum tentu jelas bagi responden. “Biasanya”, “Sering”, “di sini” Kalimat harus sesuai dengan yang diajak bicara. Kalau sampel orang teknis, bisa menggunakan bahasa teknis (hati2 malah gak ngerti), jika heterogen, pakai yang bisa dimengerti semua (hati2 responden merasa dianggap bodoh).

Item writing (2) Hati2 double-barreled questions Is the CIO always (or when necessary) asked to attend major strategy formulation meetings of user departments? Does he attend voluntarily? (0 1 2 3 4) Rating menjawab yang mana? Kalau yang pertama, tidak ketahuan kondisinya apakah always atau when necessary (mungkin tidak perlu diketahui). Kalau yang kedua, mungkin skali voluntary, brikutnya tidak

Item writing (3) Item harus bebas dari kata2 emosional atau kata2 bias lainnya Jangan leading questions: ada possible answer di pertanyaan, atau pertanyaan yang membuat jawaban tertentu lebih acceptable. “Apakah anda setuju jika…” misalnya diganti dengan “Setuju atau tidak setuju kah Anda jika…”

Item writing (4) Untuk pertanyaan pribadi/sensitif, kata2 harus pintar, diplomatis, dan tidak bikin malu yang ditanya Bisa diawali dengan pernyataan dulu. Misalnya “Ada yang beranggapan chatting lewat Internet menyenangkan dan bermanfaat dan ada yang beranggapan ceting tidak menyenangkan dan tidak bermanfaat. Apa pendapat Anda mengenai ceting?”

Item writing (5) Hindari jargon, slang, dan singkatan Jangan tanyakan sesuatu di masa yang akan datang yang terlalu jauh, misalnya intensi Hindari double negatives

Reason analysis (1) “Mengapa Anda memilih masuk Perguruan Tinggi X?” “Karena orangtua” “Karena dekat rumah” “Karena asik dan karena tidak diterima di tempat2 lain” “Karena pacar di situ” “Karena beasiswa” Outlining: Mengapa memutuskan meneruskan sekolah Bagaimana mendapat alternatif2 Mengapa memilih fasilkom.

Reason analysis (2) Buat pertanyaan berdasarkan outline: “Kapan mulai mempertimbangkan secara serius mau masuk PT X?”, “Bagaimana kemudian Anda memilih untuk meneruskan sekolah?” “Apakah ngelamar di perguruan tinggi lain? Yang mana aja?” “Apa2 aja yang menarik dari PT X bagi Anda waktu itu?” Dst.

Memory problems Jangan tanya hal2 yang terlalu lama di masa lalu. Yang penting2 kira2 1 tahun, yang kurang penting kira 1 bulan. Beri waktu responden untuk menjawab Beri urutan dan konteks yang jelas Kalau perlu ingatan yang akurat, bisa dibantu dengan closed-questions Kalau bisa cek dengan dokumen yang ada, atau tidak perlu ditanyakan sama sekali

Response bias problems Social desirability Acquiescence response set: the tendency to be agreeable. Ordinal/position biases. Misalnya milih pilihan pertama. Perlu dibikin imbang antara positif dengan negatif. Pertanyaan bisa dibikin lebih spesifik. Caranya divariasikan.

Filter/contingency questions Apakah organisasi memiliki perencanaan SI/TI (IS/IT plan) tertulis? Tidak (lanjut ke nomor 3) Ya Tidak tahu Apakah perencanaan SI/TI itu dibuat untuk mendukung rencana bisnis? Tidak, karena ………………………………………………………………… Ya, karena ……………………………………………………………………. Apakah perhitungan/penilaian finansial dibuat sebelum investasi TI dilakukan? Tidak, karena …………..……………………………………………………. Ya, karena ..…………………………………………………………………..

Field pretesting Apakah bahasa cocok? Petunjuk jelas? Apakah pertanyaan dan format pertanyaan sudah cukup variatif agar responden tertarik? Apakah open-ended questions terlalu luas sehingga analisa susah? Apakah pilihan jawaban closed-ended questions lengkap dan jelas? Apa ada pertanyaan yang tidak dijawab? Brapa lama selesainya? Dsb.