1. Ada dua alasan mengapa auditor mungkin menjadi terlibat dalam mengevaluasi efisiensi sistem.

Pertama, manajemen mungkin meminta mereka untuk mengevaluasi sistem operasional yang ada untuk menentukan apakah kinerja perusahaan dapat ditingkatkan. Kedua, manajemen mungkin meminta mereka untuk mengevaluasi sistem-sistem alternatif yang mereka sedang mempertimbangkan untuk pembelian, sewa, penyewaan, atau pengembangan. 2. Ada delapan langkah utama yang harus dilakukan dalam proses evaluasi efisiensi: (a)
merumuskan tujuan penelitian, (b) menyiapkan anggaran untuk evaluasi, (c) mendefinisikan indeks kinerja, (d) membangun suatu model beban kerja, (e) membangun suatu sistem (konfigurasi) model. (f) menjalankan percobaan, (g) analisis hasil, dan (h) memberikan rekomendasi 3. Sebuah indeks kinerja adalah ukuran efisiensi sistem. Hal ini mengungkapkan secara kuantitatif seberapa baik suatu sistem mencapai beberapa jenis kriteria efisiensi. Ada empat jenis indeks kinerja: (a) indeks ketepatan waktu. yang mengukur seberapa cepat suatu sistem yang mampu memberikan pengguna dengan output yang mereka butuhkan; (b) indeks throughput. yang mengukur seberapa banyak kerja dilakukan oleh sistem selama periode waktu; (c) indeks pemanfaatan. yang mengukur proporsi waktu sistem sedang sibuk, dan indeks keandalan (d). yang mengukur ketersediaan sistem untuk proses beban kerja pengguna 4. Sebuah beban kerja sistem adalah serangkaian tuntutan sumber daya atau tuntutan layanan dikenakan pada sistem dengan set pekerjaan yang terjadi selama jangka waktu tertentu. Selama evaluasi efisiensi sistem, auditor sering harus menggunakan model beban kerja yang lumayan daripada yang sebenarnya beban kerja itu sendiri. Hal ini mungkin terlalu mahal untuk melakukan eksperimen dengan menggunakan beban kerja yang sesungguhnya. Atau, sistem yang akan dievaluasi mungkin belum dapat beroperasi, dalam hal ini beban kerja yang sebenarnya bukan tujuan forevaluation tersedia. Beban kerja auditor menggunakan model harus mewakili beban kerja nyata dan menghasilkan jenis-jenis permintaan sumber daya yang sesuai untuk sistem atau komponen sistem yang diteliti.

5. Dua dimensi penting pada model beban kerja yang berbeda adalah (a) sumber data yang mereka didasarkan dan (b) apakah mereka dapat dijalankan pada s istem nyata. Natural model beban kerja didasarkan pada himpunan baik konten atau saat beban kerja nyata. Buatan model beban kerja didasarkan pada perkiraan karakteristik beban kerja nyata, sering karena beban kerja nyata tidak tersedia. Jika beban kerja model dapat dijalankan pada sistem untuk dievaluasi, itu adalah model beban kerja dieksekusi. Jika tidak, itu adalah sebuah model beban kerja nonexecutable. 6. Beban kerja perlu ditandai dalam beberapa cara. Salah satu pendekatan adalah dengan menggunakan rata-rata atau rerata nilai karakteristik, seperti tingkat kedatangan transaksi pada prosesor. Cara lain adalah dengan komponen beban kerja yang mirip dan menggambarkan karakteristik kelompok. Kadang-kadang korelasi antara karakteristik yang berbeda dari model beban kerja perlu dipertimbangkan 7. Ada berbagai jenis model beban kerja. Jejak adalah model beban kerja dieksekusi dibangun dengan mengambil subset beberapa beban kerja nyata atau menghasilkan mereka melalui tool. Instruksi campuran menentukan frekuensi dengan instruksi yang berbeda yang terjadi atau diharapkan terjadi dalam aplikasi. Program Kernel adalah program atau subrutin yang telah dikodekan sebagai pekerjaan perwakilan yang akan dijalankan pada sistem yang akan dievaluasi. Mereka berfokus pada bagian processorintensive dari pekerjaan dan bukan pada bagian input / output dari pekerjaan. Pekerjaan sintetis adalah pekerjaan atau set pekerjaan yang berkode dan dijalankan pada sistem yang akan dievaluasi "Ini berbeda dari kernel dalam bahwa latihan input / output kemampuan sistem yang akan dievaluasi. Standar yang model beban kerja dijalankan terdiri dari jejak, kernel, atau pekerjaan sintetis yang dianggap

standar terhadap mana kinerja sistem komputer yang berbeda dapat dievaluasi. Model Probabilistik beban kerja menjelaskan tuntutan sumber daya melalui distribusi probabilitas. Permintaan beban kerja khusus dihasilkan oleh sampling dari distribusi. 8. untuk menentukan apakah sistem dapat diubah untuk meningkatkan efisiensi, sistem itu
sendiri harus dimodelkan. Proses pemodelan melibatkan menentukan komponen sistem, antarmuka antara komponen-komponen, bagaimana sistem bekerja dan hubungan fungsional antara outpirts dan masukan 9. Auditor dapat menggunakan tiga jenis utama dari model sistem untuk mengevaluasi efisiensi. Model analitis menggambarkan hubungan antara indeks kinerja, parameter beban kerja, dan parameter sistem melalui rumus matematika. Jenis utama model analisis yang digunakan untuk mengevaluasi efisiensi sistem antrian model models.Simulation digunakan untuk mengemulasikan statis dan sifat-sifat dinamis sistem kedua untuk dievaluasi. Mereka memungkinkan sistem untuk dipelajari lebih terinci daripada model-model analitis. Model empiris dapat digunakan ketika sistem yang akan dievaluasi adalah operasional. Auditor memperoleh nilai untuk indeks kinerja, parameter beban kerja, dan parameter sistem yang menarik bagi mereka. Mereka kemudian menggunakan model statistik, seperti analisis variance model, model regresi, atau model analisis kovarians. untuk menentukan apakah ada hubungan statistik yang signifikan antara indeks kinerja dan beban kerja dan Parameter sistem 10. Model analitis sering cara termurah dan tercepat untuk melakukan evaluasi sistem Simulasi efisiensi sering memberikan hasil yang lebih akurat daripada model-model analitis. Mereka kadang-kadang digunakan untuk memvalidasi dan mengkalibrasi model analitis, yang kemudian digunakan untuk melakukan eksperimen karena mereka lebih murah. Model empiris sering model yang paling mahal untuk mengembangkan, menerapkan, dan digunakan. Meskipun demikian, mereka sering memberikan hasil yang paling akurat. Mereka kadang-kadang digunakan untuk memvalidasi dan mengkalibrasi model analitis atau simulasi, yang kemudian digunakan untuk melakukan eksperimen karena mereka lebih murah.

11. Ada beberapa tahap dalam pengembangan dan penggunaan model sistem. Pertama, model tersebut harus dirumuskan. Hubungan antara indeks kinerja dan parameter beban kerja dan sistem harus ditentukan 'Kedua, model tersebut harus dilaksanakan. Dalam kasus model analitik dan model simulasi, program mungkin harus ditulis. Ketiga, model tersebut harus divalidasi dan dikalibrasi. Keempat, eksperimen harus dilakukan selama nilai-nilai beban kerja dan sistem parameter bervariasi dan dampaknya terhadap kinerja indeks ditentukan. 12. Hanya beberapa jenis dan model model beban kerja sistem dapat digunakan dalam kombinasi dengan satu sama lain. Sebagai contoh, jejak model beban kerja dapat digunakan dengan model simulasi atau model empiris tetapi tidak Auditor model analitik 'harus mempertimbangkan dengan hati-hati bagaimana beban kerja dan model sistem akan berinteraksi, oleh karena itu, sebelum memilih metodologi evaluasi kinerja untuk menggunakan