Während des gesamten Lebenszyklus der Systementwicklung haben Analyst, Management und Benutzer die sich entwickelnden Informationssysteme und Netzwerke bewertet, um Feedback für ihre eventuelle Verbesserung zu geben. Die Evaluierung ist auch nach der Systemimplementierung erforderlich.
Evaluierungstechniken
In der Erkenntnis, dass die laufende Evaluierung von Informationssystemen und Netzwerken wichtig ist, wurden viele Evaluierungstechniken entwickelt. Diese Techniken umfassen Kosten-Nutzen-Analysen (wie in Kapitel „Projektmanagement“ beschrieben); Modelle, die versuchen, den Wert einer Entscheidung basierend auf den Auswirkungen überarbeiteter Informationen mithilfe von Informationstheorie, Simulation oder Bayes’scher Statistik abzuschätzen; Benutzerbewertungen, die Implementierungsprobleme und Benutzerbeteiligung hervorheben; und Informationssystem-Utility-Ansätze, die die Eigenschaften von Informationen untersuchen.
Jede Art der Auswertung dient einem anderen Zweck und hat inhärente Nachteile. Eine Kosten-Nutzen-Analyse kann schwierig anzuwenden sein, da Informationssysteme zum ersten Mal Informationen über Ziele liefern, so dass es unmöglich ist, die Leistung vor und nach der Implementierung des Systems oder des verteilten Netzwerks zu vergleichen. Der überarbeitete Entscheidungsbewertungsansatz ist schwierig, da alle Variablen, die mit dem Entwurf, der Entwicklung und der Implementierung des Informationssystems verbunden sind, nicht berechnet oder quantifiziert werden können. Der Benutzerbeteiligungsansatz liefert einige Einblicke für neue Projekte, indem er eine Checkliste für potenziell dysfunktionales Verhalten verschiedener Organisationsmitglieder bereitstellt, betont jedoch die Implementierung gegenüber anderen Aspekten des IS-Designs. Der Evaluierungsansatz des Informationssystems kann umfassender sein als die anderen, wenn er erweitert und systematisch angewendet wird.
Der Informationssystem-Utility-Ansatz
Der Informationssystem-Utility-Ansatz zur Bewertung von Informationssystemen kann eine umfassende und fruchtbare Technik zur Messung des Erfolgs eines entwickelten Systems sein. Es kann auch als Leitfaden für die Entwicklung zukünftiger Projekte dienen, die der Analyst möglicherweise durchführt.
Zu den Informationsquellen gehören Besitz, Form, Ort und Zeit. Um das Informationssystem umfassend zu bewerten, müssen diese Dienstprogramme um Aktualisierungsdienstprogramme und Zieldienstprogramme erweitert werden. Dann kann man sehen, dass die Dienstprogramme die Fragen wer (Besitz), was (Form), wo (Ort), wann (Zeit), wie (Aktualisierung) und warum (Ziel) angemessen beantworten.
Ein Informationssystem kann als erfolgreich bewertet werden, wenn es über alle sechs dieser Hilfsprogramme verfügt. Wenn das Systemmodul bei der Bereitstellung eines der Dienstprogramme als „schlecht“ eingestuft wird, ist das gesamte Modul zum Ausfall bestimmt. Ein teilweises oder „faires“ Erreichen eines Nutzens führt zu einem teilweise erfolgreichen Modul. Wenn das Informationssystem-Modul als „gut“ bei der Bereitstellung jedes Nutzens beurteilt wird, ist das Modul ein Erfolg.
Possession Utility beantwortet die Frage, wer die Ausgabe erhalten oder mit anderen Worten, wer für die Entscheidungsfindung verantwortlich sein sollte. Informationen haben keinen Wert in den Händen von jemandem, dem die Macht fehlt, Verbesserungen im System vorzunehmen, oder jemandem, dem die Fähigkeit fehlt, die Informationen produktiv zu nutzen.
Form Utility beantwortet die Frage, welche Art von Ausgabe an den Entscheidungsträger verteilt wird. Die Dokumente müssen für einen bestimmten Entscheidungsträger in Bezug auf das Format des Dokuments und den verwendeten Jargon nützlich sein. Akronyme und Spaltenüberschriften müssen für den Benutzer aussagekräftig sein. Darüber hinaus müssen die Informationen selbst in geeigneter Form vorliegen. Zum Beispiel sollte der Benutzer nicht eine Zahl durch eine andere teilen müssen, um ein Verhältnis zu erhalten. Stattdessen sollte ein Verhältnis berechnet und prominent angezeigt werden. Das andere Extrem ist die Darstellung zu vieler irrelevanter Daten. Informationsüberflutung verringert sicherlich den Wert eines Informationssystems.
Place Utility beantwortet die Frage, wo die Informationen verteilt werden. Informationen müssen an den Ort geliefert werden, an dem die Entscheidung getroffen wird. Detailliertere Berichte oder frühere Managementberichte sollten abgelegt oder gespeichert werden, um den zukünftigen Zugriff zu erleichtern.
Time utility
beantwortet die Frage, wann Informationen geliefert werden. Informationen müssen eintreffen, bevor eine Entscheidung getroffen wird. Späte Informationen haben keinen Nutzen. Das andere Extrem ist die Übermittlung von Informationen zu weit vor der Entscheidung. Berichte können ungenau werden oder vergessen werden, wenn sie vorzeitig zugestellt werden.
Aktualisierungsdienstprogramm beinhaltet, wie die Informationen vom Entscheidungsträger eingeführt und verwendet werden. Erstens hat das Informationssystem einen Wert, wenn es die Fähigkeit besitzt, implementiert zu werden. Zweitens bedeutet Aktualisierungsnutzen, dass ein Informationssystem einen Wert hat, wenn es nach dem Ausscheiden seiner Designer gewartet wird oder wenn eine einmalige Verwendung des Informationssystems zufriedenstellende und dauerhafte Ergebnisse erzielt.
Goal Utility beantwortet das „Warum“ von Informationssystemen, indem es fragt, ob die Ausgabe einen Wert hat, der der Organisation hilft, ihre Ziele zu erreichen. Das Ziel des Informationssystems muss nicht nur den Zielen der Entscheidungsträger entsprechen, sondern auch deren Prioritäten widerspiegeln.
