1.

INTRODUCTION
For over a decade, IT expenditure in China and Malaysia, has shown a significant
increase as organisations in these countries are increasingly dependent on
information systems (IS) for achieving strategic advantages and business
benefits. According to the China Centre for Information Industry Development
(2007), in 2006, China's management software market was worth 7,136 million
Yuan (1 USD$ ~= 7.1Yuan), up 19.5% from 2005 (CCID, 2007). In Malaysia,
Business Monitor International (BMI, 2007) has projected that the IT market will
increase from US$2.9bn in 2005 to around US$4.8bn in 2010. The Malaysian
government in particular has spent around US$413.3 million in 2007, which is
11.9% of the countrys IT spending (IDC, 2004). This large spending was to
replace traditional information systems in government agencies with more
sophisticated information systems (Hussein, Karim, Mohamed, & Ahlan, 2007;
Hussein, Selamat, & Karim, 2005).
However, there have been numerous reports on dissatisfaction with IS, such as IS
implementation projects not being completed on time or within budget, and
many fail to meet requirements and realise promised benefits (He, 2004; M. G.
Martinsons, 2004; Yajiong Xue, Huigang Liang, Wiliam R Boulton, & Snyder, 2005;
Zhang, Lee, Zhang, & Banerjee, 2002). Furthermore, in some cases the
effectiveness of the information systems has yet to be reviewed (Hussein et al.,
2007). Thus, it is important that organisations in China and Malaysia monitor the
success (or not) of their growing investment in IS.
Recently, Gable, Sedera and Chan (2008) have introduced a comprehensive and
validated measurement model, called IS-Impact model. The model can be used
to measure the impact of contemporary IS such as enterprise systems. This
model was developed and validated in Queenslands public and semi-public
organisations. Therefore, in an effort to extend the use of this model to other
countries, two researches are currently being conducted to revalidate the ISImpact model in China and Malaysia.
There are three key objectives of the overall research. Firstly, these researches
will identify relevant new measures when extending the IS-Impact model in new
contexts (i.e. Chinese and Malaysian organisations). Secondly, by using new sets
of data, we will statistically revalidate the IS-Impact model, and at the same time
derive a measurement model with two measuring instruments in the national
language of the country (where our ultimate aim is to arrive at a standard model
that can be used across different context). Lastly, this research will quantitatively
evaluate the impact of the information systems under study using the
revalidated model. Figure 1 demonstrates the overall research design of the
research.
The purpose of this paper is to present preliminary findings from Phase 1:
Exploratory case study conducted independently by two researchers at two
organisations. These case studies attempt to test the feasibility of the research
design and to provide preliminary observations on the applicability of the ISImpact model in Chinese and Malaysian organisations. At the same time, we pilot

tested the survey instrument that will be used in subsequent identification

survey which mainly focus on identifying any relevance new measures for the
study context. The following section briefly discusses the theoretical background
of these studies. Then the research methods and the profile of the companies
involved in these studies are presented in the next section. This is followed by
the results from both case studies. The paper concluded with a discussion of the
findings and the conclusion of these exploratory case studies.
2. THEORETICAL BACKGROUND
The research starts by identifying a theoretical framework to serve as a basis for
identifying relevant IS evaluating measures for Chinese and Malaysian
organisations. In the literature, it is notice that a myriad of measures and
dimensions for IS Success/Impact exist. However, structured and robust models,
that capture the whole IS Success/Impact scenario are scarce (DeLone & McLean,
1992; Petter, DeLone, & McLean, 2008). Gable, Sedera and Chan (2008), in
reference to Gregors (2006) analytic theory, suggest a reference model or a
theoretical framework should have the characteristics of a strong analytic theory,
that meets the criteria in terms of utility, intuitiveness, mutual exclusivity,
completeness, and where relevant, appropriate hierarchy. Gable et al. (2008)
also suggested that, beyond those quality of analytic theory, a framework of IS
Success/Impact should maximally reflect the full range of IS impact and
accommodate the views of the multiple internal stakeholder group.
We have identified several salient models, surpassing other models in light of the
relevance of measures and completeness, as well as appropriate model
structure. These models include DeLone and McLean IS Success Model, Shang
and Seddon (2000) ES Benefit framework, Kaplan and Norton (1992; 1996)
Balanced Scorecard and Gable, Sedera and Chans IS-Impact Model (2008).
The IS Success Model is the most cited and referred to by researchers involved in
evaluating or measuring the success of IS (Myers, Kappelman, & Prybutok, 1997;
Sedera & Gable, 2004). This model consists of six dimensions of success that are
proposed to be interrelated and interdependent. These dimensions are System
Quality, Information Quality, Use, User Satisfaction, Individual Impact and
Organizational Impact. This model has contributed to the success of IS research
by summarizing commonalities observed across prior measures of IS success
studies (Gable et al., 2008). Before DeLone and Mcleans work, IS success has
been measured idiosyncratically, and their work provides a basis for better
understanding the research domain. However, the IS Success model received
criticism from several researchers, for example for confusing the combination of
the process model and the causal in the model and inappropriately
conceptualizing dimension of Use(Peter B. Seddon, 1997; Peter B Seddon &
Kiew, 1996).
In 2000, Shang and Seddon introduced an ES Benefit framework which provides
a detail list of benefits that may achieved from an Enterprise System. The
framework consolidated benefits into five dimensions: operational, managerial,
strategic, IT infrastructure and organizational. Though this is an ES-specific

success model and accommodated multidimensionality and relevant ES success

measures, it focuses on the organisations perspective rather than the system
itself. In addition, some of the measures are perceived as overlapping across
dimensions (Gable et al., 2008). Last but not least, the framework is far from a
model and the suggested measures have never been operationalized into an
instrument.
The Balanced Scorecard (BSC) is another relevant framework for assessing the
performance of IS, yet it is not directly related to IS Success/Impact field.
Realizing the insufficiency of traditional financial accounting measures, the
researcher proposed a comprehensive approach to gauging business
performance, namely four interrelated dimensions including customer
satisfaction, the internal business process and innovation and learning. As many
IS researches recognize the inappropriateness and infeasibility of only using a
financial index in measuring IS Success/Impact (DeLone & McLean, 1992; G. G.
Gable, Sedera, & Chan, 2003; Murphy & Simon, 2002), the BSC provides useful
implications to the IS evaluation field. Several attempts were made to extend
BSC into the IS evaluation area, for example, Martinsons, David & Tse (1999)
introduce a BSC-for-IS framework, consolidating four perspectives coming from
traditional BSC, to assess the performance of the IS department, the IS project
and IS applications.
From a review of the literature, the latest IS success model identified is the ISImpact model, which is also the most comprehensive and validated
measurement model for IS evaluation. The IS-Impact measurement model (Gable
et al., 2008, 2003), comprises 27 measures along four distinct and individually
important dimensions System Quality (SQ), Information Quality (IQ),
Individual Impact (II) and Organization Impact (OI). The model developer
commented that The IS-Impact Model is a holistic index representing the stream
of net benefits; the impact half measuring net benefits to date, while the
quality half, forms our best proxy measure of probable future impacts, with
impacts being the common denominator (Gable et al., 2008:381).
We have adopted the IS-Impact model as the theoretical foundation in our
research. The IS-Impact model, by design, is intended to be robust and simple
yet generalisable, yielding results that are highly comparable across time,
stakeholders, different type of systems and system contexts. The model and
approach employs perceptual measures, aiming to offer a common instrument
answerable by all relevant stakeholder groups, thereby enabling the combining
or comparison of stakeholder perspectives. Note that the current research, in
attention to revalidate the model in new contexts, will employ 37 IS impact
measures based on the a-priori model developed by Gable et al. (2008).
3. METHODOLOGY
Both studies used an exploratory case study method to investigate the
applicability of the IS-Impact model in new contexts. The case study method is
normally used to study contemporary phenomena within a real world context.

According to Yin (2003), a case study is an appropriate research method to apply

in exploratory research. As these studies explore any relevant new measures for
evaluating IS success in China and Malaysia, we regard the exploratory case
study is most suitable for this project
Two case studies are reported in this paper. These studies were conducted at a
private Chinese company and at a Malaysian government agency. Both studies
used a survey to explore whether there are relevant new measures or
dimensions for the IS-Impact model when extending it into new contexts.
Considering the difference between the two research contexts and to better
reach out to the respective respondents, the research team have devised a
different approach for data gathering and instrument design for each case study.
The respondents of these studies are users who have direct involvement with the
systems and/or are receiving the output from the systems. 3.1. The standard
survey instrument
One of the contributions of this research is to produce an instrument using the
national language of the context. However, there is an issue in verifying the
research design and method when collecting data, therefore at first we
constructed a Standard English version instrument, and then this standard
instrument is translated into respective national language. The standard
instrument was designed based on the Sedera (2006) identification survey
instrument. The original instrument was devised in an Australian research
context, to canvass a broad list of potential IS-Impact measures. The instrument
includes two sections, querying (1) respondent demographics (e.g., name,
position, years with organisation and a brief description of their involvement with
the Enterprise; (2) an open-ended question to query respondents observations
on the impact of IS. The intention to use one general open-ended research
question is not to lead and limit respondents thinking, but rather to let them
reflect on the question intensively and brainstorm the answer. Previous research
results suggest that this questionnaire design was adequate to elicit citations
that relate to both impact and quality of the IS.
Although both Mandarin and Malay instruments are translated from standard
English survey instrument, each version is modified to accommodate local
respondents and the specific study context. In addition, the research team
ensure the equivalency of the instrument based on key-words and the main
questions in both versions of the instruments. The equivalency of both
instruments is the basis of the research comparison.
3.2 The Chinese Company Profile
The Chinese case study was conducted in PETRO, a Chinese joint-venture firm in
the petrochemical industry. PETRO was founded by the largest Chinese
petrochemical producer and is a world-class petrochemical giant company with
an investment of about $ 2.7 billion in a 50%, 50% proportion. It is by far one of
the largest joint-venture petrochemical projects in China. PETRO have used SAP
since their establishment in 2003, and now have 10 modules fully installed,
including FI, CO, PM, MM, HR, PP, SD, PS, QM and WMS.

3.2.1 The survey instrument modification

As mentioned earlier, though these two case studies attempt to answer the same
research question and seek further validation of IS-Impact model, given the
difference in cultural background and practical research settings, the two
researchers have adopted a different case study design to accommodate specific
issues in each context. The Chinese case study consists of a pilot test using a
survey instrument (designed for the following identification survey) and a series
of face-to-face interviews. The purpose of the Chinese case study are threefold:
(1) to test whether the original instrument design, where a questionnaire only
containing one open-ended IS impact question, make sense to Chinese
respondents, (2) to check translation equivalence, as the research will be
conducted in Mandarin, (3) to identify any new issues and potential missing
measures informing the Mandarin version of the IS- Impact model development.
Instrument design workshops with leading academics and research team
members helped to devise an English version instrument for the Chinese
context. Based on the standard survey instrument (discussed in section 3.1), the
workshop rephrased the single open-ended question, revisited demographic
questions and checked the equivalence of key-words and concepts in the
instrument, such as SAP, impact etc. Then the researcher adopted a directtranslation method to translate the English version instrument into Mandarin.
Two certified translators were invited to check for translation equivalency. Some
minor revisions were made in relation to grammar, inappropriate wording, but
there were no changes to key concepts and the single open-ended question. A
group of Chinese students were then asked to check for the face validity on the
Mandarin instrument.
The pilot test indicated good translation equivalence between the English and
Mandarin versions instruments, as there was no misunderstanding related to
language issues. All respondents clearly understood the research question and
gave appropriate answers. However, based on the pilot test, it was found that
the original open-ended impact question did not seem to elicit responses
pertaining to each quadrant of the model. The reason for this problem is
probably due to the psychological profile of Chinese respondents when faced
with an instrument containing only open-ended questions. The Chinese seem to
prefer specific questions to general questions. Additionally, they need trigger
sentences to encourage their reflection and help them to deliver quality
responses. The researcher then decomposed the single open-ended impact
question into a set of detailed questions and put them into structured guidelines
for the subsequent interview. The detailed research design for the Chinese case
is given in Table 1.
29 PETRO SAP users were randomly selected for the Chinese case study. When
selecting respondents, the researcher intended to cover each level of
stakeholders in PETROs organisational hierarchy for canvassing multiple
perspectives of the impact of IS in China enterprise. Finally, 23 valid responses
have been gathered.

3.3 The Malaysian organisation profile

In Malaysia, 11 state governments are currently using a standard financial
system named The State Government's Standard Computerised Accounting
System (SPEKS). It was developed by KJSB, a local software developer with 18
years experience in the ICT industry. The systems copyright is owned by The
Accountant General (AG) of Malaysia, a department under Ministry of Finance.
SPEKS contains 11 integrated modules and was first implemented at two of the
eleven state governments in 2001. By 2005, SPEKS had been successfully
installed in all 11 state governments.
Data was collected from one state government in Malaysia that has been using
SPEKS since 2003. The system is used across 18 departments with over 800
users. In this preliminary study, 17 SPEKS users were randomly selected from
one department. Before distributing the survey question, the researcher gave a
brief description of the study, the purpose of the questionnaire, the objective of
the pilot test and how to complete the questionnaire.
The aim of the pilot test was to determine the feasibility of all the questions in
the survey instrument. What concerns the researcher is whether the question
that seeks to identify potential measures in Malaysian organisation can elicit
measures for both the impact and quality halves of the IS-Impact

model. Furthermore, through the pilot test, the researcher will be able to identify
IS stakeholders in the Malaysian organisation.
3.3.1 The survey instrument modification
Similar to the Chinese case study, the standard survey instrument discussed in
section 3.1 was then modified and translated into Bahasa Malaysia (Malaysia
national language) using the back translation technique. According to McGorry
(2000), at least two bilingual individuals will separately involve in the translation
process. Therefore, the researcher has asked two colleagues who are conversant
in English and Bahasa Malaysia to help in the translation process. In general, the
technique requires four steps (Behling & Law, 2000; McGorry, 2000). Firstly, the
first translator translated the standard survey instrument (see section 3.1) to
Bahasa Malaysia. Then, the second translator translated the Bahasa Malaysia
instrument done by the first translator, back to English. This English version is
called the back translated version. Next, the researcher compared the back
translated version with the standard survey instrument for any inconsistencies,
mistranslation or lost words or phrases. Lastly, the researcher discussed with
both translators to come to a conclusion of the inconsistencies and modify the
instrument if necessary.
A similar single question (that was used in the Chinese context) was employed in
the instrument to capture the impact of SPEKS. However, prior to the translation
process, a modification was made to the question by including some synonyms
for the word impact in order to give a broader definition of the word impact and

to help the respondents to think more broadly. These synonyms are effect,
influence, outcome, result and consequence. The respondents were given 15
minutes to complete the questionnaire. Table 1 gives a summary of the research
context for both cases.
4. RESULTS
Table 2 summarises the demography of the respondents from both case studies.
Based on Anthonys (1965) framework and Gable et al.s (2008) classification of
IS key-user group, we have classified the respondents into four employment
cohorts (Strategic, management, technical and operational) according to the
respondents job title as well as their job role and involvement with the
information systems under study.
These case studies generate textual responses from the respondents reflecting
their observation of the impact of IS on their organisation and their individual
work. We have isolated these textual data into short sentences that we refer to
as impact citation. These impact citations were then group or mapped into
relevant IS-Impact measure. Each citation must explicitly carry a single piece of
information about the impact of IS. The citation isolation and mapping process
was done using NVivo, a qualitative data analysis tool. Table 3 summarises the
counts and distributions of citations according to the dimension of the IS-Impact
model. Table 4 presents the counts and distributions of citations according to the
measure of the IS-Impact model. 141 citations were isolated from respondents
responses, namely each respondent provides an average of six (6) citations in
the Chinese case study. From the Malaysian case study, 74 citations were
collected from the survey, which is an average of four (4) citations per
respondent.
In the Chinese case study, a large portion of citations pertain to Organizational
Impact (OI), that is 38 (27%) of the 141 citations are mapped into existing ISImpact measures straight away. However, there are 18 (13%) citations are also
recognized as OI could not readily mapped into the IS-Impact measures. The
researchers put these unmapped measures into the Unknown (U) category
temporarily. Another large portion of citations, 53 (38%) were mapped into the
System Quality (SQ) dimension. Very few comments about the Individual
Impact (11, 8%) and the Information Quality (15, 11%) were made by
respondents. However, the Chinese respondents also raised new issues about
the impact of IS beyond the existing IS-Impact measures, which takes up 16%
(23) of the total citations. These new issues were group under the Unknown (U)
category.
Meanwhile, Malaysian respondents have cited System Quality frequently, and
30 (41%) citations are mapped into the dimension. This is followed by 25 (31%)
citations mentioning Organizational Impact. Only four (4) citations can be
related to the Information Quality dimension. Additionally, there is one (1)
citation that could not be mapped into any of the dimensions of the IS-Impact
model.

Next, we focused on the distributions of citations in relation to measures of the

IS-Impact model. In the Chinese case study, in the Individual Impact dimension,
respondents emphasised Individual productivity (45% of total Individual Impact
citations), and followed by Learning (27%). For the Organizational Impact
dimension, more than half of citations (62%) are related to Business process
change, and 23% related to Overall productivity. It is also noted that very few
respondents regards Cost reduction as a crucial benefit of IS in this sample of
Chinese respondents. For the System Quality dimension, Chinese respondents
commented that System features (25%) and Ease of use (19%) are critical
characteristics of a good system. Meanwhile, for Information Quality dimension,
Chinese respondent cited Content accuracy (53%) and Timeliness (20%) of
reports frequently.
In the Malaysian case study, 40% of the citations group under System Quality
are related to System features (40%). Besides the quality of the system feature,
the respondents also emphasised the quality of Accessing (20%) the IS and the
Reliability (13%) of the system. Respondents were then interested in the
Organizational Impact, 31% of the citations mapped into this dimension. In
contrast to the Chinese case study, Malaysian respondents show there is a
significant impact of the system on Cost reduction (24%) and Overall productivity
(24%). For the Individual Impact dimension, the respondents strongly comment
on job effectiveness and this relates to Individual productivity (100%). Moreover,
they mostly cited the Format (50%) of the report in the Information Quality.
Table 5 demonstrates the instantiation of dimensions of the original IS-Impact
model in relation to four employment cohorts in Chinese and Malaysian studies.
In the Chinese case study, the data shows System Quality and Organizational
Impact are closely related to four employment cohorts. The Strategic (S) level
respondent also raised lots of issues beyond existing IS-Impact framework. The
table also show that more than half of the citations (78) come from Chinese
Management (M) level respondents and their concerns about the impact of IS are
distributed more evenly compared with other employment cohorts. In both
Chinese and Malaysian studies, the respondents from the Operational (O) level
were inclined to give impacts that relate to the System Quality. While the
Technical (T) level respondents in the Chinese study expressed concern about
System Quality more than other impact dimension. The only Technical (T)
respondent in the Malaysian case study placed more emphasis on
Organizational Impact than any other impact dimension. In addition, no cohorts
group show substantial attentions to Information Quality and Individual
Impact.
5. DISCUSSION
In this section, we will discuss the preliminary findings from the two case studies.
A number of observations were made based on the findings. We have found that
the results from both case studies provide some implication to the research
methodology. Furthermore, the textual data may suggest some new measures
for the IS-Impact model. We have also discovered an issues about the IS key-user

group and lastly, the type of organisation and application that were used in these
case studies may lead some differences between these two contexts. These
implications will be discussed in detail in the following sub sections. 5.1
Implication for research methodology
The researchers have received important feedback on the survey instruments
that will be used in subsequent research phase. Overall, the Malaysian
respondents agreed on the credibility of the survey instrument, however, the
Chinese respondents require more focus information and questions to help them
in completing the survey.
Based on the Chinese case study, it was observed that a set of more detailed
questions (from interview) can generate more SQ citations (36) than a single
general open-ended question (the pilot test (17)). In the interview, most of the
citations related to SQ came from Research Question No.2 and No. 4: What is
the quality of the SAP system today? and What issues and problems do you
have with the system? The findings indicated that: (1) the single general IS
impact identification question is valid to explore Organizational Impact in the
Chinese research context, (2) the single general IS impact identification question
is probably sufficient to explore System Quality in the Chinese research context,
and (3) the single general IS-Impact identification question may not be adequate
to explore Individual Impact and Information Quality of the IS in the research
context. Other questions are needed to investigate these two dimensions when
conducting an Identification Survey at subsequent stages of the research. In this
case, open-ended research question accompanied by some trigger questions are
recommended for identification surveys in the Chinese context.
Meanwhile, feedback given by respondents in the Malaysian case study indicates
that the survey instrument is clear and understandable. Additional words
describing the word impact have given them a better understanding of the
purpose of the single question and also help respondents to elaborate more
about the impact of the system that they have received so far. However, because
the respondents are from Operational and Technical employment cohorts, we
have observed that the respondents placed an emphasis on certain dimensions,
therefore for the following Identification Survey, it is important to cover the
entire employment cohort, in order to obtain more representative measures. 5.2
Implication for model extension
Preliminary findings related to the IS-Impact model validation and extension are
worth investigating in the next research phase. From the Chinese case study we
have found more than 60% of citations within OI mapped into Business Process
Change (BPC). According to the key-words given by Chinese respondents, the
researcher classifies BPC citations into four categories: (1) Business process
standardization (10 citations), (2) Integrated process across departments and
functionality (7 citations), (3) high level automation (3 citations), and (4)
effective risk management (4 citations). BPC can thus be probably expanded into
four sub measures, however this requires further evidence from the following

Identification Survey and empirical validation of these possible sub measures in

the Confirmatory survey.
A great many citations containing unique information are also given by Chinese
respondents. Some people pointed out that the Enterprise System has enhanced
their system usage; however, Usage is a dimension being removed from ISImpact model in the previous research owing to its insufficient instantiation and
low level of measuring power (Gable et al., 2008). Two other issues, Better
Resource Management and Overall Management Improvement, while not
appearing in the existing IS-Impact model, are cited by Chinese respondents
frequently in the study as well. There is also one citation from the Malaysian case
study that could not be mapped into the IS-Impact model. This single

citation came from a Technical employee who mentioned the security of the
system. This might suggest a new measure for SQ.
Although the sample of respondents was limited and the study is at the
exploratory stages, the preliminary findings are valuable for the research, as
they provide the possible missing aspects of IS- Impact for Chinese and
Malaysian organisations. They partly support the existing IS-Impact models
credibility. Those model adjustments will be further tested and justified in the
Identification survey and Confirmatory survey.
5.3 IS key-user group
These case studies have indicated some patterns between the IS-Impact
dimensions with key user groups. In the Chinese case study, regardless of which
employment cohorts the respondent is located in, they all place emphasis on
Organizational Impact and System Quality, while prior study suggested, based
on the weighting, that Strategic users gave high correlation to the
Organizational Impact dimension. Meanwhile, prior study also suggested that
Technical and Operational users highly correlated to System Quality(Gable et al.
2003; Gable et al. 2008). In addition, Chinese management level respondents
tends to be better informed about the impact of IS than other stakeholder
groups. A previous study suggested that if an IS evaluation is limited in terms of
time and resource and is not able to canvass multiple stakeholder groups, the
user group (management level and operational level) (Sedera, 2006) or middle
level management group (Shari Shang & Seddon, 2002) is the ideal respondents
group to be investigated. The Chinese case study provides evidence for those
arguments.
5.4 Application and organisation type
We observed that applications and organisational type chosen in each case study
could result in different findings. As the Chinese case study looked at multiple
SAP modules rather than only financials, a great deal of operational impacts,
such as better resource management, improved productivity on manufacturing
and inventory management, have been highly commented by the respondents.

Meanwhile, as the Chinese case study is carried out in a profit-driven

organisation rather than public organisation, a number of managerial impacts,
such as business process standardisation/integration, and improved overall
enterprise management have been identified. In relation to the Malaysian case
study, all citations (except one) have mapped into the dimensions and measures
of IS-Impact model. This suggests with the same type of IS system (as the prior
work) all measures and dimensions may be relevant to the Malaysian context.
Comparing the Chinese case study with the previous Australian as well as
Malaysian case study, the Chinese respondents demonstrated substantial
concerns with enterprise management and business process change due to the
IS. The expectation for Enterprise systems from Chinese enterprise could be one
of reasons for this issue. The Chinese enterprise is eager to learn the advantages
of enterprise management theory and learn to survive in an increasingly fierce
competitive business environment. Enterprise Systems, especially ERP, that was
claimed as the best business practices, and are regarded as a drive for more
advanced business process and can remove deficiency exist in the traditional
Chinese business practice. Therefore, realizing improvements in terms of
business process and enterprise management have become critical impacts from
IS.
6. CONCLUSIONS
The overall research seeks to validate one of the most rigorous and
comprehensive IS Success measurement model IS-Impact model in the Chinese
and Malaysian research context. We have adopted a context extension strategy
(Berthon, Pitt, Michael, & Carr, 2002) by altering the research setting while the
research methodology and theory remain generally the same. However, as the
study context changed, part of the research design may require adjustment, as
some issues associated with specific context emerged during the course of study.
This paper has discussed a preliminary observations of measures of the impact
of IS in Chinese and Malaysian organisations. All findings from these case studies
are regarded as a starting point in validating and extending the IS-Impact model
in new contexts. Although we are at an early stage of the re-exploratory model,
these preliminary findings are valuable for the research, as they provide some
insights for organisations as well as some implications for the model in new
contexts.
In conclusion, the outcomes of the pilot tests have helped us in constructing a
better survey instrument for the following phase in the research. In addition, we
have found that it is important to canvass the right stakeholder in order to get
representative citations to measure IS success in the research context.

Translate
1. PERKENALAN
Selama lebih dari satu dekade, pengeluaran IT di Cina dan Malaysia, telah

menunjukkan peningkatan yang signifikan sebagai organisasi di negara-negara

semakin tergantung pada sistem informasi (IS) untuk mencapai keuntungan
strategis dan keuntungan bisnis. Menurut China Pusat Informasi Pengembangan
Industri (2007), pada tahun 2006, pasar perangkat lunak manajemen Cina
bernilai 7.136 juta Yuan (1 USD $ ~ = 7.1Yuan), naik 19,5% dari tahun 2005
(CCID, 2007). Di Malaysia, Business Monitor International (BMI, 2007) telah
memproyeksikan bahwa pasar TI akan meningkat dari US $ 2.9bn pada tahun
2005 menjadi sekitar US $ 4,8 milyar pada tahun 2010. Pemerintah Malaysia
khususnya telah menghabiskan sekitar US $ 413.300.000 pada tahun 2007, yang
merupakan 11,9 % dari belanja TI negara (IDC, 2004). belanja besar ini adalah
untuk menggantikan sistem informasi tradisional di instansi pemerintah dengan
sistem informasi yang lebih canggih (Hussein, Karim, Mohamed, & Ahlan, 2007;
Hussein, Selamat, & Karim, 2005).
Namun, ada banyak laporan tentang ketidakpuasan dengan IS, seperti IS
pelaksanaan proyek tidak selesai tepat waktu atau dalam anggaran, dan banyak
orang gagal untuk memenuhi persyaratan dan menyadari manfaat yang
dijanjikan (Dia, 2004; MG Martinsons, 2004; Yajiong Xue, Huigang Liang, Wiliam R
Boulton, & Snyder, 2005; Zhang, Lee, Zhang, & Banerjee, 2002). Lebih lanjut,
dalam beberapa kasus efektivitas sistem informasi belum ditinjau (Hussein et al.,
2007). Dengan demikian, adalah penting bahwa organisasi di Cina dan Malaysia
memantau keberhasilan (atau tidak) dari investasi mereka tumbuh di ADALAH.
Baru-baru ini, Gable, Sedera dan Chan (2008) telah memperkenalkan model
pengukuran yang komprehensif dan divalidasi, disebut IS-Impact Model. Model
ini dapat digunakan untuk mengukur dampak dari kontemporer IS seperti sistem
perusahaan. Model ini dikembangkan dan divalidasi di Queensland organisasi
publik dan semi-publik. Oleh karena itu, dalam upaya untuk memperluas
penggunaan model ini ke negara-negara lain, dua penelitian saat ini sedang
dilakukan untuk memvalidasi ulang model IS-Dampak di Cina dan Malaysia.
Ada tiga tujuan utama dari penelitian secara keseluruhan. Pertama, penelitian ini
akan mengidentifikasi langkah-langkah baru yang relevan ketika memperluas
model IS-Impact dalam konteks baru (mis Cina dan Malaysia organisasi). Kedua,
dengan menggunakan set data baru, kami akan statistik validasi ulang model ISDampak, dan pada saat yang sama memperoleh sebuah model pengukuran
dengan dua alat ukur dalam bahasa nasional negara (di mana tujuan akhir kami
adalah untuk tiba di standar model yang dapat digunakan di konteks yang
berbeda). Terakhir, penelitian ini secara kuantitatif akan mengevaluasi dampak
dari sistem informasi yang diteliti menggunakan model divalidasi ulang. Gambar
1 menunjukkan desain penelitian keseluruhan penelitian.
Tujuan dari makalah ini adalah untuk menyajikan temuan-temuan awal dari Fase
1: studi kasus eksplorasi yang dilakukan secara independen oleh dua peneliti di
dua organisasi. Studi kasus ini berusaha untuk menguji kelayakan desain
penelitian dan memberikan observasi awal pada penerapan model IS-Impact
dalam organisasi Cina dan Malaysia. Pada saat yang sama, kita diuji coba
instrumen survei yang akan digunakan dalam survei identifikasi selanjutnya yang
terutama berfokus pada identifikasi relevansi langkah-langkah baru untuk
konteks studi. Bagian berikut membahas tentang latar belakang teoritis dari
studi ini. Maka metode penelitian dan profil perusahaan yang terlibat dalam studi

ini disajikan dalam bagian berikutnya. Ini diikuti oleh hasil dari kedua studi kasus.
kertas menyimpulkan dengan diskusi tentang temuan dan kesimpulan dari studi
kasus eksplorasi tersebut.
2. LATAR BELAKANG TEORI
Penelitian ini dimulai dengan mengidentifikasi kerangka teoritis untuk melayani
sebagai dasar untuk mengidentifikasi relevan IS mengevaluasi langkah-langkah
untuk organisasi Cina dan Malaysia. Dalam literatur, itu adalah pemberitahuan
bahwa segudang tindakan dan dimensi untuk IS Sukses / Impact ada. Namun,
model terstruktur dan kuat, yang menangkap keseluruhan IS skenario Sukses /
Dampak yang langka (DeLone & McLean, 1992; Petter, DeLone, & McLean,
2008). Gable, Sedera dan Chan (2008), mengacu pada (2006) analisis teori
Gregor ini, menyarankan model referensi atau kerangka teori harus memiliki
karakteristik dari analisis teori yang kuat, yang memenuhi kriteria dalam hal
utilitas, intuitif, saling eksklusivitas , kelengkapan, dan mana yang relevan,
hierarki yang sesuai. Gable et al. (2008) juga menyarankan bahwa, di luar yang
kualitas analisis teori, kerangka IS Sukses / Impact harus maksimal
mencerminkan berbagai dampak IS dan mengakomodasi pandangan dari
kelompok pemangku kepentingan internal yang beberapa.
Kami telah mengidentifikasi beberapa model yang menonjol, melebihi model lain
dalam terang relevansi tindakan dan kelengkapan, serta struktur model yang
sesuai. Model ini mencakup DeLone dan McLean IS Success Model, Shang dan
Seddon (2000) kerangka ES Manfaat, Kaplan dan Norton (1992; 1996) Balanced
Scorecard dan Gable, Sedera dan Chan IS-Impact Model (2008).
IS Success Model adalah yang paling dikutip dan disebut oleh para peneliti yang
terlibat dalam mengevaluasi atau mengukur keberhasilan IS (Myers, Kappelman,
& Prybutok, 1997; Sedera & Gable, 2004). Model ini terdiri dari enam dimensi
keberhasilan yang diusulkan untuk saling dan saling tergantung. Dimensi ini
adalah 'Kualitas Sistem', 'Kualitas Informasi', 'Gunakan', 'Kepuasan Pengguna',
'Dampak Individu' dan 'Dampak Organisasi'. Model ini telah memberikan
kontribusi bagi keberhasilan penelitian IS dengan meringkas kesamaan diamati
di seluruh langkah-langkah sebelumnya IS studi keberhasilan (Gable et al.,
2008). Sebelum DeLone dan Mclean karya, IS sukses telah diukur
idiosyncratically, dan pekerjaan mereka memberikan dasar untuk lebih
memahami domain penelitian. Namun, model IS Sukses mendapat kritik dari
beberapa peneliti, misalnya untuk membingungkan kombinasi dari model proses
dan kausal dalam model dan tidak tepat konseptualisasi dimensi 'Gunakan'
(Peter B. Seddon, 1997; Peter B Seddon & Kiew, 1996).
Pada tahun 2000, Shang dan Seddon memperkenalkan kerangka ES Benefit yang
menyediakan daftar detail dari manfaat yang dapat dicapai dari Sistem
Enterprise. kerangka konsolidasi manfaat menjadi lima dimensi: operasional,
manajerial, strategis, infrastruktur IT dan organisasi. Meskipun ini adalah ESmodel spesifik keberhasilan dan ditampung multidimensi dan langkah-langkah
sukses ES yang relevan, berfokus pada perspektif organisasi daripada sistem itu
sendiri. Selain itu, beberapa langkah-langkah yang dianggap sebagai tumpang
tindih di seluruh dimensi (Gable et al., 2008). Last but not least, kerangka jauh
dari model dan langkah-langkah yang disarankan tidak pernah dioperasionalkan
menjadi instrumen.

Balanced Scorecard (BSC) merupakan kerangka lain yang relevan untuk menilai
kinerja IS, namun tidak secara langsung terkait dengan bidang IS Sukses /
Impact. Menyadari kekurangan dari langkah-langkah akuntansi keuangan
tradisional, peneliti mengusulkan pendekatan yang komprehensif untuk
mengukur kinerja bisnis, yaitu empat dimensi yang saling terkait termasuk
kepuasan pelanggan, proses bisnis internal dan inovasi dan pembelajaran.
Sebanyak IS penelitian mengakui ketidaktepatan dan infeasibility hanya
menggunakan indeks keuangan di ukur IS Sukses / Impact (DeLone & McLean,
1992; GG Gable, Sedera, & Chan, 2003; Murphy & Simon, 2002), BSC
memberikan implikasi yang berguna untuk bidang evaluasi IS. Beberapa upaya
dilakukan untuk memperpanjang BSC ke daerah evaluasi IS, misalnya,
Martinsons, David & Tse (1999) memperkenalkan BSC-untuk-IS kerangka,
mengkonsolidasikan empat perspektif yang berasal dari BSC tradisional, untuk
menilai kinerja departemen IS, proyek dan IS IS aplikasi.
Dari tinjauan literatur, terbaru model IS sukses diidentifikasi adalah model ISImpact, yang juga merupakan model pengukuran yang paling komprehensif dan
divalidasi untuk IS evaluasi. IS-Impact model pengukuran (. Gable et al, 2008,
2003), terdiri dari 27 langkah bersama empat dimensi yang berbeda dan secara
individual penting - 'Sistem Mutu' (SQ), 'Kualitas Informasi' (IQ),
'Dampak Individual' (II) dan 'Organisasi Dampak' (OI). Pengembang Model
berkomentar bahwa "The Model IS-Impact adalah indeks holistik yang mewakili
aliran keuntungan bersih; yang 'dampak' setengah mengukur keuntungan bersih
sampai saat ini, sementara 'kualitas' setengah, membentuk kita "terbaik" proxy
ukuran dampak kemungkinan masa depan, dengan 'dampak' menjadi common
denominator "(Gable et al, 2008:. 381).
Kami telah mengadopsi model IS-Dampak sebagai landasan teoritis dalam
penelitian kami. Model IS-Impact, dengan desain, dimaksudkan untuk menjadi
kuat dan sederhana namun digeneralisasikan, menghasilkan hasil yang sangat
sebanding di waktu, pemangku kepentingan, berbagai jenis sistem dan konteks
sistem. Model dan pendekatan mempekerjakan tindakan persepsi, yang
bertujuan untuk menawarkan instrumen umum jawab oleh semua kelompok
pemangku kepentingan yang relevan, sehingga memungkinkan menggabungkan
atau perbandingan perspektif stakeholder. Perhatikan bahwa penelitian saat ini,
perhatian memvalidasi ulang model dalam konteks yang baru, akan
mempekerjakan 37 IS tindakan dampak berdasarkan pada model-priori yang
dikembangkan oleh Gable et al. (2008).
3. METODOLOGI
Kedua studi menggunakan metode studi kasus eksplorasi untuk menyelidiki
penerapan model IS-Impact dalam konteks yang baru. Metode studi kasus
biasanya digunakan untuk mempelajari fenomena kontemporer dalam konteks
dunia nyata. Menurut Yin (2003), studi kasus adalah metode penelitian yang
sesuai untuk diterapkan dalam penelitian eksplorasi. Sebagai studi ini
menjelajahi setiap langkah baru yang relevan untuk mengevaluasi IS sukses di
Cina dan Malaysia, kami menganggap studi kasus eksplorasi yang paling cocok
untuk proyek ini
Dua studi kasus dilaporkan dalam makalah ini. Studi ini dilakukan di sebuah
perusahaan Cina swasta dan di lembaga pemerintah Malaysia. Kedua studi

digunakan survei untuk menyelidiki apakah ada langkah-langkah baru yang

relevan atau dimensi untuk model IS-Impact ketika memperluas ke dalam
konteks baru. Mengingat perbedaan antara dua konteks penelitian dan untuk
lebih menjangkau responden masing-masing, tim peneliti telah menemukan
pendekatan yang berbeda untuk pengumpulan data dan desain instrumen untuk
setiap studi kasus. Responden dari penelitian ini adalah pengguna yang memiliki
keterlibatan langsung dengan sistem dan / atau menerima output dari sistem.
3.1. Instrumen survei standar
Salah satu kontribusi dari penelitian ini adalah untuk menghasilkan instrumen
menggunakan bahasa nasional konteks. Namun, ada masalah dalam
memverifikasi desain penelitian dan metode yang digunakan saat pengumpulan
data, oleh karena itu pada awalnya kami membangun instrumen versi Standard
Inggris, dan kemudian instrumen standar ini diterjemahkan ke dalam bahasa
nasional masing-masing. Instrumen standar dirancang berdasarkan Sedera
instrumen survei (2006) identifikasi. Instrumen asli dirancang dalam konteks
penelitian Australia, untuk meneliti daftar luas potensi tindakan IS-Impact.
Instrumen mencakup dua bagian, query (1) demografi responden (misalnya,
nama, posisi, tahun dengan organisasi dan deskripsi singkat tentang keterlibatan
mereka dengan Enterprise; (2) sebuah pertanyaan terbuka untuk query
pengamatan responden tentang dampak IS. Tujuannya untuk menggunakan satu
pertanyaan penelitian terbuka umum tidak untuk memimpin dan pemikiran
batas responden, melainkan untuk membiarkan mereka merenungkan
pertanyaan intensif dan brainstorming jawabannya. Sebelumnya hasil penelitian
menunjukkan bahwa desain kuesioner ini memadai untuk memperoleh kutipan
yang berhubungan dengan kedua dampak dan kualitas IS.
Meskipun kedua Mandarin dan instrumen Melayu diterjemahkan dari instrumen
survei bahasa Inggris standar, setiap versi yang diubah untuk mengakomodasi
responden lokal dan konteks studi tertentu. Selain itu, tim peneliti menjamin
kesetaraan instrumen berdasarkan kunci-kata dan pertanyaan utama di kedua
versi instrumen. The kesetaraan kedua instrumen adalah dasar dari
perbandingan penelitian.
3.2 Profil Chinese Perusahaan
Studi kasus Cina dilakukan di PETRO, sebuah perusahaan joint-venture Cina di
industri petrokimia. PETRO didirikan oleh produsen petrokimia terbesar Cina dan
merupakan perusahaan petrokimia raksasa kelas dunia dengan investasi sekitar
$ 2.7 miliar 50%, proporsi 50%. Ini adalah jauh salah satu proyek petrokimia
patungan terbesar di Cina. PETRO telah menggunakan SAP sejak pendirian
mereka pada tahun 2003, dan sekarang memiliki 10 modul terinstal lengkap,
termasuk FI, CO, PM, MM, HR, PP, SD, PS, QM dan WMS.
3.2.1 Instrumen survei modifikasi
Seperti disebutkan sebelumnya, meskipun dua kasus ini studi upaya untuk
menjawab pertanyaan penelitian yang sama dan mencari validasi lebih lanjut
dari model IS-Impact, mengingat perbedaan latar belakang budaya dan
pengaturan penelitian praktis, dua peneliti telah mengadopsi desain studi kasus
yang berbeda untuk mengakomodasi tertentu masalah di setiap konteks. Studi
kasus Cina terdiri dari uji coba menggunakan instrumen survei (yang dirancang
untuk survei identifikasi berikut) dan serangkaian tatap muka wawancara. Tujuan

dari studi kasus Cina adalah tiga: (1) untuk menguji apakah desain instrumen
asli, di mana kuesioner hanya berisi satu terbuka IS pertanyaan dampak, masuk
akal untuk responden Cina, (2) untuk memeriksa terjemahan kesetaraan,
sebagai penelitian akan dilakukan dalam bahasa Mandarin, (3) untuk
mengidentifikasi isu-isu baru dan langkah-langkah yang hilang potensial
menginformasikan versi Mandarin dari pengembangan model IS Dampak.
lokakarya desain instrumen dengan akademisi terkemuka dan anggota tim
peneliti membantu untuk merancang instrumen versi bahasa Inggris untuk
konteks Cina. Berdasarkan instrumen survei standar (dibahas pada bagian 3.1),
lokakarya diulang pertanyaan terbuka tunggal, ditinjau pertanyaan demografi
dan memeriksa kesetaraan kunci-kata dan konsep dalam instrumen, seperti
'SAP', 'dampak' dll . Kemudian peneliti mengadopsi metode langsung-terjemahan
untuk menerjemahkan bahasa Inggris versi instrumen dalam Mandarin. Dua
penerjemah bersertifikat diundang untuk memeriksa terjemahan kesetaraan.
Beberapa revisi minor dilakukan dalam kaitannya dengan tata bahasa, kata-kata
yang tidak pantas, tapi tidak ada perubahan konsep-konsep kunci dan
pertanyaan terbuka tunggal. Sekelompok mahasiswa Cina kemudian diminta
untuk memeriksa validitas wajah pada instrumen Mandarin.
Uji coba menunjukkan kesetaraan terjemahan yang baik antara Inggris dan
Mandarin versi instrumen, karena tidak ada kesalahpahaman terkait dengan
masalah bahasa. Semua responden jelas dipahami pertanyaan penelitian dan
memberikan jawaban yang tepat. Namun, berdasarkan uji coba, ditemukan
bahwa asli terbuka pertanyaan dampak tampaknya tidak memperoleh respon
yang berkaitan dengan masing-masing kuadran model. Alasan untuk masalah ini
adalah mungkin karena profil psikologis responden Cina ketika dihadapkan
dengan instrumen yang berisi pertanyaan hanya terbuka. Cina tampaknya lebih
memilih pertanyaan khusus untuk pertanyaan umum. Selain itu, mereka perlu
memicu kalimat untuk mendorong refleksi mereka dan membantu mereka untuk
memberikan tanggapan yang berkualitas. Peneliti kemudian terurai yang terbuka
pertanyaan dampak tunggal menjadi serangkaian pertanyaan rinci dan
menempatkan mereka ke dalam pedoman terstruktur untuk wawancara
berikutnya. Desain penelitian rinci untuk kasus Cina diberikan pada Tabel 1.
29 pengguna PETRO SAP secara acak dipilih untuk studi kasus Cina. Ketika
memilih responden, peneliti dimaksudkan untuk menutupi setiap tingkat
pemangku kepentingan dalam hirarki organisasi PETRO untuk menyisir berbagai
perspektif dari dampak IS di Cina perusahaan. Akhirnya, 23 respon yang valid
telah dikumpulkan.
3.3 Profil Organisasi Malaysia
Di Malaysia, 11 pemerintah negara sedang menggunakan sistem keuangan
standar bernama 'Pemerintah Negara Standard Komputer Sistem Akuntansi
(speks). Ini dikembangkan oleh KJSB, pengembang software lokal dengan 18
tahun pengalaman di industri ICT. hak cipta sistem dimiliki oleh Akuntan Umum
(AG) dari Malaysia, departemen di bawah Departemen Keuangan. Speks berisi 11
modul yang terintegrasi dan pertama kali dilaksanakan di dua dari sebelas
pemerintah negara bagian pada tahun 2001. Pada tahun 2005, speks telah
berhasil diinstal di semua 11 pemerintah negara bagian.
Data dikumpulkan dari satu pemerintah negara bagian di Malaysia yang telah

menggunakan speks sejak tahun 2003. Sistem ini digunakan di 18 departemen

dengan lebih dari 800 pengguna. Dalam studi awal ini, 17 speks pengguna dipilih
secara acak dari satu departemen. Sebelum mendistribusikan pertanyaan survei,
peneliti memberi penjelasan singkat penelitian, tujuan kuesioner, tujuan dari uji
coba dan bagaimana untuk menyelesaikan kuesioner.
Tujuan dari uji coba adalah untuk menentukan kelayakan semua pertanyaan
dalam instrumen survei. Apa yang menjadi perhatian peneliti adalah apakah
pertanyaan yang berusaha untuk mengidentifikasi langkah-langkah potensial
dalam organisasi Malaysia dapat menimbulkan tindakan untuk kedua 'dampak'
dan bagian 'kualitas' dari IS-Impact
model. Selanjutnya, melalui uji coba, peneliti akan dapat mengidentifikasi IS
pemangku kepentingan dalam organisasi Malaysia.
3.3.1 Instrumen survei modifikasi
Serupa dengan studi kasus Cina, instrumen survei standar dibahas dalam bagian
3.1 kemudian diubah dan diterjemahkan ke dalam Bahasa Malaysia (Malaysia
bahasa nasional) menggunakan teknik penerjemahan kembali. Menurut McGorry
(2000), setidaknya dua individu bilingual secara terpisah akan terlibat dalam
proses penerjemahan. Oleh karena itu, peneliti telah meminta dua rekannya
yang fasih dalam bahasa Inggris dan Bahasa Malaysia untuk membantu dalam
proses penerjemahan. Secara umum, teknik ini membutuhkan empat langkah
(Behling & Hukum, 2000; McGorry, 2000). Pertama, penerjemah pertama
diterjemahkan instrumen survei standar (lihat bagian 3.1) ke Bahasa Malaysia.
Kemudian, penerjemah kedua diterjemahkan instrumen Bahasa Malaysia
dilakukan oleh penerjemah pertama, kembali ke Inggris. Versi bahasa Inggris ini
disebut 'versi diterjemahkan kembali'. Selanjutnya, peneliti membandingkan
versi kembali diterjemahkan dengan instrumen survei standar untuk setiap
inkonsistensi, penerjemahan atau hilang kata-kata atau frase. Terakhir, peneliti
dibahas dengan kedua penerjemah untuk datang ke sebuah kesimpulan dari
inkonsistensi dan memodifikasi instrumen jika perlu.
Sebuah pertanyaan tunggal yang sama (yang digunakan dalam konteks Cina)
dipekerjakan di instrumen untuk menangkap dampak speks. Namun, sebelum
proses penerjemahan, modifikasi dibuat untuk pertanyaan dengan termasuk
beberapa sinonim untuk kata 'dampak' untuk memberikan definisi yang lebih
luas dari dampak kata dan untuk membantu responden untuk berpikir lebih luas.
sinonim ini efek, pengaruh, hasil, hasil dan konsekuensinya. Para responden
diberi 15 menit untuk menyelesaikan kuesioner. Tabel 1 memberikan ringkasan
dari konteks penelitian untuk kedua kasus.
4. HASIL
Tabel 2 merangkum demografi responden dari kedua studi kasus. Berdasarkan
(1965) kerangka Anthony dan Gable et al. (2008) klasifikasi IS kelompok kuncipengguna, kami telah mengklasifikasikan responden menjadi empat kohort kerja
(Strategic, manajemen, teknis dan operasional) sesuai dengan jabatan
responden serta peran pekerjaan mereka dan keterlibatan dengan sistem
informasi yang diteliti.
Studi kasus ini menghasilkan tanggapan tekstual dari responden mencerminkan
pengamatan mereka dari dampak IS pada organisasi dan kerja masing-masing.

Kami telah mengisolasi data-data tekstual menjadi kalimat pendek yang kita
sebut sebagai 'dampak kutipan'. kutipan dampak ini kemudian kelompok atau
dipetakan ke relevan ukuran IS-Impact. Setiap kutipan harus secara eksplisit
membawa sepotong informasi tentang dampak IS. Kutipan isolasi dan pemetaan
proses dilakukan dengan menggunakan NVivo, alat analisis data kualitatif. Tabel
3 merangkum jumlah dan distribusi kutipan sesuai dengan dimensi dari model ISImpact. Tabel 4 menyajikan jumlah dan distribusi kutipan menurut ukuran dari
model IS-Impact. 141 kutipan diisolasi dari tanggapan responden, yaitu masingmasing responden memberikan rata-rata enam (6) kutipan dalam studi kasus
Cina. Dari studi kasus Malaysia, 74 kutipan dikumpulkan dari survei, yang
merupakan rata-rata dari empat (4) kutipan per responden.
Dalam studi kasus Cina, sebagian besar kutipan berhubungan dengan 'Dampak
Organisasi' (OI), yaitu 38 (27%) dari 141 kutipan dipetakan ke tindakan ISDampak yang ada langsung. Namun, ada 18 (13%) kutipan juga diakui sebagai
OI tidak bisa mudah dipetakan ke dalam langkah-langkah IS-Impact. Para peneliti
menempatkan langkah-langkah belum dipetakan ke dalam kategori Unknown (U)
sementara. sebagian besar yang lain dari kutipan, 53 (38%) dipetakan ke dalam
dimensi 'Kualitas Sistem' (SQ). Sangat sedikit komentar tentang 'Dampak
Individual' (11, 8%) dan 'Kualitas Informasi' (15, 11%) dibuat oleh responden.
Namun, responden Cina juga mengangkat isu-isu baru tentang dampak IS luar
tindakan IS-Dampak yang ada, yang memakan 16% (23) dari total kutipan. Isuisu baru adalah kelompok bawah kategori Unknown (U).
Sementara itu, responden Malaysia telah dikutip 'Sistem Mutu' sering, dan 30
(41%) kutipan dipetakan ke dimensi. Ini diikuti dengan 25 (31%) kutipan
menyebutkan 'Dampak Organisasi'. Hanya empat (4) kutipan dapat terkait
dengan dimensi 'Kualitas Informasi'. Selain itu, ada satu (1) kutipan yang tidak
dapat dipetakan ke salah satu dimensi dari model IS-Impact.
Selanjutnya, kami fokus pada distribusi kutipan dalam kaitannya dengan
langkah-langkah dari model IS-Impact. Dalam studi kasus Cina, dalam dimensi
'Individual Impact', responden menekankan produktivitas individu (45% dari total
kutipan Dampak Individual), dan diikuti oleh Belajar (27%). Untuk dimensi
'Organisasi Dampak', lebih dari setengah dari kutipan (62%) terkait dengan
perubahan proses bisnis, dan 23% terkait dengan keseluruhan produktivitas. Hal
ini juga mencatat bahwa sangat sedikit responden menganggap pengurangan
biaya sebagai manfaat penting dari IS dalam sampel ini responden Cina. Untuk
dimensi 'Kualitas Sistem', responden Cina berkomentar bahwa fitur System
(25%) dan Kemudahan penggunaan (19%) adalah karakteristik penting dari
sistem yang baik. Sementara itu, untuk dimensi 'Kualitas Informasi', responden
Cina yang dikutip akurasi Content (53%) dan Ketepatan waktu (20%) dari laporan
sering.
Dalam studi kasus Malaysia, 40% dari kelompok kutipan di bawah 'Sistem Mutu'
terkait dengan fitur System (40%). Selain kualitas fitur sistem, responden juga
menekankan kualitas Mengakses (20%) IS dan Keandalan (13%) dari sistem.
Responden kemudian tertarik pada 'Dampak Organisasi', 31% dari kutipan
dipetakan ke dimensi ini. Berbeda dengan studi kasus Cina, responden Malaysia
menunjukkan ada dampak yang signifikan dari sistem pada pengurangan biaya
(24%) dan produktivitas secara keseluruhan (24%). Untuk dimensi 'Individual

Impact', responden sangat mengomentari efektivitas kerja dan ini berkaitan

dengan produktivitas individu (100%). Selain itu, mereka kebanyakan
mencontohkan Format (50%) dari laporan di 'Kualitas Informasi'.
Tabel 5 menunjukkan Instansiasi dari dimensi model IS-Dampak asli dalam
kaitannya dengan empat kohort kerja dalam studi Cina dan Malaysia. Dalam
studi kasus Cina, data menunjukkan 'Sistem Mutu' dan 'Dampak Organisasi'
terkait erat dengan empat kohort kerja. Strategis (S) tingkat responden juga
mengangkat banyak isu-isu di luar kerangka IS-Dampak yang ada. tabel juga
menunjukkan bahwa lebih dari setengah dari kutipan (78) berasal dari
Manajemen Cina (M) responden tingkat dan keprihatinan mereka tentang
dampak IS didistribusikan lebih merata dibandingkan dengan kohort kerja
lainnya. Dalam kedua studi Cina dan Malaysia, responden dari Operasional (O)
tingkat cenderung untuk memberikan dampak yang berhubungan dengan
'Sistem Mutu'. Sedangkan responden tingkat Teknis (T) dalam studi Cina
menyatakan keprihatinan tentang 'Kualitas Sistem' lebih dari dimensi dampak
lainnya. Satu-satunya Teknis (T) responden dalam studi kasus Malaysia lebih
menekankan pada 'Dampak Organisasi' daripada dimensi dampak lainnya. Selain
itu, ada kelompok kohort menunjukkan perhatian besar untuk 'Kualitas Informasi'
dan 'Dampak Individual'.
5. PEMBAHASAN
Pada bagian ini, kita akan membahas temuan awal dari dua studi kasus.
Sejumlah pengamatan dilakukan berdasarkan temuan. Kami telah menemukan
bahwa hasil dari kedua studi kasus memberikan beberapa implikasi metodologi
penelitian. Selanjutnya, data tekstual mungkin menyarankan beberapa langkahlangkah baru untuk model IS-Impact. Kami juga telah menemukan sebuah
masalah tentang IS kelompok kunci-pengguna dan terakhir, jenis organisasi dan
aplikasi yang digunakan dalam studi kasus ini dapat menyebabkan beberapa
perbedaan antara dua konteks ini. Implikasi ini akan dibahas secara rinci dalam
sub bagian berikut. 5.1 Implikasi untuk metodologi penelitian
Para peneliti telah menerima umpan balik yang penting pada instrumen survei
yang akan digunakan dalam tahap penelitian selanjutnya. Secara keseluruhan,
responden Malaysia menyepakati kredibilitas instrumen survei, bagaimanapun,
responden Cina memerlukan informasi lebih fokus dan pertanyaan untuk
membantu mereka dalam menyelesaikan survei.
Berdasarkan studi kasus Cina, ia mengamati bahwa serangkaian pertanyaan
yang lebih rinci (wawancara) dapat menghasilkan lebih banyak kutipan SQ (36)
dari seorang jenderal pertanyaan terbuka tunggal (uji coba (17)). Dalam
wawancara itu, sebagian besar kutipan yang berkaitan dengan SQ datang dari
Research Pertanyaan No.2 dan No. 4: 'Bagaimana kualitas dari sistem SAP hari
ini? "Dan" Apa isu dan masalah yang Anda miliki dengan sistem?' The temuan
menunjukkan bahwa: (1) umum tunggal IS pertanyaan identifikasi dampak
berlaku untuk menjelajahi 'dampak Organisasi' dalam konteks penelitian China,
(2) umum tunggal IS pertanyaan identifikasi dampak mungkin cukup untuk
mengeksplorasi 'Sistem Mutu' di Cina konteks penelitian, dan (3) umum tunggal
IS-Dampak pertanyaan identifikasi mungkin tidak cukup untuk menjelajahi
'individual Impact' dan 'Kualitas Informasi' dari IS dalam konteks penelitian.
pertanyaan lain yang diperlukan untuk menyelidiki dua dimensi ini ketika

melaksanakan Survey Identifikasi pada tahap selanjutnya dari penelitian. Dalam

hal ini, terbuka pertanyaan penelitian disertai dengan beberapa pertanyaan
pemicu yang direkomendasikan untuk survei identifikasi dalam konteks Cina.
Sementara itu, umpan balik yang diberikan oleh responden dalam studi kasus
Malaysia menunjukkan bahwa instrumen survei jelas dan dimengerti. kata
tambahan menggambarkan kata 'dampak' telah memberikan mereka
pemahaman yang lebih baik tentang tujuan pertanyaan tunggal dan juga
membantu responden untuk menguraikan lebih lanjut tentang dampak dari
sistem yang mereka terima sejauh ini. Namun, karena responden dari kohort
kerja Operasional dan Teknis, kami telah mengamati bahwa responden
menempatkan penekanan pada dimensi tertentu, oleh karena itu untuk Survey
Identifikasi berikut, penting untuk menutupi seluruh kelompok kerja, dalam
rangka untuk mendapatkan langkah-langkah yang lebih representatif . 5.2
Implikasi perpanjangan Model
temuan awal terkait dengan model IS-Dampak validasi dan ekstensi patut
menyelidiki dalam tahap penelitian selanjutnya. Dari studi kasus Cina kami telah
menemukan lebih dari 60% dari kutipan dalam OI dipetakan ke Perubahan Proses
Bisnis (BPC). Menurut kunci-kata yang diberikan oleh responden Cina, peneliti
mengklasifikasikan BPC kutipan ke dalam empat kategori: (1) proses bisnis
standardisasi (10 kutipan), (2) proses Terpadu di seluruh departemen dan fungsi
(7 kutipan), (3) tingkat tinggi otomatisasi (3 kutipan), dan (4) manajemen risiko
yang efektif (4 kutipan). BPC sehingga dapat mungkin diperluas menjadi empat
sub langkah-langkah, namun hal ini memerlukan bukti lebih lanjut dari Survei
Identifikasi berikut dan validasi empiris sub tindakan yang mungkin dalam survei
Konfirmatori.
Sebuah banyak kutipan besar yang berisi informasi yang unik juga diberikan oleh
responden Cina. Beberapa orang menunjukkan bahwa Enterprise System telah
meningkatkan penggunaan sistem mereka; Namun, 'Penggunaan' adalah
dimensi yang dikeluarkan dari model IS-Dampak dalam penelitian sebelumnya
karena Instansiasi cukup dan rendahnya tingkat daya mengukur (Gable et al.,
2008). Dua masalah lainnya, "Manajemen Sumber Daya Lebih Baik 'dan'
Keseluruhan Peningkatan Manajemen ', sementara tidak muncul dalam model ISDampak yang ada, yang dikutip oleh responden China sering dalam penelitian ini
juga. Ada juga satu kutipan dari studi kasus Malaysia yang tidak dapat dipetakan
ke dalam model IS-Impact. ini tunggal
kutipan berasal dari karyawan Teknis yang disebutkan keamanan sistem. Ini
mungkin menyarankan ukuran baru untuk SQ.
Meskipun sampel responden adalah terbatas dan penelitian ini adalah pada
tahap eksplorasi, temuan awal yang berharga untuk penelitian, karena mereka
memberikan aspek yang hilang kemungkinan IS Dampak untuk organisasi Cina
dan Malaysia. Mereka sebagian mendukung kredibilitas Model IS-Dampak yang
sudah ada. Penyesuaian Model akan lebih diuji dan dibenarkan dalam survei
Identifikasi dan survei Konfirmatori.
5.3 IS kunci grup pengguna
Studi kasus ini telah menunjukkan beberapa pola antara dimensi IS-Impact
dengan kelompok pengguna utama. Dalam studi kasus Cina, terlepas dari kerja

kohort responden terletak di, mereka semua tempat penekanan pada 'Dampak
Organisasi' dan 'Sistem Mutu', sementara studi sebelumnya menyarankan,
berdasarkan pembobotan, yang pengguna Strategis memberi korelasi yang
tinggi dengan 'Dampak Organisasi' dimensi. Sementara itu, studi sebelumnya
juga menunjukkan bahwa teknis dan pengguna Operasional sangat berkorelasi
dengan 'Sistem Mutu' (Gable et al 2003;. Gable et al 2008.). Selain itu,
responden tingkat manajemen Cina cenderung lebih baik informasi tentang
dampak IS dari kelompok stakeholder lainnya. Penelitian sebelumnya
menyarankan bahwa jika IS evaluasi terbatas dalam hal waktu dan sumber daya
dan tidak mampu meneliti beberapa kelompok pemangku kepentingan,
'kelompok pengguna (tingkat manajemen dan tingkat operasional)' (Sedera,
2006) atau kelompok manajemen tingkat menengah ( Shari Shang & Seddon,
2002) adalah kelompok responden yang ideal untuk diselidiki. Studi kasus Cina
memberikan bukti untuk argumen mereka.
5.4 Aplikasi dan jenis organisasi
Kami mengamati bahwa aplikasi dan jenis organisasi yang dipilih di setiap studi
kasus dapat menghasilkan temuan yang berbeda. Sebagai studi kasus Cina
memandang beberapa modul SAP bukan hanya keuangan, banyak dampak
operasional, seperti pengelolaan sumber daya yang lebih baik, peningkatan
produktivitas pada manufaktur dan manajemen persediaan, telah sangat
berkomentar oleh responden. Sementara itu, sebagai studi kasus Cina dilakukan
dalam sebuah organisasi profit didorong bukan organisasi publik, sejumlah
dampak manajerial, seperti standarisasi proses bisnis / integrasi, dan
meningkatkan manajemen perusahaan secara keseluruhan telah diidentifikasi.
Sehubungan dengan studi kasus Malaysia, semua kutipan (kecuali satu) telah
dipetakan ke dimensi dan ukuran model IS-Impact. Hal ini menunjukkan dengan
jenis yang sama dari sistem IS (sebagai pekerjaan sebelumnya) semua langkah
dan dimensi mungkin relevan dengan konteks Malaysia.
Membandingkan studi kasus Cina dengan Australia sebelumnya serta studi kasus
Malaysia, responden Cina menunjukkan kekhawatiran yang cukup besar dengan
manajemen perusahaan dan perubahan proses bisnis karena IS. Harapan untuk
sistem Perusahaan dari perusahaan Cina bisa menjadi salah satu alasan untuk
masalah ini. Perusahaan Cina berkeinginan untuk mempelajari keuntungan dari
teori manajemen perusahaan dan belajar untuk bertahan hidup dalam
lingkungan bisnis yang kompetitif yang semakin ketat. Sistem Enterprise,
terutama ERP, yang diklaim sebagai 'praktik bisnis terbaik', dan dianggap
sebagai drive untuk proses bisnis yang lebih maju dan dapat menghapus
kekurangan yang ada dalam praktik bisnis tradisional Cina. Oleh karena itu,
menyadari perbaikan dalam hal proses bisnis dan manajemen perusahaan telah
menjadi dampak penting dari IS.
6. KESIMPULAN
Penelitian keseluruhan berusaha untuk memvalidasi salah satu yang paling ketat
dan komprehensif IS model pengukuran Sukses - Model IS-Dampak dalam
konteks penelitian China dan Malaysia. Kami telah mengadopsi strategi
perluasan konteks (Berthon, Pitt, Michael, & Carr, 2002) dengan mengubah
pengaturan penelitian sementara metodologi penelitian dan teori tetap
umumnya sama. Namun, sebagai konteks studi berubah, bagian dari desain

penelitian mungkin memerlukan penyesuaian, karena beberapa isu yang terkait

dengan konteks tertentu muncul selama studi.
Makalah ini telah membahas observasi awal dari langkah-langkah dari dampak IS
dalam organisasi Cina dan Malaysia. Semua temuan dari studi kasus ini dianggap
sebagai titik awal dalam memvalidasi dan memperluas model IS-Impact dalam
konteks yang baru. Meskipun kita berada pada tahap awal dari model reeksplorasi, temuan awal yang berharga untuk penelitian, karena mereka
memberikan beberapa wawasan untuk organisasi serta beberapa implikasi untuk
model dalam konteks yang baru.
Kesimpulannya, hasil dari uji coba telah membantu kami dalam membangun
instrumen survei yang lebih baik untuk tahap berikut dalam penelitian. Selain itu,
kami telah menemukan bahwa penting untuk meneliti pemangku kepentingan
yang tepat untuk mendapatkan kutipan perwakilan untuk mengukur IS
keberhasilan dalam konteks penelitian.