역량기반 전공교육과정 질 관리를 위한 성과인증 평가지표 개발: H대학 사례

장은지 부경대학교 인문사회과학연구소 2023 인문사회과학연구 Vol.24 No.4

이 연구는 고등교육기관의 역량기반 교육과정 개발・운영 성과를 확인하고, H대학 교육과정의 질 관리 혁신을 시도하기 위해 전공교육과정 인증제의 최종 단계인 ‘성과인증’의 평가지표를 개발하는 데 그 목적이 있다. 우선, H대학의 전공교육과정 성과인증 평가지표 개발의 방향과 근거를 설정하기 위해 문헌 및 타 대학의 사례를 분석하였으며, 이를 바탕으로 1차 평가지표(안)을 개발하였다. 도출된 1차 평가지표(안)에 대해 내외부 전문가에게 2회의 자문을 받아 3차 수정안을 도출하였다. 이와 더불어 평가지표의 내용타당도 확보를 위해 학내 전문가(학부(과) 대표 교수, 교무학사지원 업무 담당자, 교육인증제 전문가, 교육학 분야 전문가) 25명을 대상으로 전문가 델파이 조사를 3회에 걸쳐 진행하였으며, 지속적인 수정・보완 과정을 거쳐 전공교육과정 성과인증 평가지표의 최종안을 도출하였다. H대학의 전공교육과정 성과인증 평가지표는 CIPP 평가모형에 기반하여 교육과정 상황분석 성과, 교육과정 개발운영 성과, 교육과정 중간 성과, 교육과정 산출 성과로 최종 4개의 교육성과 항목이 도출되었으며, 16개의 평가영역, 62문항으로 구성된 평가준거가 평가지표로 도출되었다. 최종 도출된 평가지표의 내용타당도 확보를 위해 수정 델파이 기법을 활용해 영역별, 지표별 내용타당도 비율을 산출하였다. 최종적으로 전문가 델파이 조사 분석에서 활용되고 있는 내용타당도 비율 최소값(Lawshe, 1975)을 기준으로 내용타당성(CVR)을 확보하였다. 이 연구는 H대학의 역량기반 전공교육과정 질 관리 방안으로 성과인증의 평가지표를 도출하는 과정에 있어, 대학에서 자체적으로 평가지표를 개발하여 적용하였을 뿐만 아니라 대학 수준을 넘어 학부(과) 수준에 적합한 교육성과를 확인하고 개선하는 모델을 시범적으로 보여주었다는 점에서 의미가 있다. The purpose of this study was to develop an evaluation index for performance accreditation at the final stage of the major curriculum accreditation to confirm performance in development and operation of the competency-based curriculum for higher education institutions and make an attempt at reforming the quality management for the curriculum of H University. To set a direction and basis for developing a major curriculum performance accreditation evaluation index for H University, literature and cases of other universities were analyzed; on the basis of the analysis, the first evaluation index (plan) was developed. The third revision was drawn with two sessions of advice from internal and external experts in terms of the first evaluation index (plan). To secure content validity of the evaluation index, a professional delphi survey was conducted in 25 internal experts (professors representative of the department, those in charge of support for academic affairs and education matters, experts in the education accreditation system, and education professionals) in three sessions and was constantly revised and complemented to generate a final plan for the major curriculum performance accreditation evaluation index. As for the major curriculum performance accreditation evaluation index of H University, four educational performance items—curricular situation analysis performance, curricular development and operation performance, interim performance of the curriculum, and curricular output performance—were finally drawn on the basis of the CIPP evaluation model, and an evaluation index consisting of 62 items in 16 areas was developed. To secure content validity of the final evaluation index, the revised delphi method was used to estimate the content validity rate for each area and index. On the basis of the minimum content validity ratio (CVR) used for analysis in a professional delphi survey (Lawshe, 1975), content validity was finally obtained. This study is meaningful in that a university has not only developed and employed its own performance accreditation evaluation index but also demonstrated a model of verifying and improving educational performance appropriate for the level of faculty beyond that of university in drawing an evaluation index for performance accreditation as a plan for managing the quality of the competency-based major curriculum for H University.

A Study on the Development of KMA LEADERSHIP Evaluation System(KMALES)

박상중,임유신 J-INSTITUTE 2021 Regulations Vol.6 No.1

Purpose: In this study, we confirm the effectiveness of the leadership evaluation index developed as an early stage of this leadership evaluation index development study, and demonstrate the validity of the index by com-paring it with the existing leadership evaluation system. Based on these findings, the optimal plan will be de-veloped through continuous research, and through this, the Korea Military Academy's leadership education and evaluation system will be improved and further developed. Method: The leadership activities of cadets were divided into three types of activities: leadership program, self-governing activities, and school/external activities to calculate activity scores based on the time spent on various activities, and finally, leadership evaluation index was calculated. We have gone through many tests to establish an optimal index for each activity. We surveyed tactical officers to get their insights and compared the evaluation results of 230 KMA cadets to identify the relation between the KMALES index and other leadership evaluation tools. Results: The leadership evaluation index was found that the results of the existing evaluation system, Lea-dership Competency Diagnosis and Leader Behavior and Value Evaluation, were very similar in evaluation of excellent and poor cadets. Therefore, the leadership evaluation index proved valid as a leadership evaluation system for cadets. Conclusion: First, it is the development of a new concept of leadership evaluation system that evaluates the leadership of cadets. Second, it has increased the possibility of using the new leadership evaluation system through verification of its effectiveness and validity. Third, it can be expanded to other educational institutions within the county.

Research on Indicator System of Construction Project Comprehensive Performance Management and Evaluation: Based On Combination Weight and TOPSIS

Tao Li,Hao Liu 보안공학연구지원센터 2016 International Journal of Hybrid Information Techno Vol.9 No.12

Currently, the scope of the traditional indicator system for performance evaluation of construction project is much broader. But the indicators are mostly involved only in quality, schedule, and environmental goals of the project. In other words, it only focuses on considering the level of performance that only a few large projects in progress goals, without taking into account of the impact on the overall performance level caused by the employees involved in the project and project management level of internal management of the project, which cannot meet the requirements for performance evaluation. Therefore, this article, from the view of the traditional project performance evaluation, through the introduction of financial indicators, indicators of internal, learning and development indicators, suggests a new comprehensive performance evaluation index system for construction projects. Based on the newly-built comprehensive performance evaluation index system of construction project, the collected project data by the author of this paper will be processed and analyzed. According to the characteristics of the index system and data rules, together with the introduction of a combination of indicators of empowerment evaluation method and TOPSIS method, the three construction project performance level is evaluated comprehensively in order to verify the rationality and practicality of the proposed construction project of comprehensive performance rating system. The results of this research show that the proposed project overall level of performance evaluation method is feasible, and it can be employed to do more comprehensive performance evaluation of the construction project, which provides new ideas and reference for the comprehensive evaluation of the level of performance of construction projects.

공기업과 준정부기관 경영성과의 영향요인분석: 평가지표체계와 평가방법의 변경 전후를 대상으로

라영재 한국정책분석평가학회 2019 政策分析評價學會報 Vol.29 No.4

Since the evaluation index system of SOEs and quasi-governmental organizations was based on the Malcolm Boldridge model in the United States, it was estimated that leadership factors had an effect on management and performance, as in the study of Wilson and Collier(2000), Collier (2001). As with the empirical study by Flynn and Saladin(2001) and Mellat-Parast (2015), the changes in the evaluation index system could change the relationship between management factors and management performance. In addition, since the leadership index has been replaced by strategic planning, it can be estimated that the strategic planning index also influenced the management factors and performance. In addition, the leadership and strategic planning indicators also analyzed the mediating effects of direct and indirect effects on management performance through other management factors. The results of the empirical analysis based on the results of the three-year evaluation indicators showed that in the 2013 evaluation model, leadership, financial management, remuneration management, and business management were influencing work efficiency and major business performance. In the 2014, 2015 model, strategic planning did not affect management performance. Only organizational human resources, financial budget, and business management factors had a limited effect on work efficiency and major business performance. Therefore, the preceding studies were statistically supported that leadership factors affect management and performance, and the relationship between management and management performance is changing according to the change of evaluation index. Therefore, when developing detailed sub-management indicators, the components and weights of the evaluation indicators should be determined based on theoretical prior studies, and the evaluation model should be revised through periodic verification of the suitability of the evaluation model. In addition, improving the fairness and professionalism of evaluation teams may have an effect on improving the validity and reliability of management evaluation results. 공기업과 준정부기관의 평가지표체계는 미국의 말콤볼드리지 모델을 기반으로 해서 만들어졌고 변화하고 있으므로 Wilson and Collier(2000)와 Collier(2001)의 실증연구 결과와 같이 리더십과 전략기획 요인은 경영관리와 경영성과에 영향을 주었을 것으로 추정해 볼 수 있다. 또한 Flynn and Saladin(2001)과 Mellat-Parast(2015)의 실증연구와 같이 평가지표체계가 변화하게 되면 경영관리와 경영성과와의 영향관계도 변화할 수 있다는 연구가설을 설정했다. 3개년도 평가지표의 결과값을 통해서 실증분석한 결과를 보면 2013년도 평가모델에 한해서 리더십, 재무관리, 보수관리, 주요사업관리가 업무효율과 주요사업성과에 통계적으로 유의한 영향을 주고 있었고, 2014년도, 2015년도 평가모델에서 전략기획은 경영성과에 영향을 주지 않았으며 조직인적자원, 재무예산, 주요사업관리 요인만이 업무효율과 주요사업성과에 제한적인 영향을 주고 있었다. 그리고 연도별 평가지표의 변화에 따라서 경영관리와 경영성과간의 영향관계가 변화하고 있다는 선행연구는 통계적으로 지지되고 있었다. 그러므로 세부적인 하위 평가지표를 개발할 때에는 이론적 선행연구를 바탕으로 해서 평가지표의 구성요소와 가중치를 결정해야만 하고, 주기적인 평가모델의 적합성 검증을 통해서 평가모델을 수정해야만 한다. 또한 평가단의 공정성과 전문성을 제고하는 것도 평가결과의 타당성과 신뢰도를 제고하는데 영향을 줄 수 있다.

“근로계약법” 시행평가 지표체계의 구축

장경함,만연교 한중법학회 2018 中國法硏究 Vol.34 No.-

시행효과 평가는 체계적이고 복잡한 공정이고 관리학과에서 시작된다. 학과 연구패러다임으로서 정부기구의 직무효능 평가에 많이 운용된다. 그것을 법학 연구에 도입하면 입법체계에 대해 평가를 진행할 수도 있고 어떤 구체적 부문 (部门)법에 대해서 상세히 해석을 진행할 수도 있다. 본 문에서는 “근로계약 법”이 민생과 긴밀히 연관된 중요한 법률로서 시행효과평가는 실은 다방면적 인 의제이다. 상대적으로 과학적인 평가지표 체계를 구축함으로써 그 시행효 과를 평가하는 것은 한 방면으로는 법률자체의 시행효과에 대해 검증을 진행 한다는 것과 다른 한 방면으로는 법률에 대한 사회적 기대에 응답을 하는 것이 다. 비록 어떤 부문(部门)법으로 평가시행지표체계를 구축하는 것은 국내에도 이미 관련 연구가 있었으나 “근로계약법”, 이 법률에 대해서는 국내 현재 연구 로서는 체계적인 요약이 아직 없다. 이 문제에 관하여 본 문은 우선 평가지표 체계자체의 속성분석을 통해 탐구를 진행하여 도구속성과 가치이성의 일치결 과를 얻어냈고 그 다음 거시적에서 구체적으로 이르는 각각 다른 측면에서 국 내외 평가지표체계에 대해 분석을 진행함으로써 그 사이의 보편성과 특성을 귀납해냈다. 최종에는 “근로계약법”자체의 특징과 결합하여 시행평가지표체계 의 구축을 시도했다. 한 가지 도구성의 사용을 통하여 “근로계약법”자체가치의 실증을 실현한 것은 나머지 시행효과의 진일보 연구에 기초를 다져놓았다. The evaluation of the implementation effect is a complex system project. As a multidisciplinary research paradigm that began in the management discipline, it is mostly used for the evaluation of the functions ongovernment agencies. Introducing it into law research can not only evaluate the legislative system, but also interpret it according to a specific department law. For the purpose of this article, the “Labor Contract Law” is an important law that is closely related to people's livelihood. The evaluation of its implementation is a multi-faceted issue. By constructing a relatively scientific evaluation index system to evaluate its implementation effect, one hand can testing the effectiveness of the implementation of the law itself; on the other hand, it responds to the social expectations of the law. Although there are already relevant studies on the construction of the evaluation and implementation index system for a specific sector law, the existing research in China does not have a systematic overview for the law of the Labor Contract Law. On this issue, this paper discusses the attribute analysis of the evaluation index system itself firstly, and draws the unity of instrumentality and value; and then analyzes the domestic and foreign evaluation index systems from the macroscopic to the specific different aspects, utimately summarizes them. Commonness and personality; Finally, combining with the characteristics of “Labor Contract Law” itself, we try to construct the implementation evaluation index system. Using an instrumental approach to achieve empirical evidence on the value of the Labor Contract Law, laying the foundation for further research on the effects of the implementation.

《劳动合同法》实施评估指标体系的构建

张景涵 한중법학회 2018 中國法硏究 Vol.34 No.-

시행효과 평가는 체계적이고 복잡한 공정이고 관리학과에서 시작된다. 학과 연구패러다임으로서 정부기구의 직무효능 평가에 많이 운용된다. 그것을 법학 연구에 도입하면 입법체계에 대해 평가를 진행할 수도 있고 어떤 구체적 부문 (部门)법에 대해서 상세히 해석을 진행할 수도 있다. 본 문에서는 “근로계약 법”이 민생과 긴밀히 연관된 중요한 법률로서 시행효과평가는 실은 다방면적 인 의제이다. 상대적으로 과학적인 평가지표 체계를 구축함으로써 그 시행효 과를 평가하는 것은 한 방면으로는 법률자체의 시행효과에 대해 검증을 진행 한다는 것과 다른 한 방면으로는 법률에 대한 사회적 기대에 응답을 하는 것이 다. 비록 어떤 부문(部门)법으로 평가시행지표체계를 구축하는 것은 국내에도 이미 관련 연구가 있었으나 “근로계약법”, 이 법률에 대해서는 국내 현재 연구 로서는 체계적인 요약이 아직 없다. 이 문제에 관하여 본 문은 우선 평가지표 체계자체의 속성분석을 통해 탐구를 진행하여 도구속성과 가치이성의 일치결 과를 얻어냈고 그 다음 거시 적에서 구체적으로 이르는 각각 다른 측면에서 국내외 평가지표체계에 대해 분석을 진행함으로써 그 사이의 보편성과 특성을 귀납해냈다. 최종에는 “근로계약법”자체의 특징과 결합하여 시행평가지표체계 의 구축을 시도했다. 한 가지 도구성의 사용을 통하여 “근로계약법”자체가치의 실증을 실현한 것은 나머지 시행효과의 진일보 연구에 기초를 다져놓았다. The evaluation of the implementation effect is a complex system project. As a multidisciplinary research paradigm that began in the management discipline, it is mostly used for the evaluation of the functions ongovernment agencies. Introducing it into law research can not only evaluate the legislative system, but also interpret it according to a specific department law. For the purpose of this article, the “Labor Contract Law” is an important law that is closely related to people's livelihood. The evaluation of its implementation is a multi-faceted issue. By constructing a relatively scientific evaluation index system to evaluate its implementation effect, one hand can testing the effectiveness of the implementation of the law itself; on the other hand, it responds to the social expectations of the law. Although there are already relevant studies on the construction of the evaluation and implementation index system for a specific sector law, the existing research in China does not have a systematic overview for the law of the Labor Contract Law. On this issue, this paper discusses the attribute analysis of the evaluation index system itself firstly, and draws the unity of instrumentality and value; and then analyzes the domestic and foreign evaluation index systems from the macroscopic to the specific different aspects, utimately summarizes them. Commonness and personality; Finally, combining with the characteristics of “Labor Contract Law” itself, we try to construct the implementation evaluation index system. Using an instrumental approach to achieve empirical evidence on the value of the Labor Contract Law, laying the foundation for further research on the effects of the implementation.

시군 종합평가 선진화 및 지표개발

박충훈,이현철,김지연 경기연구원 2016 정책연구 Vol.- No.-

경기도 시·군 종합평가는 도내 31개 시·군에서 수행하는 국가 주요 시책과 도정 주요시책의 추진상황을 점검하고, 환류함으로써 국가와 경기도의 주요 정책을 효율적으로 수행할 수 있도록 하기 위한 제도이다. 지방자치단체를 대상으로 한 우리나라의 평가제도 중 법·제도적 근거를 가지고 시행되는 평가의 수가 약 160개 정도라는 점을 감안할 때 시·군 종합평가는 자칫 시·군에 대한 평가 피로도를 유발할 소지가 없는 것은 아니다. 그럼에도 불구하고 시·군 종합평가는 지속·유지되고 있는데, 이는 시·군 종합평가의 중요성이 인정되고 있다는 것을 의미한다. 급변하는 정치, 경제, 행정, 사회, 문화적 환경을 고려해 정부 및 경기도 시책이 효율적으로 실행되어야 지역주민의 복리 증진을 도모할 수 있기 때문이다. 따라서 시·군 종합평가는 환경 변화에 탄력적으로 대응하고 보다 정교한 평가 방법을 마련해 운영할 필요가 있다. 이 연구의 범위는 도 주요 시책 평가 지표 45개를 중심으로 평가 지표의 타당성을 검증하고 개선안을 마련하고자 한다. 내용 범위는 도 시책 지표를 대상으로 첫째, 민선6기 주요 핵심 과제의 평가 지표 반영, 둘째, 기존 45개 지표의 타당성 검토 및 개선 셋째, 평가 제도 운영에 있어 도정 주요정책과 시·군 종합평가와의 연계성 향상 방향 등 평가 운영의 효율화 방안을 제시하고자 한다. 연구 결과 道각 부서로부터 지표개선의견을 받아 이론적으로 타당한 지표를 구축한 뒤 다시 각 부서로부터 검토를 받는 과정을 거쳐 최종 완성 시켰다. 그리하여 마련된 시책평가지표는 목표의 보수적 설정을 통해 유리한 목표만 설정하는 지표를 개선하였고, 단기간의 성과 보다는 보다 장기적인 관리를 통해 성과가 도출될 수 있도록 지표를 개선하였다. 뿐만 아니라 기존에 일상적으로 진행되어 오는 사업이나 정부합동평가와 중복되는 사업들을 조정하였고, 민선6기 핵심사업을 평가 대상 사업에 포함시켰다. 가중치와 관련해서는 시의성, 중요도 등을 종합 고려하고, 시·군의 적극적 참여와 유도가 필요한 시책에는 보다 높은 배점을 부여하였으며, 목표 달성율이 높은 지표이지만 지속적인 관리가 필요한 지표에 대해서는 최소한의 배점을 부여하였다. 또한 시의성과 중요성이 높다고 판단되는 도정과제, 공약사업, 지시사항에 대해서 총 290점의 배점을 부여하였다. 그 결과 과거 14개 시책 22개 지표, 45개 세부 지표를 10개 시책 26개 지표 45개 세부 지표로 개선하였고, 평가 배점은 과거 950점에서 800점으로 조정하였다. 특히 가중치 조정은 지표별 상대적 중요도 급간의 차이가 매우 커 배점이 낮은 사업은 포기하는 사례가 많이 있었는데, 개선된 매뉴얼 상 지표별 편차는 7.1점(최소 : 4.8, 최대 : 30)으로 기존 14.6점(최소 : 3.2, 최대 : 60)에 비해 50% 가량 편차를 감소시켰다. 시군종합평가의 의의는 정부합동평가 대비 및 경기도 주요시책의 추진을 독려하는데 있다. 특히 도 시책평가의 경우 경기도의 각 부서에서 31개 시군의 업무추진을 독려하기 위하여 가능한 한 해당 업무를 평가체계에 포함하려는 유인을 가지게 된다. 따라서, 시간이 지날수록 평가사업과 평가지표가 증가하여 전체적인 평가체계가 복잡해 질 수 있기에 평가대상기관인 시군의 평가부담을 완화하고 효과적인 평가체계를 구축하기 위해서는 주기적으로 평가체계를 점검하고 정비하려는 노력이 필요하다. The comprehensive evaluations of the city/county local governments in Gyeonggi-do are a system for inducing an effective execution of the major national and provincial policies implemented by the 31 city/county local governments in the province by inspecting and providing feedback on their implementation progress. In consideration of the rapidly changing political, economic, administrative, social, and cultural environment, the policies of the central government and Gyeonggi-do provincial government need to be executed efficiently. Also, the comprehensive evaluations need to be managed in the way they promote the local residents" welfare by flexibly responding to a variety of changes and developing and using more elaborate evaluating methods. The study selected 45 indices for evaluating the major policies of the providence and completed policy evaluation indices after reviewing their theoretical validity following the process of gathering the opinions on the ways to improve them through the consultations with the officials of the relevant departments and evaluating officers. The indices improved the previous indices that had set only the goals advantageous for achieving objectives so that they can induce the outcomes through a long term management rather than short term results. In addition, they adjusted the existing routine projects or the ones which were overlapped with the objects of the government joint evaluations and additionally put the core projects developed during the 6th local autonomy on the list of the items of the evaluations. Timeliness, magnitude, etc,. were comprehensively considered as regards their weighted value. In addition, the policies that need active participation from the cities and counties were given higher scores while the indices which had the high rate of archiving goals were given the least scores. In particular, regarding the adjustment of the weighted values, so far, relative magnitude difference between the indices was so great that projects with lower scores were often suspended, but the deviation by index on the improved manual was shown to be 7.1 points (minimum: 4.8; maximum: 30), down about 50% from the previous 14.6% (minimum: 3.2; maximum: 60). The purpose of the comprehensive evaluations is to compare itself with the government joint evaluations and spur the fulfillment of the major policies of Gyeonggi-do. In particular, the evaluations of the provincial policies seek to bring the relevant works into the evaluation system, allowing every department of Gyeonggi-do to spur the implementation of the 32 city-county local governments. Therefore, as the increased number of evaluation projects and indices makes the overall evaluation system more complex with the lapse of time, efforts should be made to periodically inspect and repair the evaluation system in order to ease up on the burden of the city-county local government, the objects of the evaluations, and establish a more effective evaluation system.

공연장 경영평가제도의 현황과 개선방안에 관한 연구

이은미(Lee Eun Mee) 한국예술경영학회 2009 예술경영연구 Vol.15 No.-

공연장 경영의 자율성과 효율성을 높이기 위해 정부지원 공연장들이 재단법인이나 특수법인 혹은 책임운영기관으로 전환하고 있다. 정부는 관련 기관 운영 자율성 확보와 동시에 운영결과에 대한 책임을 부여하기 위해 기관 경영평가를 실시하고 있다. 공연장도 이런 흐름에 영향을 받아 평가를 실시하고 있는 기관이 늘고 있다. 이번 연구에서는 평가를 지속적으로 실시하고 있는 3개의 대표적인 공공 공연장을 대상으로 경영 평가를 분석하고 개선방안을 제시하고자 한다. 최근 2년간(2006, 2007)의 공연장 경영평가보고서를 ① 평가절차, ② 평가주체, ③ 평가환류, ④ 평가지표의 지속성과 안정성의 측면으로 나누어 분석하였는데 공통적으로 나타난 평가의 문제점을 살펴보면, 평가절차에서는 평가시기가 늦어져 전년도의 평가 결과가 당년도 업무에 반영되지 않고 있고, 평가기간 부족으로 서류평가에 집중하는 문제점이 발생하고 있다. 평가주체, 즉 평가위원들에게서 나타나는 문제점은 평가보고서에 명시하고 있는 문제점과 개선방향이 실제 업무에 반영되지 않고 있어 궁극적으로는 평가위원의 컨설팅 역할이 부족하다는 것이다. 이는 단기간의 평가로 인한 제도상의 문제 때문에 나타나는 현상이기도 하다. 그리고 평가단 임기와 역할 등의 운영기준이 구체적이지 않아 평가위원 교체율이 높았고 이러한 사항은 평가기준 수립에 영향을 미치고 있었다. 평가의 환류에 있어서는 매년 같은 문제가 개선되지 않고 계속 지적되고 있었고 평가지표도 매년 변화하고 있어 안정성과 지속성이 확보되지 않고 있다. 경영평가를 하는 가장 중요한 이유는 경영의 효율성을 증진시키는 것이지만 현재의 평가는 평가절차와 형식에만 치우친 평가로 보다 명확하고 구체적인 평가운영방식이 마련될 필요성이 있다. 그 중에서도 가장 우선적으로 개선되어야 할 점은 평가절차의 적시성과 평가주체의 전문성 확보이다. 평가를 시작하는 시기를 앞당기고 절차를 최소화 하여 평가결과가 업무에 반영될 수 있도록 하며, 평가위원들이 장기적으로 평가업무를 수행하도록 하여 평가지표 안정성 확보와 전문성을 통한 평가환류가 제대로 이루어지도록 해야 할 것이다. 본 연구는 평가를 지속적으로 실시하고 있는 3개의 공연장의 2006년도와 2007년도 평가결과에 국한하였지만 이번 연구를 통해 향후 공연장 운영의 근본적인 문제점과 평가제도 개선 그리고 실증적인 추가연구의 계기를 마련하는데 기여하고자 한다. Performing arts centers supported by government have been evaluated their outcomes annually to improve their efficiency. The evaluation system started several years ago, but it has not been established yet. This study is going to focus on 3 representative centers, the National Theater of Korea, Seoul Arts center and Gyeonggi Arts Center. They have autonomic management systems with their specialties and have been evaluated for several years. Based on the 2006-2007 evaluation reports for 3 center, this study is going to find out common problems and suggest reasonable solutions to set a proper evaluation system. On this study, problems of evaluation systems for performing arts centers are focused on four categories. First is the process of the evaluation system. Three arts centers have started their process from the end of January to April, because of this reason, arts centers get their final reports from March to September, especially two arts centers have get their final reports in September. Therefore, results could have no effect on management operations. Second is the change of evaluation committee members. There are lack of specialists for evaluation and the evaluation process usually takes only three or four months. The members should investigate a whole year management data within a short period, therefore members cannot suggest a clear problem-solving method and the results are not satisfied with staff-members of the center. And committee members have been changed every year, so the standard of the evaluation also has been changed because it depends on members’ opinion. Third is the influence of results after evaluation. This study analyzed on 2006-2007 evaluations of three arts centers, and problems which were indicated in final evaluation reports of centers were repeated again next year. Based on this, we could guess that the evaluation is not influence on managing centers. And the last is the settlement of index items of evaluation. Measurement items are the key to evaluate and manage a center and they should be settled firmly and staff member who works for the center should know them. But every center uses different index items which have been changed each year. Performing arts centers are doing a vital role for developing the culture and arts in Korea. If they were managed only for profits, there is no hope for other non-profit arts organizations to present their efforts. The purpose of evaluation is to improve a management system for a center. But arts centers which are mentioned before do not have a fine evaluation system. This research suggest that the evaluation process should start at the end of the year and finish before the new management season. And the arts center sets up a rule to run the evaluation committee to keep and have specialists in members. Then, the index items are going to be fixed and the final report also is going to do its role for the arts center. For the further study, we need a survey and deep interviews of performing arts centers about the evaluation system.

시스템적 접근에 의한 자동화컨테이너터미널 개발 과제 도출

박창호,노홍승,정희균 한국항해항만학회 1998 한국항만학회논문집 Vol.9 No.-

This study is to find subjects for the Automated Container Terminal(ACT) development and container terminal system in Pusan port and its automation level by systems approach. And this paper aims at evaluating on the priority of R&D investment until the beginning of the second stage of New Pusan Project(2006). In this process we have considered 8 evaluation indexes (cost, labor, area, time, volume, reliability, safety, convenience) to analyze 6 subsystems. The priority of R&D until target year by sub-systems is as follow ; 1. Cargo Handling System, 2. Transfer System, 3. Port Entry System, 4. Storage System (Distribution & Manufacturing System included), 5. Inland Transport System, 6. Port Management & Information System.

국방물자정보시스템 성능개선 사업평가에 대한 사례

조성림(Sung Rim Cho),임규건(Gyoo Gun Lim),이대철(Dae Chul Lee) 한국IT서비스학회 2012 한국IT서비스학회지 Vol.11 No.1

There are many evaluation models to measure the informatization level of an organization and information system project in the ministry of National Defense of Korea. A information system has to keep up with the environment change as well as the advanced recent information technology (IT). Therefore, the evaluation of an information system project to enhance the performance of the information system should be different from the existing evaluation methods. This study suggests an evaluation case of information system projects to enhance the performance of an information system. In order to achieve the objective of this study, the following steps are taken. First, it reviews the background and the scope of the project to enhance the performance of the Defense Material Information System (DMIS). And it sets up the evaluation logic and develops performance indexes. Then it applies these newly developed performance indexes to the information system project and measures the performance. From this study, we found that both the diffusion and the experience accumulation by its continuous use are significant factors in such evaluations.