Earticle

본 연구는 프로젝트 선정 및 포트폴리오 관리에 관한 고찰이다. 첫 번째 부분은 프로젝트 선정에 관한 세 가지 방법 (AHP, 경제학적 방법, Microsoft's Enterprise 프로젝트 관리 방법)의 장 단점에 대한 간단한 견해를 제시하였다. 두 번째 부분은 프로젝트 포트폴리오 관리에 관한 기법 등을 소개하였고, 6개의 질문을 통해 프로젝트 포트폴리오 관리 시스템에 대해 어떻게 조직화하고 활용할 것인가를 고찰하였다.

식스시그마는 시장과 고객의 패러다임과 트렌드의 변화에 맞추어 모든 사업의 프로세스와 전략을 개선하는 경영 혁신운동이다. 식스시그마 프로젝트 선정에 관한 기존의 연구는 있으나 불완전한 정보환경 하에서 프로젝트 선정을 위 한 연구는 거의 없다. 본 연구의 목적은 불완전한 정보 하에서 올바른 프로젝트 선정을 위해 통합 MCDM 기법을 적용 방법을 제안하는 것이다. 식스시그마 프로젝트 선정을 위해 4단계인 1) 평가기준 간 가중치 결정 2) 팀 멤버 간 전문역 량의 상대적 중요도 결정 3) 프로젝트 선호도 척도 산정 4) 최종 프로젝트 우선순위 결정 등을 위해 그룹 Fuzzy AHP, 불완전한 정보환경 하에서의 비퍼지화 TrFN 변환, GRA의 통합기법을 제안하였다. 본 연구에서 제안한 식스시그마 프로젝트 선정단계의 적용방안에 대한 이해를 돕기 위해 수치예가 제시되었다.

Six sigma is an innovative management movement which provides improved business process by adapting the paradigm and the trend of market and customers. Suitable selection of six sigma project could highly reduce the costs, improve the quality, and enhance the customer satisfaction. There are existing studies on the selection of Six Sigma projects, but few studies have been conducted to select the correct project under an incomplete information environment. The purpose of this study is to propose the application of integrated MCDM techniques for correct project selection under incomplete information. The project selection process of six sigma involves four steps as follows: 1) determination of project selection criteria 2) calculation of relative importance of team member’s competencies 3) assessment with project preference scale 4) finalization of ranking the projects. This study proposes the combination methods by applying group fuzzy Analytical Hierarchy Process (AHP), an easy defuzzified number of Trapezoidal Fuzzy Number (TrFN) and Grey Relational Analysis (GRA). Both of the weight of project selection criteria and the relative importance of team member’s competencies can be evaluated by group fuzzy AHP. Project preferences are assessed by easy defuzzified scale of TrFN in case of incomplete information.)

The purpose of this study is to explore the applicability of AHP(Analytic Hierarchy Process) to select more productive projects among various proposed projects in a particular company. To achieve this research objective, the characteristics of project evaluation and selection are first reviewed with respect to when, where, and how the decision is made. Then the theoretical basis of the AHP is briefly reviewed along with its mathematical underpinnings to construct the framework of project evaluation and selection. To be more specific, the evaluation and selection criteria were reorganized in the AHP-based framework to make the process of project evaluation and selection more productive. Project evaluation and selection is one of the most important activities for the most companies to be more advantageous in the market. Despite the importance of decision making process of project selection, not many of how to choose the best project were suggested as the reliable project selection methods in the industries. It may be because it involves various activities related to conflict resolution among different evaluation criteria, high uncertainties of market, and the unclear tradeoff among various project objectives. Furthermore, the decision, once made at this point, tends to be irrevocable until the whole process turns out to be a complete success or failure. As the result, the AHP method showed better financial performance rather than the traditional method in a case study.

국가연구개발사업 연구개발과제 선정에 대한 투명성과 공정성에 대한 개선 필요성이 지속적으로 제기됨에 따라, 국토교통기술사업화지원 사업을 대상으로 선정평가 지표별 평가 결과에 미치는 영향력을 분석하고 분석결과를 활용한 지 표 개선 방안을 모색하였다. 연구자료는 2021년도 국토교통기술사업화지원 사업 중소기업 혁신, 스타트업 2개 분야의 신 규 연구개발과제의 선정평가 결과 자료와 평가지표를 적용하였으며, 로지스틱 회귀분석을 이용하여 평가지표별 영향력을 분석하였다. 회귀모형은 분석결과의 신뢰성 제고를 위해 인공신경망 다중 퍼셉트론 분석을 수행하여 영향력이 낮은 평가지 표를 사전에 제거하였다. 분석결과, 중소기업 혁신 분야는 인력운영계획에 대한 평가지표의 영향력이 가장 낮고 사업화 추진계획의 적절성 지표의 영향력이 가장 높게 나타났다. 스타트업 분야는 기술개발 적합성, 시장성, 사업수행 적합성 평가 지표의 영향력이 상호 유사하게 추정되었으며, 기술성 평가지표의 영향력이 가장 낮게 나타났다. 본 논문의 분석결과는 지속적인 선정평가 지표의 개선 필요성을 시사하며, 분석결과를 활용한 타당한 평가지표 선정 및 공정한 연구개발기관 선 정을 통해 국토교통 분야 우수 연구성과 도출 및 우수 기업 육성에 기여할 수 있을 것으로 사료된다.

As the need for improvement of transparency and fairness in the selection of national R&D projects has been continuously raised, we analyzed the impact on the evaluation selection results by evaluation indexes for The land transportation technology commercialization support project and searched for ways to improve indexes using the analysis results. As for the research data, it were applied as selection results of new R&D projects and evaluation indexes in two fields(SME innovation and start-up) in 2021. Logistic regression analysis is used for the influence of each evaluation indexes on the evaluation result, and for the regression model, evaluation indexes with low influence are removed in advance through artificial neural network multiple perceptron analysis to improve the reliability of the analysis results. As a result of the analysis, in the field of SME innovation, the influence of the evaluation index on the workforce planning was the lowest and the influence of the appropriateness of commercialization promotion plan was the highest. In the start-up field, the influence of the evaluation indexes for technology development suitability, marketability, and suitability for carrying out the project were estimated to be similar to each other, and the influence of the technology evaluation index was found to be the lowest. The analysis results of this thesis suggest the need for continuous improvement of selection and evaluation indexes, and by using the analysis results to select a fair R&D institution according to the selection of appropriate indexes, it will be possible to contribute to deriving excellent research results and fostering excellent companies in the field of land transportation.

방위사업청은 군의 시범운용을 통해 신기술이 적용된 민간 제품을 군에 신속히 도입하기 위해 2020년부터 신속시범획득 사업을 시행 중이다. 최근 신속시범획득사업의 예산 및 참여업체 수가 증가하는 점과 사업이 종료된 이후 소요결정이 이루어 진다는 점을 고려할 때, 효과적인 제도운영과 예산 낭비를 막기 위한 합리적 대상사업 선정이 더욱 중요하게 되었다. 그러나, 신속시범획득사업의 대상사업 선정을 위한 군 적용성 세부 판단기준이 아직 확립되지 않아 대상사업 선정에 어려움이 예상된 다. 본 논문에서는 신속시범획득사업의 대상사업을 선정 시 사업 종료 이후 소요결정으로 연계될 수 있도록 군 적용성을 중심 으로 고려해야 하는 주요 요소들로 군사적 필요성, 작전운용성능, 중･장기 전력소요와의 중복성, 기존 전력소요와의 획득기간 차이, 시범운용 조직 가용성을 식별하고 검토하여 대상사업 선정 판단에 실제 적용 가능한 판단기준과 그 외 전문인력 보강, 예하부대의 시범운용, 민간기업에 대한 무기체계 설명회 추진과 같은 제도 개선사항을 정책 대안으로 제시하였다. 이러한 제 안이 신속시범획득 대상사업을 선정하기 위한 합리적이고 구체적인 기준 마련과 신속획득제도 발전에 활용되기를 기대한다.

The Defense Acquisition Program Administration has been implementing the Rapid Demonstration Acquisition Project(RDAP) since 2020 to quickly introduce private products with new technologies to the military through the military's pilot operation. Considering the recent increase of the project budget and the number of participating companies and the characteristics of the RDAP that requirement decision of the military force is made after the project is complete, selection of appropriate projects has become more important for effective system operation and preventing budget waste. However, it is expected that the selection of appropriate projects will be difficult as the detailed military applicability judgment criteria for project selection have not yet been established. In this paper, in order to link the requirement decisions of the military force and the result of the RDAP projects, we identify and review major factors such as military necessity, ROC, operational effects, redundancy with long-term and mid-term requirement decision, difference in acquisition time between RDAP and existing requirement decision, availability of test organizations to be considered focusing on military applicability when selecting projects for the RDAP. In addition, we propose criteria for judgment that can be practically applied to the selection of appropriate projects and matters necessary for improvement of the system such as reinforcement of professional manpower, test operation of subordinate units, implementing briefing sessions on weapons systems for private companies as a policy suggestion. We hope that these proposals will be used to establish reasonable and specific standards for selecting appropriate projects for the RDAP and develop a system of RDAP.

국토교통부는 중소벤처 기업의 보유기술 및 공공기술 이전 및 사업화 지원을 위해 국토교통기술사업화지원사업을 추진하여 왔으며, 일몰제 적용에 따라 2022년부터는 후속 신규사업을 추진할 예정이다. 이러한 시점에서 후속 신규사업의 투 자효과 제고 및 우수 연구기관 선정을 위해 사업목적에 맞는 타당한 평가지표 체계의 수립이 필요하다. 후속 신규사업의 평가 지표 체계는 선행사업의 사업목적 및 목표와 연계 되어야 하며, 연구성과 단절 등을 예방하기 위해 기존 평가항목 및 지표를 고려하는 것이 필요하다. 따라서 본 논문은 국토교통기술사업화지원사업 평가위원별 평가결과 데이터를 이용하여 계층적 군 집분석을 통해 평가지표 체계를 다수의 시나리오로 설정하고, 구조방정식 모형 분석을 수행하였다. 시나리오 분석결과, 평가 지표 간 인과관계를 나타내는 각 경로의 측정효과와 평가항목에 미치는 평가지표별 효과를 고려하여 평가결과에 미치는 영향 력이 가장 높은 시나리오를 개선방안으로 선택할 수 있었다.

The Ministry of Land, Infrastructure and Transport has also been promoting the commercialization of land transport technology to commercialize the technologies owned by small and medium-sized venture companies, and to support the transfer and commercialization of public technologies. At this point, in order to improve the investment effect of subsequent new projects and to select excellent research institutes, it is necessary to establish a valid evaluation index system suitable for the purpose of the project. The evaluation index system for subsequent new projects should be linked to the project objectives and goals of the preceding project, and should be selected in consideration of existing evaluation indicators to prevent interruption of research results. Therefore, this thesis sets the evaluation index system into multiple scenarios through hierarchical cluster analysis using the evaluation result data for each evaluation committee for small and medium venture companies participating in the land transportation technology commercialization support project, and then analyzes the structural equation model. As a result of scenario analysis, considering the measurement effect of each path representing the causal relationship between evaluation indicators and the effect of each evaluation index on evaluation items, the scenario with the highest impact on the evaluation result was selected as an improvement plan.

건설산업의 국가 내수시장은 거시적인 경제관점으로 볼 때 포화상태이다. 이로 인해, 여러 가지 문제점이 발생되어 건설업의 수익성 하락에 기인하게 되었다. 이러한 상황에서 수익을 최대화 하고자 하는 건설사나 프로젝트 효율을 최대화 하고자 하는 발주자 모두에게 사업타당성의 검증은 무엇보다 중요한 문제로 대두되었다. 국토교통부에서는 위와 같은 문제를 해결하기 위해 건설공사 사후평가제도를 제정하였다. 하지만 현재까지 수행결과는 당초 기획‧계획 당시에 예측한 수요와 건설공사 완공 후 일정기간(3~5년) 경과 후에 측정한 실제 수요를 단순히 비교하여 제시하는 수준으로 개선점에 대한 대안 및 해결책 제시 자료로 부실한 실정이다. 이러한 건설공사 사후평가를 위한 평가기준의 모호함과 필요한 평가항목 부재 등으로 얻어진 자료는 잘못 된 사업 타당성 예측에 기인하고, 이로써 본 평가에 대한 불신이 생겨나며, 결국 형식적인 평가제도로 치닫게 되는 악순환을 반복하게 될 것이다. 이에 본 연구는 효율적인 건설공사를 진행하고자 시행하는 예비타당성조사에 대한 Feed-Back기준이 되는 사후평가항목 구축을 목표로, 건설사업의 사후평가자료를 보다 실증적으로 활용할 수 있는 사후평가항목을 예비타당성조사를 기반으로 하여 도출하였다.

The national domestic market of construction industry is saturated in terms of macroscopic economy. Due to this, various problems have occurred to cause a drop in profitability of construction business. The verification of business feasibility has risen as the more important issue than any other else to both the constructors that want to maximize profits and the owners that want to maximize project efficiency in this situation. The Ministry of Land, Infrastructure and Transport has established a Ex-Post evaluation system of construction project to solve the above problem. However, the execution result so far is at a level of simply comparing and presenting the forecasted demand at the time of initial planning and scheduling and the measured actual demand after a certain period(3~5 years) has passed after the completion of construction project, so it is insufficient as data to present an alternative and solution for the improvement points. The data obtained through this vagueness of evaluation criterion for Ex-Post evaluation of construction project and absence of necessary evaluation items is due to the wrong prediction of project feasibility, resulting in distrust about this evaluation and repetition of vicious cycles that reach a formal evaluation system finally. So this study derived Ex-Post evaluation items that can use the Ex-Post evaluation data of construction projects more positively based on the preliminary feasibility study with a view to establishing Ex-Post evaluation items that are feedback criteria for the preliminary feasibility study conducted to proceed with efficient construction projects.

This study carried out the analysis on the selection of important factors in the reconstruction project that takes place in the progress stage while conducting the reconstruction project. For this study, a preliminary study is carried out to analyze individual elements for the reconstruction project and for the importance survey of reconstruction project. The variables extracted from it are applied to analyze the importance of key decision making works that take places in the progress stage among the construction project. The weighted value was calculated by applying the importance of decision making matters per progress stage in the reconstruction project and the results from the order was as follows: Rank 1: moving expense payment condition, rank 2: communication between promoting subjects, rank 3: calculation of premium value, rank 4: union members' contribution and rank 5: union members' selling price. As the reconstruction project is a maintenance project for new housing supply and for enhancing the quality of residence, it is expected that, from the results of this study, the rapid reconstruction project is to be carried out by deciding the importance of decision making issues per progress stage of the reconstruction business.

군의 시범운용을 통해 신기술이 적용된 민간 제품의 군 적용 가능성을 확인하고 필요한 무기체계를 군에 신속히 도입하기 위해 방위사업청은 2020년부터 신속시범획득사업을 수립하여 시행하였다. 그러나 신속시범획득사업은 하나의 기업만을 사업 참여자로 선정함에 따라 향후 양산단계에서 가격경쟁을 저해하여 상대적으로 높은 획득비용으로 이어질 수 있다는 우려가 제 기되었다. 이에 따라 복수의 사업자를 사업 참여자로 선택할 수 있도록 제도가 보완되었다. 그럼에도 불구하고 사업 참여자의 수를 결정하는 세부 기준이 아직 확립되지 않아 개정된 신속시범획득사업의 실제 적용에 논란이 따를 것으로 예상된다. 본 논문에서는 신속시범획득사업 참여 사업자의 수(단수 또는 복수)를 결정할 때 고려해야 할 주요 요소들을 식별하고 검토하여 참여사업자수 판단에 실질적으로 적용할 수 있는 정책 대안을 제시하였다. 이러한 제안이 신속시범획득사업 참가자 수를 결 정하기 위한 합리적이고 구체적인 기준 마련에 활용되기를 기대한다.

In order to confirm the possibility of military use of civilian products with new technology through the military’s demonstration operation, and to quickly introduce necessary weapon system into the military, the Defense Acquisition Program Administration established and implemented a Rapid Demonstration Acquisition Project(RDAP) from 2020. However, there is a concern that the RDAP may lead to relatively high acquisition costs by hindering price competition in the future mass production stage as only a single company is s elected as t he p roject p articipants. Therefore, the R DAP has been s upplemented to a llow multiple companies to be s elected. However, it i s expected that practical application of the r evised R DAP will be difficult as the criteria for deciding whether to select a single operator or multiple operators are still not established. In this paper we identify and examine the main factors to be considered when determining the number of participating companies (single or multiple) in the RDAP, and suggests policy implications. We hope that the suggestions of the paper will be used to prepare reasonable and detailed criteria for determining the number of participant of the RDAP.

Not until the late 1980s`, governments began to formulate evaluation scheme of national R&D programs. In this study, the comparative analysis of four nations` evaluation scheme for government-supported R&D programs was carried out in order to practically applicate to real R&D programs. This study aims at the procedure and assessment of the mode of project selection and its R&D agency. This study deals with national R&D programs such as G7 project (Korean), ATP & SBIR (American), Large scale project (Japanese), and ANVAR (French). Summing up, this paper suggested that mixing approach between Top-down and Button-up is adequate to select and develop future oriented R&D project, that the capability of R&D agency is more important than R&D project itself, and that practical utility is more required as an evaluation philosophy of the national R&D program.

본 연구의 목적은 교육역량강화사업의 선정요인들이 연도별, 소재지별, 대학규모별로 어떠한 차이가 있는지 확인하는 것이다. 이를 위해, 첫째, 2008년~2013년 동안 대학 교육역량강화사업에 신청한 대학을 대상으로 교육역량강화사업 선 정요인의 특징을 분석하였다. 둘째, 대학 소재지(수도권 및 지방) 및 규모(대형, 중형, 소형) 별로 선정요인의 차이를 분 석하였다. 이를 위해 대학알리미 자료를 활용하여 매년도 사전 포뮬러로 제시하였던 지표들을 T점수로 환산하여 로지 스틱 회귀분석을 실시하였다. 연구결과, 연도별 대학 교육역량강화사업의 선정에 영향을 준 요인은 상이하다. 하지만, 성과지표의 경우 공통적으로 취업률, 재학생충원율이 선정에 영향을 주었으며, 2009~2010년을 제외한다면 전임교원 확보율 또한 영향을 주었다. 여 건지표의 경우에는 평가에 포함된 지표가 많음에도 불구하고 실제 통계적으로 유의한 결과를 보여준 지표는 2008년~2011년의 학생 1인당 교육비, 2010년의 등록금 인상수준, 2008, 2011~2013년의 전임교원 확보율 지표이다. 소재지와 대학규모별 교육역량강화사업에 선정된 요인을 분석하였을 때 성과지표의 경우에는 공통적으로 취업률과 재 학생충원율이 영향을 주었으나, 수도권/대형대학의 경우 해당하지 않는다. 여건지표의 경우 다양한 지표가 영향을 주었 으나, 소재지, 대학규모와 관계없이 공통적으로 유의미한 지표는 없었다. 이를 바탕으로 정부 재정지원사업을 위한 제언은 다음과 같다. 첫째, 해당 사업에 맞는 장기적 관점에서의 지표개발이 필요하다. 둘째, 대형대학 대상 정책 시행 시 대형대학 간 경쟁력을 비교할 수 있는 지표를 개발해야 할 것이다. 셋째, 정부정책의 실제에 대한 분석자료를 문제없는 범위 내에서 공개되어야 할 것이다.

This study aims to identify the difference between four-year universities in ECEP in terms of years, location and size. First, we analyzed the features of selected universities in ECEP during 2008-2013. Second, we found the differences in selection factors in accordance with university location and size. For this, we made use of Academy Inform System (AIS) data and performed logistic regression with selected indexes. As a result, we found that various indexes affected in ECEP’s selection by year. In the performance index category, important factors that practically affected the selection were employment rate and enrollment of registered student, while condition index such as full-time faculty rate, education budget per student, and tuition increase rate also influenced the selection. Employment rate and enrollment of registered students were the encompassing factors that influenced ECEP selection regardless of the location except for large, Seoul-area universities. In the case of the condition index, various indexes are affected in ECEP’s selection regardless of university size / location. With this, we suggest these proposals for government financial support program. First, we should define the goals of ECEP in a more precisional manner, validate selection criteria, and rationalize budget distribution principle in terms of location, size and ownership. Second, accuracy of and access to study data should be improved.

본 논문은 체계적인 연산법(Algorithm)을 연구, 개발하여 여산산출에 중요한 역할을 하는 mixed integer programming 문제를 계산하기 위하여 첫째로, 많은 투자수단 또는 계획중 가장 합리적인 (이익율이 높은) 수단을 정하는 Weingartner의 여산산출모델 (Capital Budgeting Model)을 간단히 검토해 보고, 둘째로 위의 검토에서 얻어진 개념에 따른 이 모델의 문제점들을 모색해 보며 마지막으로 기획분야의 어떤 기간동안 자원확보(확대)를 가능케 하는 여산산출 문제를 해결할 수 있는 방안이나 체계적 연산법을 개발해 보고자 한다. 이러한 휴계적 연산법은 (함축적인 또는 부분적인) 열권방식 (Enumeration Technique)을 이용함으로써 위에 제시된 문제를 해결하는데 용역 할 것이다.

This paper explains that tacit knowledge is a critical component for the success of government-led R&D project selection, where rapid and accurate decision making need to be made under lack of information circumstances. It also explores ways to fully exploit the tacit knowledge of experts participating in the Korean government's R&D project selection process. Some of these include: (1) strategic attention from the top officials, (2) forming self-organizing teams, (3) establishing a horizontal and risk-taking culture, (4) encouraging a sense of responsibility in creating and sharing tacit knowledge, and (5) providing a seamless monitoring system and training.

In this paper, we offer a new strategic portfolio model for national IT R&D project selection in Korea. A risk and return (R-R) portfolio model was developed using an objectively quantified index on the two axes of risk and return, in order to select a strategic project and allocate resources in compliance with a national IT R&D strategy. We strategize using the R-R portfolio model to solve the non-strategy and subjectivity problems of the existing national R&D project selection model. We also use the quantified evaluation index of the IT technology road map (TRM) and the technical level reports (TLR) for the subjectivity of project selection, and try to discover the weights using the analytic hierarchy process (AHP). In addition, we intend to maximize the chance for a successful national IT R&D project, by selecting a strategic portfolio project and balancing the allocation of resources effectively and objectively.

Some issues which should be considered in an R&D project selection problem are as follows: First, quantitative analysis on the efficiencies of R&D projects is required to guarantee objective validity in the evaluation of the projects. For this reason, the methodology for selecting R&D projects should be based on mathematical models that perform quantitative analysis. Second, in general there are ordinal factors like Likert-scale in the data for evaluating R&D projects. Previous researches, however, couldn't suggest explicit methods incorporating these ordinal factors into models. Third, for the R&D project selection problems with limited resources like budget, it is necessary to decide the perfect ranking of the all projects. This paper develops a mathematical model that can be applicable to the problems of selecting R&D projects with the previous features. In this paper, we improve the original DEA model for evaluating efficiency to incorporate ordinal factors and suggest a new model which can decide the perfect ranking of all projects by merging the improved DEA model and AHP method. Furthermore a web-based R&D project selection system using the DEA/AHP model suggested in this paper is developed and illustrated.