Benchmarking by Item Response Theory (BIRTH): método de benchmarking utilizando a teoria da resposta ao item na construção de escalas de competitividade

Abstract

Este trabalho desenvolve um novo método de benchmarking, que permite a construção de escalas de competitividade para a comparação de produtos, utilizando-se da Teoria da Resposta ao Item (TRI). Os objetivos foram o desenvolvimento do método e a aplicação demonstrativa em um produto. Teoricamente, o método combina as etapas do processo clássico de benchmarking com as etapas da TRI, e demonstra como os modelos estatísticos desta técnica conseguem medir a competitividade de produtos, por meio de um traço latente. Assim, o método da TRI utiliza-se das teorias da Psicometria para mensurar a competitividade de forma qualitativa e quantitativa, pela interpretação das características tangíveis e intangíveis dos produtos. Na aplicação do método desenvolvido, o índice de competitividade será mais assertivo, conforme a aderência do modelo estatístico da TRI às características (itens) do produto, que representam a sua competitividade no mercado. A precisão da medida de competitividade dependerá, basicamente, dos tipos e quantidades de itens elaborados, bem como do número de produtos utilizados na estimativa dos parâmetros do modelo da TRI. Os itens deverão ser construídos com base em teorias pertinentes ao produto e/ou com a opinião de especialistas ou clientes, com o suporte do processo de medição de um traço latente. Para demonstrar a aplicação do método desenvolvido, foram utilizados os microdados do censo da educação superior do Brasil, dos cursos superiores de tecnologia presenciais, totalizando 1.581 cursos. Foram elaborados 16 itens, referentes à dimensão Corpo Docente e Tutorial, provenientes das características das instituições, cursos, docentes e alunos. O referencial teórico do construto foi o instrumento de avaliação de cursos superiores, desenvolvido pelo MEC/INEP. A aplicação do método resulta na construção da escala, nas quais as boas práticas podem ser identificadas pelos itens com maior dificuldade, dado que estes são representados na mesma unidade do índice de competitividade. O acompanhamento ao longo do tempo da competitividade é possível, mesmo com a alteração de características dos produtos, com o uso da equalização da TRI. Assim, os gestores das empresas obtém informações sobre os produtos e o mercado, apoiando-os na avaliação do desempenho frente aos concorrentes, e na tomada de decisão para a melhoria contínua do processo produtivo e ampliação das características de produtos.<br>

Abstract : This document develops a new method for benchmarking, which allows the construction of scales of competitiveness for the comparison of products using Item Response Theory (IRT). The objectives were the development of the method and its application in a product. Theoretically, the method combines classic benchmarking process steps with IRT steps and demonstrates through statistical models how this technique can measure the competitiveness of products by means of a latent trait. Thus, the IRT method uses the theories of Psychometrics to measure the competitiveness of products through qualitative and quantitative interpretation of the tangible and intangible characteristics of those products. The application of the developed method will increase the accuracy of assessments of the competitiveness of a product because this method uses a statistical model of the IRT to evaluate the characteristics product that reflect market competitiveness. The precision of the measurement of competitiveness will depend basically on the types and quantities of items produced, as well as the number of products used in estimating the model parameters of the IRT. Items will be constructed based on relevant product and/or expert opinion or customers, with the support of the process of measuring of a latent trait. To demonstrate the application of the developed method, the census microdata of higher education in Brazil, the upper courses of classroom technology, totaling 1,581 courses, were used. Sixteen items related to Academic and Tutorial Corps, from the characteristics of institutions, courses, teachers and students were drawn dimension. The theoretical construct of the assessment tool of the superior courses, developed by MEC/INEP. The application of the method results in the construction of a scale in which items identify good practice with greater difficulty because they are represented in the same units as the index of competitiveness. The monitoring along time of the competitiveness is possible, even with the change of product characteristics, using the equalization TRI. Thus, managers of companies obtain information about their products and the market, which allows them to assess their performance against their competitors and to make decisions regarding the continuous improvement of their production process and expansion of product characteristics.