Validação de Face e Conteúdo
Considerações do Avaliador 1 Ações Decorrentes
Na seção Unidade de Estudo do Protocolo de Estudo de Caso, mostrar que a caracterização de MPE utilizada baseia-se no número de funcionários, conforme definição do SEBRAE.
Alterado.
Na seção 5. Análise de Dados do Protocolo de Estudo de Caso, detalhar as técnicas de análise de dados, caracterizando o nome da técnica, se é quantitativa ou qualitativa, etc.
Não alterado. Manteve-se a expressão “técnicas analíticas de análise de dados”. Incluiu- se a referência para a técnica de análise de dados e as atividades a serem realizadas. Na seção 6. Dimensões e questões do guia para
entrevista estruturada do Protocolo de Estudo de Caso, acrescentar mais uma coluna com o tipo de questão, aberta ou fechada.
Alterado.
No instrumento de pesquisa, utiliza-se a palavra “facilitou”. Entretanto, esta palavra pode ser tendenciosa na obtenção de respostas dos entrevistados.
Alterado. Trocou-se a palavra “facilitou” por “auxiliou”. Além disso, utilizou-se uma escala de intensidade ao invés de respostas sim/não como forma de minimizar respostas tendenciosas.
A pergunta “O tempo de resposta da ferramenta FAE- MPS.BR foi adequado?” não permite identificar em qual funcionalidade específica o tempo de resposta foi ou não adequado.
Alterado. Inseriu-se uma outra questão que busca identificar em qual funcionalidade o tempo de resposta não foi adequado.
A pergunta “Em que nível você classifica a dificuldade de uso da ferramenta FAE-MPS.BR?” não permite identificar qual é o possível tipo de dificuldade, como dificuldade técnica ou em aplicar os conceitos propostos.
Não alterado. O objetivo com essa questão é avaliar a dificuldade de uso da ferramenta FAE-MPS.BR de maneira geral.
A pergunta “Em que nível de qualidade você classifica a usabilidade da ferramenta FAE-MPS.BR?” não permite avaliar a usabilidade da ferramenta FAE- MPS.BR em cada funcionalidade, em específico.
Não alterado. Como todas as funcionalidades seguem um mesmo padrão de usabilidade, basta analisar o nível de qualidade da usabilidade de forma geral.
Na dimensão Situação Posterior, as questões devem avaliar o que o uso do processo AE-MPS.BR e da ferramenta FAE-MPS.BR ajudaram a empresa.
Não alterado.
Validação de Face e Conteúdo
Considerações do Avaliador 2 Ações Decorrentes
No instrumento de pesquisa, ora é utilizada a sigla “MPS”, ora é utilizada a expressão “programa de melhoria”. Para facilitar o entendimento do instrumento de pesquisa, sugiro cuidar o uso destas expressões.
Alterado. Padronizou-se a utilização da expressão “programa de melhoria de processos”.
Analisar se as perguntas fechadas, com respostas “sim/não”, permitem uma avaliação adequada. Talvez em alguns casos fosse interessante utilizar uma escala de intensidade.
Alterado. Analisou-se cada uma das questões fechadas e identificou-se três questões onde é mais interessante utilizar uma escala de intensidade ao invés de respostas sim/não.
No instrumento de pesquisa, utiliza-se a expressão “objetivos estratégicos com a MPS”. Entretanto, não se esclarece qual é a área da organização que possui estes objetivos estratégicos com a MPS.
Alterado. A expressão “objetivos estratégicos com a MPS” foi modificada para “objetivos estratégicos da organização com o programa de melhoria de processos” como forma de caracterizar que estes objetivos são referentes a organização como um todo, e não de uma área em específico.
Considerando as perguntas:
“Se sim, os objetivos estratégicos com a MPS são considerados durante o planejamento do programa de melhoria?”
“Se sim, os problemas com o processo de SW e suas respectivas causas são considerados
durante o planejamento do programa de melhoria?”
Alterar o texto “durante o planejamento do programa de melhoria” para “na elaboração do planejamento do programa de melhoria”.
No instrumento de pesquisa, utiliza-se a expressão “processo de SW”. Para facilitar o entendimento do instrumento de pesquisa, sugiro alterar para “processo de desenvolvimento de SW”.
Alterado.
Alterar a pergunta “Se sim, são analisadas as causas para os problemas com o processo de SW?” para “Se sim, as causas para os problemas com o processo de SW são conhecidas?”.
Alterado.
Identificar na pergunta “Considerando os objetivos da organização com a MPS, os processos MR-MPS mais importantes foram identificados?” que os objetivos citados são os “objetivos estratégicos com a MPS”.
Alterado. A pergunta foi modificada para: “Considerando os objetivos estratégicos da organização com o programa de melhoria de processos, os processos MR-MPS mais importantes foram identificados?”.
A pergunta “Se sim, os processos MR-MPS mais importantes são priorizados durante a implantação do modelo MR-MPS na organização?” não deixa claro o que uma resposta sim/não pode representar.
Alterado. A pergunta foi modificada para: “Se sim, os processos MR-MPS mais importantes são os primeiros a serem implantados na organização?”.
O uso da palavra “identificação” deixa vaga as perguntas a seguir:
“Em sua análise, o processo AE-MPS.BR facilitou a identificação dos objetivos da organização com a MPS em nível estratégico e tático?”
“Em sua análise, o processo AE-MPS.BR facilitou a identificação dos problemas atuais com o processo de SW da organização e suas respectivas causas?”
Alterado. Modificou-se a palavra “identificação” por “análise”.
A pergunta “A aplicação do processo AE-MPS.BR determinou os processos MR-MPS que devem ser priorizados pela organização. Em sua análise, esses processos MR-MPS são, realmente, os mais importantes para a organização?” pressupõe que a aplicação do processo AE-MPS.BR foi realizada com sucesso. Deve-se considerar que esta situação pode não ocorrer.
Alterado. Dividiu-se esta pergunta em duas para, primeiramente, avaliar se a aplicação do processo AE- MPS.BR foi realizada com sucesso:
1. A aplicação do processo AE-MPS.BR determinou os processos MR-MPS que devem ser priorizados pela
organização?
2. Se sim, esses processos MR-MPS são, realmente, os mais importantes para a organização?
A pergunta “Quais foram as principais vantagens na aplicação do processo AE-MPS.BR?” não esclarece em que aspectos as vantagens devem ser analisadas.
Não alterado.
A pergunta “Quais foram as principais vantagens no uso da ferramenta FAE-MPS.BR?” deveria estar associada a aplicação do processo AE-MPS.BR.
Alterado. Verificou-se que já existia uma pergunta “A ferramenta FAE-MPS.BR auxiliou na aplicação do processo AE-MPS.BR? Por quê?” na dimensão Ferramenta FAE-MPS.BR. Assim, moveu-se esta pergunta para a dimensão Situação Posterior.
A pergunta “A aplicação do processo AE-MPS.BR facilitou que os objetivos estratégicos com a MPS fossem atendidos?” deveria ser respondida com níveis de intensidade, eliminando a necessidade da pergunta “Se sim, em que nível?”.
Pré-Teste
Considerações do Participante Ações Decorrentes
O tempo de experiência profissional na área de informática deve ser obtido em meses, pois o entrevistado pode estar a menos de um ano na empresa.
Alterado.
Alterar a pergunta “Tempo de empresa”, deixando claro que se quer analisar o tempo de trabalho na empresa atual.
Alterado. Utilizou-se a expressão “Tempo na empresa atual”.
Inserir o vínculo de contratação cooperado. Alterado. Alterar a pergunta “Se sim, os objetivos estratégicos
da organização com o programa de melhoria de processos são considerados na elaboração do planejamento do programa de melhoria de processos?” para facilitar o entendimento.
Alterado. Estabeleceu-se a seguinte pergunta: Se sim, durante a elaboração do planejamento do programa de melhoria de processos, os objetivos estratégicos da organização com o programa de melhoria de processos são considerados?
Alterar a pergunta “Se sim, os problemas com o processo de desenvolvimento de SW e suas respectivas causas são considerados na elaboração do planejamento do programa de melhoria de processos?” para facilitar o entendimento.
Alterado. Estabeleceu-se a seguinte pergunta: Se sim, durante a elaboração do planejamento do programa de melhoria de processos, os problemas com o processo de desenvolvimento de SW e suas respectivas causas são considerados?
Antes da pergunta “Considerando os objetivos estratégicos da organização com o programa de melhoria de processos, os processos MR-MPS mais importantes foram identificados?” garantir que o entrevistado sabe quais são os processos MR-MPS que a empresa está implantando.
Alterado. Estabeleceu-se as seguintes perguntas:
1. Você sabe quais são os processos do modelo de referência do MPS.BR que a empresa está implantando? 2. Se sim, quais são os processos do modelo de referência do MPS.BR que a empresa está implantando? Explicar que a expressão “processos MR-MPS” refere-
se aos processos do modelo de referência do programa MPS.BR
Alterado. Utilizou-se a expressão “os processos do modelo de referência do MPS.BR”.
Alterar a pergunta “Considerando os objetivos estratégicos da organização com o programa de melhoria de processos, os processos MR-MPS mais importantes foram identificados?” para facilitar o entendimento. Alterado. Estabeleceu-se as seguintes perguntas: 1. Se sim, os processos do modelo de referência do MPS.BR mais importantes foram identificados considerando os objetivos
estratégicos da organização com o programa de melhoria de processos?
2. Se sim, quais são os processos do modelo de referência do MPS.BR mais importantes considerando os objetivos estratégicos da organização com o programa de melhoria de processos? Explicar o significado das siglas AE-MPS.BR e FAE-
MPS.BR.
Alterado. Alterar a pergunta “Em sua opinião, em que nível o
processo AE-MPS.BR auxiliou a análise dos objetivos da organização, em nível estratégico e tático, com o programa de melhoria de processos?” para facilitar o entendimento.
Alterado. Estabeleceu-se a seguinte pergunta: Em sua opinião, em que nível o processo AE-MPS.BR auxiliou a análise dos objetivos estratégicos da organização com o programa de melhoria de processos?
Antes da pergunta “Qual é a sua opinião a respeito do processo AE-MPS.BR permitir que diferentes técnicas de priorização sejam utilizadas?” garantir que o entrevistado entendeu que o processo AE-MPS.BR permite que diferentes técnicas de priorização sejam utilizadas.
Alterado. Inclui-se a seguinte pergunta:
O processo AE-MPS.BR permite que diferentes técnicas de priorização sejam utilizadas?
Alterar a pergunta “A aplicação do processo AE- MPS.BR determinou os processos MR-MPS que devem ser priorizados pela organização?” para facilitar o entendimento.
Alterado. Estabeleceu-se a seguinte pergunta: Ao aplicar o processo AE-MPS.BR, você identificou os processos do modelo de referência do MPS.BR que devem ser
priorizados pela
organização? Alterar o verbo “auxiliou” na pergunta “Em que nível
a ferramenta FAE-MPS.BR auxiliou na aplicação do processo AE-MPS.BR?” para facilitar o entendimento.
Alterado. Estabeleceu-se a seguinte pergunta: Em que nível a ferramenta FAE- MPS.BR ajudou na aplicação do processo AE-MPS.BR? Alterar a pergunta “Em que nível a aplicação do
processo AE-MPS.BR auxiliou que os objetivos estratégicos da organização com o programa de melhoria de processos fossem atendidos?” para facilitar o entendimento.
Alterado. Estabeleceu-se a seguinte pergunta: Em que nível a aplicação do processo AE-MPS.BR ajudou para que os objetivos estratégicos da organização com o programa de melhoria de processos fossem atendidos?