Viva!

Como prometido deixo uma tabela com os critérios e indicadores que serão usados na classificação dos trabalhos da UC. Vejam e comentem s.f.f.

Como se tem frisado, tudo o que fazemos é passível de ser melhorado. Espero que a tabela vos permita tirar ilações sobre aspectos dos trabalhos (que no global estão bons) a melhorar (agora ou noutra ocasião, dado que alguns dos critérios e indicadores podem ser usados, por exemplo, na análise de dissertações, artigos, ...).

Tenho estado a ver os trabalhos e a deixar feedback nos comentários. Consultem-nos!!!

Bom trabalho!

Tabela - Critérios, indicadores e ponderação, a usar na classificação dos trabalhos (relatórios) da UC de APME

Critérios	Indicadores	Ponderação
Clareza e pertinência do objecto/objectivos, função e natureza do estudo	O objecto, os objectivos do trabalho, bem como a função e natureza do estudo, de análise/avaliação de recursos educativos, são definidos sem ambiguidade e a enunciada a sua pertinência ao trabalho desenvolvido anteriormente (alunos que tiveram a UC de LAE), a trabalhos em curso (alunos dos mestrados em ensino de…) e face à literatura consultada (na área da avaliação mais geral, de avaliação de software educativo, metodologias de investigação em educação…)	até 15 pontos
Clareza e adequação do desenvolvimento do documento	O texto compreende secções que se encontram estruturadas de forma lógica, face ao objecto e ao(s) objectivo(s). Assim, por exemplo, o texto tem uma introdução (em que é contextualizado o trabalho, enunciada a sua finalidade e sintetizadas as diferentes partes do documento), uma parte de  desenvolvimento (com a especificação das opções metodológicas, descrição dos instrumentos de recolha de dados e apresentação dos resultados) e conclusões (síntese e discussão dos resultados, conclusões e limitações do trabalho).	até 15 pontos
Adequação e fundamentação das opções metodológicas	As opções além de enunciadas são fundamentadas tendo em conta o contexto de desenvolvimento do trabalho e literatura da especialidade diversificada e actual. Por exemplo, as opções metodológicas são apontadas e justificadas face ao objecto e objectivos do trabalho ou as vantagens e desvantagens do instrumento de recolha de dados são referidas, de acordo com autores de referência.	até 20 pontos
Clareza da apresentação dos resultados	Os resultados são descritos claramente, por exemplo, a partir figuras que os ilustram e tendo em conta o objecto e objectivos do trabalho.	até 15 pontos
Relevância das conclusões	As conclusões apresentam uma síntese e análise dos resultados, relevando os aspectos mais pertinentes, bem como as limitações do trabalho e uma reflexão crítica.	até 10 pontos
Originalidade do contributo	O trabalho aporta contributos para a área, que são claramente identificados nas conclusões	até 10 pontos
Correcção da escrita	A escrita tem correcção sintáctica e morfológica, sendo a linguagem utilizada com clareza. As ideias são bem encadeadas. As frases são curtas e compreensíveis.	até 10 pontos
Utilização correcta das normas.	O trabalho tem entre 15 a 20 páginas e as normas de citação APA são usadas correcta e consistentemente.	até 5 pontos

 

 

Viva!.

Como prometido aqui fica bibliografia relacionada com o tema da UC de Avaliação de Produtos Multimédia Educativos (APME). Os seguintes estão mais relacionados com a análise (não passam pela utilização com alunos). Fiz a pesquisa usando a base de dados EBSCO. Podem/devem procurar outras referências noutras bases de dados (usando as palavras-chave indicadas nos docs abaixo) e em Português.

Organizem-se dentro dos grupos para ir fazendo as leituras e criar tabelas (tentem ver se dá para fazer na wiki do Sapo Campos ou usem outra ferramenta) com a informação relevante. No caso dos artigos abaixo, tentem dar resposta às questões seguintes: que dimensões de análise que critérios são propostos? O que fundamenta a proposta? quais as limitações da proposta? como foi desenvolvida a proposta (processo)?

Qualquer dúvida ou comentário, digam.

Boas leituras!

MJL

Educational Software Evaluation Form for Teachers. By: Kara, Yilmaz. Online Submission, Paper presented at the International Educational Technology (IETC) Conference (7th, Nicosia, Turkish Republic of Northern Cyprus, May 3-5, 2007). 2007 5 pp. (ED500133)

Abstract:

The purpose of the study was to develop an educational software evaluation form to provide an evaluation and selection instrument of educational software that met the requirements of some balance between mechanics, content and pedagogy that is user friendly. The subjects for the study comprised a group of 32 biology teachers working in secondary schools in the central part of the Erzurum province in Turkey. The biology teachers were asked to evaluate three educational software packages for their classes, schools, students, and individual use. The data from biology teachers were analyzed by the SPSS, using the frequency, reliability and factor routines. The body of the form covers 40 evaluation criteria in four major categories: Content, Student Involvement, Ease of Use, and Design, Esthetics. (Contains 3 tables.)

An Analysis of Interactive Learning Environments for Arithmetic and Algebra through an Integrative Perspective By: Trgalova, Jana; Bouhineau, Denis; Nicaud, Jean-FrancoisInternational Journal of Computers for Mathematical Learning, v14 n3 p299-331 Oct 2009. 33 pp.

Abstract:

The analysis presented in this article tries to obtain a global view of the field of interactive learning environments (ILE) dedicated to arithmetic and algebra. As preliminaries, a brief overview of evaluation methods focusing on educational software is given and a short description of ten ILEs concerned by the study is provided as a kind of a state-of-the-art. Then the methodology of ILEs analysis developed in the TELMA project is explained consisting in the design and the refinement of an analysis grid and its use on the ten ILEs is mentioned. Next, a first level analysis of results leading to a compiled, analytic and synthetic view of the ILEs available and/or missing functionalities is given. A second level of the analysis is also proposed, with two concise representations of the ILEs, composed of graphical representations of the previous results, leading to a 3D map of ILEs dedicated to arithmetic and algebra. This map provides, as promised, a global view of the field and permits to define five sorts of ILEs according to two criteria: the first one is teacher-oriented and concerns usages enabled by the ILE; the second one is student-oriented and concerns control provided by the ILE to accomplish such usages.

 

The Educational Software Design and Evaluation for K-8: Oral and Dental Health Software. By: Kabakci, Isil; Birinci, Gurkay; Izmirli, Serkan. Online Submission, Paper presented at the International Educational Technology (IETC) Conference (7th, Nicosia, Turkish Republic of Northern Cyprus, May 3-5, 2007). 2007 8 pp. (ED500153)

Abstract:

The aim of this study is to inform about the development of the software "Oral and Dental Health" that will supplement the course of Science and Technology for K8 students in the primary school curriculum and to carry out an evaluation study of the software. This software has been prepared for educational purposes. In relation to the evaluation of the software, "Educational Software Evaluation Form" was developed by the researchers. Expert evaluation was carried out by 9 computer teachers and 12 teachers of science and technology teaching in primary schools. As a result of the evaluation process, the educational software was found to be satisfactory by the computer teachers and the science and technology teachers. It was also revealed that the computer teachers and science and technology teachers differed in their opinions about the evaluation criteria. Moreover, it was considered necessary to revise and edit the evaluation criteria found in the educational software in line with the opinions of the computer teachers. (Contains 4 figures and 5 tables.)

Social Studies. MicroSIFT Courseware Evaluations. By: Northwest Regional Educational Lab., Portland, OR.. 1983 15 pp. (ED248162)

Abstract:

This compilation of 11 courseware evaluations gives a general overview of available social studies microcomputer courseware for students in grades 3-12. Each evaluation lists title, date, producer, date of evaluation, evaluating institution, cost, ability level, topic, medium of transfer, required hardware, required software, instructional purpose, instructional techniques, available documentation, instructional objectives, instructional prerequisites, content and structure, estimated student time required, potential uses, major strengths, and major weaknesses. Evaluation criteria are summarized in a grid showing evaluator ratings ranging from "strongly agree" to "strongly disagree." Most of the courseware is suitable for use with Apple II microcomputers. Courseware titles are"Cartels and Cutthroats" (economics), "Demo-Graphics" (population studies), "Elementary, Volume 6--Social Studies" (geography, history, economics), "Geography" (recognition of shapes of states), "Geography Explorer: USA" (U.S. geography and identification of states), "Map Reading" (map reading, compass, scale, notation) "President Elect" (government, civics, elections), "Social Studies, Volume 2" (general social studies), "The Decision Shop" (economics), "The Exploring of America Series" (history), and "The Market Place" (marketing and economics). (LH)

A Collaborative Process for Evaluating New Educational Technologies. By: Kelly, Greta. Campus-Wide Information Systems, v25 n2 p105-113 2008. (EJ800381)

Abstract:

Purpose: This paper seeks to propose a collaborative process for evaluating, piloting and selecting, new and emerging educational technologies. It aims to promote discussion about how such an evaluative process can be inclusive of interdisciplinary stakeholders and envision the actual application of these technologies in real teaching and learning contexts across disciplines. Design/methodology/approach: The methodology applied in the piloting and evaluation of new educational technologies involves the design and identification of learning activities, the development of evaluation criteria which map to the goals of the learning activities and stakeholders needs, and the incorporation of the technology-enabled activities into the total course design. Findings: Evaluation methodologies that involve interdisciplinary stakeholders collaborating on a software pilot expose participants to multiple perspectives and divergent views. The evaluation of new educational technologies within a teaching and learning context is more effective in exposing the benefits and weaknesses of the technology than a conventional software pilot. Research limitations/implications: The new educational technologies evaluation methodology proposed in this paper has only been fully applied in three product pilots and is still in its developmental stage. The research is limited to the evaluation of educational software, not the implementation of new educational technologies. Practical implications: The re-iterative and time-consuming process of piloting and evaluating new educational technologies within a course context is one in which academics require pedagogical, technological and administrative support. This paper presents a methodology that ensures each of these varieties of support is included. Originality/value: With the rapid expansion of new, sometimes costly educational technologies, universities can benefit from employing evaluation techniques based within an educational context, and ensure that their investments in these tools make an effective contribution to the enhancement of teaching and learning. (Contains 1 figure and 2 tables.)

Como indicado na mensagem anterior, deixo abaixo a referência do artigo recomendado. Espero que contribua para o enriquecimento da discussão em torno do que da integração das TIC na Educação, em particular do que deve ser um bom recurso para QI, e para desenferrujar o vosso Inglês (língua incontornável na investigação na área da integração das TIC na Educação).

Angeli, C., and Valanides, N. (2009). Epistemological and methodological issues for the conceptualization, development, and assessment of ICT–TPCK: Advances in technological pedagogical content knowledge (TPCK). Computers & Education, 52(1), 154-168.

Chama-se a atenção para a tabela 3 (Criteria for assessing ICT–TPCK) em que os autores apresentam critérios relativos à integração das TIC em contextos educativos, com exemplos de indicadores, para as áreas das Ciências da Natureza mas que podem ser transferidos para outras áreas.

Depois da leitura, deixem sugestões de alteração da tabela síntese dos parâmetros e critérios de análise de recursos para QI, nos comentários a esta mensagem.

Boas leituras!