quarta-feira, 4 de outubro de 2023

IA generativa - A liderança da U.Aveiro e da U.Minho e o desempenho decepcionante da U.Porto e da U.Coimbra


Uma pesquisa hoje efectuada na plataforma Scopus, pelas publicações com os termos "chatGPT" OR "chat GPT" OR "Generative Pre-Trained Transformer", devolve um total de 32 publicações indexadas naquela conhecida plataforma. Apresenta-se abaixo a lista das universidades Portuguesas, cujos investigadores são co-autores das mesmas, lista essa que é ordenada pelo rácio do número de publicações por cada 100 docentes doutorados. Na mesma é possível constatar que as universidades de Aveiro e do Minho lideram destacadas, que o mesmo é dizer que são aquelas, que mais produziram para ajudar Portugal a sair do marasmo, sendo também evidente na referida lista, um desempenho decepcionante da Universidade do Porto e da Universidade de Coimbra. 

Univ de Aveiro........0.90 publicações por centena de docentes doutorados
Univ. do Minho.......0.70
Univ. de Lisboa.......0.36
Univ. Nova..............0.35
UBI.........................0.31
Univ. de Évora........0.22
Univ. do Porto.........0.21
Univ. de Coimbra....0.10

Em termos de áreas científicas, a produção Portuguesa não segue (infelizmente) a tendência mundial, nem muito menos a tendência das universidades mais competitivas, como a universidade de Stanford (aquela com mais publicações indexadas nesta área) onde há uma clara aposta na exploração das inúmeras potencialidades (leia-se a corrida ao ouro) da IA generativa relativamente à área da medicina, vide abaixo: 

Mundo                                                              Portugal
Ciências computação...........34%                     Ciências sociais.............53%   
Medicina..............................33%                      Ciências computação....38%  
Ciências sociais...................24%                      Medicina.......................13%       

Sobre esta questão vale a pena revisitar o post  anterior, do passado dia 25 de Abril, de título, "As elevadas capacidades do GPT-4 na resolução de importantes desafios médicos" ou o artigo publicado hoje mesmo, na revista Japonesa de Radiologia, sobre o elevado desempenho do ChatGPT-4, na abordagem de questões clínicas avançadas no campo da radiologia, no Japão. https://link.springer.com/article/10.1007/s11604-023-01491-2

PS - A informação relativa ao número de docentes doutorados, por instituição, foi obtida num documento da DGEEC, de Março de 2023, sobre endogamia académica https://www.dgeec.mec.pt/np4/385/%7B$clientServletPath%7D/?newsId=847&fileName=EndogamiaAcademica_20212022.pdf

segunda-feira, 2 de outubro de 2023

Workshop sobre a utilização do ChatGPT na avaliação do trabalho científico dos alunos


Num post anterior (link acima) divulguei um estudo recente, de um catedrático da conhecida universidade Técnica de Delft,  no qual aquele utilizou o ChatGTP-4 para prever o impacto científico. 

Não menos interessante é também a sua recente publicação, que diz respeito a um workshop com cerca de 70 peritos em educação e académicos de outras áreas, sobre as potencialidades e as limitações da utilização do ChatGPT-4 para avaliar o trabalho científico dos alunos. Na parte das conclusões e recomendações, pode ler-se que há consenso quanto ao facto do ChatGPT-4, fornecer um feedback valioso sobre o trabalho científico daqueles, no entanto, necessita de supervisão humana nesse feedback.


Aditamento em 3 de Outubro - Nas conclusões de um estudo ainda mais recente, levado a cabo por dois investigadores Alemães (Jacobsen & Weber), pode ler-se que o ChatGPT-4 oferece um argumento sólido para sua integração como uma ferramenta de feedback no ensino superior, merecendo destaque, como principais vantagens, a sua qualidade e a sua eficiência. 

domingo, 1 de outubro de 2023

ChatGPT and the rise of semi-humans



Still following the previous post of June 27th (link above) about the very intelligent comment made by a (Portuguese) Professor at the University of Washington, concerning the biggest risk of artificial intelligence which is not having enough intelligence—it's worth noting that the latest issue of The Economist (page 54) stated that  "GPT-4 already exhibits a degree of consciousness"

Given the aforementioned context, it makes perfect sense to disclose the fact that yesterday, a paper titled "ChatGPT and the rise of semi-humans" was published here https://www.nature.com/articles/s41599-023-02154-3#Sec6 This paper delves into the important research question: "What are ChatGPT’s human-like traits as perceived by society?". The very notion of “semi-humans” illustrates how rapidly the discussion is moving beyond the technical capabilities of AI towards questions traditionally belonging to philosophy, psychology and the study of human identity.

One detail in the paper's bibliography was particularly striking: among the works cited is Theodore Kaczynski's 1995 Industrial Society and Its Future, better known as the Unabomber manifesto. The reference is certainly unusual, but perhaps not entirely accidental. Long before contemporary artificial intelligence, Kaczynski's text articulated an extreme and deeply problematic version of a recurring fear: that technological systems may progressively acquire a logic and momentum of their own, leaving human beings increasingly dependent upon structures they created but can no longer fully control.

The irony is difficult to miss. In 1995, such fears belonged largely to the margins of technological debate. Less than three decades later, questions about human autonomy, technological dependence, machine intelligence and even machine consciousness have entered mainstream scientific and public discussion. The interesting question is therefore not whether Kaczynski was right his conclusions and methods were indefensible but why some of the questions surrounding technological power have proved so persistent. 

Kaczynski, TJ (1995) Unabomber manifesto: Industrial society and its future. The Washington Post, Washington, DC. http://web.cecs.pdx.edu/~harry/ethics/Unabomber.pdf