sábado, 2 de dezembro de 2023

GPT-4 excels beyond human researchers in writing scientific introduction sections



Expanding upon our prior discussion (please refer to the linked post above) regarding the ChatGPT-4 powered tool developed by researchers at Stanford University for scientific paper review, it's also important to highlight a recent study conducted by researchers in Denmark (Sikander et al., 2023). This study specifically focused on assessing ChatGPT-4's proficiency in crafting introduction sections. The conclusive results of the study indicated that “The majority of assessors preferred GPT-4 introductions"  

PS - Continuing the conversation on AI, it is noteworthy to mention that an article in The Economist's edition 'The World Ahead 2024' (pages 71-72), underscores that the expected impact of AI on employment is significantly less than initially envisioned. This challenges and dispels the notion of an impending jobmageddon "economists have become more optimistic. Recent studies have found that fewer workers are exposed to automation...New AI seems better at coding...low skilled jobs may be insulated"

quinta-feira, 30 de novembro de 2023

IA generativa - Universidade do Minho é a nova campeã nacional das universidades com mais publicações indexadas na Scopus

 

No inicio do passado mês de Outubro, uma pesquisa efectuada na plataforma Scopus, pelas publicações com os termos "chatGPT" OR "chat GPT" OR "Generative Pre-Trained Transformer", mostrou que a universidade do Minho, era a segunda universidade Portuguesa com o maior rácio, publicações indexadas por cada 100 docentes doutorados, atrás somente da Universidade de Aveiro. https://pachecotorgal.com/2023/10/04/ia-generativa-a-lideranca-da-u-aveiro-e-da-u-minho-e-o-desempenho-decepcionante-da-u-porto/

Um mês depois, uma nova pesquisa, revelou que a universidade do Minho ainda se mantinha em segundo lugar a nível nacional e revelou também que a universidade do Porto continuava a decepcionar https://pacheco-torgal.blogspot.com/2023/10/ia-generativa-universidade-do-porto.html mas hoje passado que está um outro mês, uma pesquisa efectuada na Scopus, mostra que a universidade do Minho é agora a universidade com melhor rácio nacional, vide lista abaixo: 

Univ do Minho........1.2 publicações por centena de docentes doutorados
Univ. de Aveiro.......1.1
UBI.........................0.6
Univ. Nova..............0.5
Univ. do Porto.........0.4
Univ. de Lisboa.......0.4
Univ. de Coimbra....0.3
Univ. de Évora........0.2

Os resultados mostram que há várias universidades com uma produção científica anormalmente baixa, onde se incluem as universidades de Lisboa, do Porto e de Coimbra, cujo rácio é respectivamente 300% e 400% inferior ao da Universidade do Minho. 

Se as referidas três universidades, tivessem produzido o que produziu a universidade do Minho, então Portugal já poderia hoje, finalmente, ter mais publicações científicas, sobre inteligência artificial generativa, do que países pobres como o Paquistão ou o Camboja. 

Note-se, que por exemplo, a Suíça, produziu 300% mais publicações, nesta área particular do que Portugal e que a universidade de Cambridge, sozinha, possui mais publicações sobre inteligência artificial generativa, do que todas as instituições de ensino superior de Portugal juntas. 

E até possível saber, qual a área cientifica, em Portugal, que não anda a produzir aquilo que era suposto. A nível mundial a produção de publicações indexadas sobre inteligência artificial generativa, é liderada pela universidade de Stanford, e uma análise mais fina sobre essas publicações, revela que 44% pertencem à área da medicina. E isso não sucede por acaso pois um artigo hoje publicado na revista Nature, revela que a inteligência artificial permitirá poupar anualmente entre 200 biliões e 360 biliões de dólares https://www.nature.com/articles/d41586-023-03803-y

Se porém fizermos o mesmo exercício, para as publicações indexadas de Portugal, chega-se à lamentável conclusão que somente 22% pertencem à área da medicina. Ou seja o nosso país produz muito menos publicações científicas do que devia produzir, menos inclusive do que produzem os países pobres supra mencionados e ainda por cima, em áreas cientificas, que não são aquelas que possuem o maior potencial de poupanças económicas. 

PS - Ainda sobre a supracitada IA generativa, é pertinente divulgar um estudo recente, de investigadores da Dinamarca, que concluiu que o GPT-4 (a tal versão do ChatGPT que é paga mensalmente e que as universidades ricas disponibilizam aos seus alunos), consegue ser mais eficaz do que os humanos, a escrever introduções de estudos científicos https://assets.cureus.com/uploads/original_article/pdf/179463/20231118-13378-1265u1.pdf

A falta de visão da revista Visão e os economistas perturbados que se comportam quase como a famosa galinha sem cabeça



No dia 14 Março de 2023, tive de criticar a falta de rigor da revista Visão acerca das putativas "20 profissões mais suscetíveis de serem substituídas pelo ChatGPT", vide post acessível no link acima. Passados poucos meses, em 31 de Agosto, tive novamente que criticar a referida revista, por conta de um artigo pouco rigoroso e até alarmista, onde se afirmava que a inteligência artificial iria eliminar 75 milhões de postos de trabalho https://19-pacheco-torgal-19.blogspot.com/2023/08/os-engenheiros-que-cobram-quase-200.html

Pois bem, num recente artigo publicado na prestigiada revista The Economist, na edição "The Word Ahead 2024", (a mesma edição, que não por acaso, já tinha mencionado, num post sobre a supina tacanhice do Reitor da Universidade de Lisboa), pode ler-se nas páginas 71-72, no artigo de título "What does AI mean for your pay?", que os cenários dantescos sobre eliminação de elevadas percentagens de empregos eram afinal baseados em pressupostos pouco realistas. Curiosamente, num outro artigo da mesma revista, nas páginas 83-84, está escrito que os economistas andam de cabeça perdida, (leia-se, agem quase como se fossem a tal famosa galinha que contra todas as probabilidades, conseguiu viver 18 meses sem cabeça) porque afinal muitas empresas ao invés de despedir, tiveram ainda de contratar mais pessoal, porque conseguiram ganhar mais quota de mercado. 

Declaração de interesses - Declaro que nada de pessoal me move contra a revista Visão. Porque se é verdade que em 8 de Dezembro de 2019 escrevi sobre ela um post nada simpático de título "A máquina de estupidificar os Portugueses ataca novamente", também não é menos verdade que em 30 de Janeiro de 2020, escrevi um outro post, esse elogioso, de título "A máquina de estupidificar Portugueses no caminho da redenção ?", https://pacheco-torgal.blogspot.com/2020/01/a-maquina-de-estupidificar-portugueses.html e em 15 de Abril de 2020, também um outro post, igualmente elogioso, com o título "A máquina de estupidificar Portugueses redimiu-se ?"