sábado, 7 de outubro de 2023

A catedrática de Direito aterrorizada pelo ChatGPT e as vantagens da versão paga GPT-4 relativamente à versão GPT-3,5

 

Num artigo publicado há poucos dias, vide link acima, uma catedrática de Direito, também Directora do Instituto científico da Faculdade de Direito da Universidade de Barcelona, embrenha-se numa narrativa pouco académica (sinal de ignorância científica, como a definiu em 1959, Charles Percy Snow, membro do Christ's College, Cambridge), irracional, aterrorizada, quase como se estivesse a descrever o anti-cristo: "...convulsión fruto del modelo de fuerza dominante, inteligencia artificial chat GPT-4, que ha dejado al globo en shock...ejerciendo una fuerza centrípeta que absorbe por ósmosis cualquier proceso de creación científico y que termina alimentando al propio gigante..."

Note-se que sobre a referida questão dos direitos autorais, que tanto a preocupa (leia-se atormenta), já outros se pronunciaram anteriormente e como se deu conta num post anterior de 25 de Agosto, sobre um interessante artigo publicado na conhecida revista The Economist, é inevitável que as firmas que lucram com os modelos de IA generativa, acabem (a bem ou a mal) por ter de pagar pela utilização de obras que possuem direitos de autor. . https://19-pacheco-torgal-19.blogspot.com/2023/08/a-guerra-em-curso-entre-autores-e-as.html

Muito infelizmente, sobre aspectos positivos da IA, não foi porém aquela capaz de referir ou sequer de vislumbrar um único, como seja por exemplo a redução do custo da educação, ou a sua contribuição para melhorar de forma radical o diagnóstico médico, com 0% de diagnósticos errados, face a percentagens de erro de 7%, dos melhores especialistas mundiais e também para ajudar a resolver importantes desafios médicos. https://19-pacheco-torgal-19.blogspot.com/2023/04/as-elevadas-capacidades-do-gpt-4-na.html

PS - Ao contrário da versão gratuita (GPT-3,5) a versão paga a 20 dólares por mês (GPT-4) é muito mais versátil, sendo capaz de analisar imagens e dados numéricos apresentados em gráficos Excel e com uma capacidade muito superior de resolver problemas, inclusive na área do Direito, vide apresentação de duas professoras da William&Mary Law School de título "Uma demonstração das diferenças entre o ChatGPT-4 e 3.5 que influenciam a investigação e a redação jurídica"

sexta-feira, 6 de outubro de 2023

152 países (perigosamente) contaminados


Depois de em Fevereiro de 2022, ter divulgado no post supra, uma mudança de estratégia com vista a tentar "contaminar" Chineses, Japoneses e Sauditas e depois de em Março do mesmo ano ter divulgado o facto, de essa contaminação ter sido alcançada com sucesso  https://19-pacheco-torgal-19.blogspot.com/2022/03/alcance-mundialisise-versus-pacheco.html aproveito agora divulgar o facto do número de países contaminados ter entretanto subido para 152. Reproduzo abaixo o novo mapa mundo actualizado e antes disso a lista dos 20 países estrangeiros onde o grau de contaminação é maior:

1 - Estados Unidos
2 - Países Baixos
3 - Finlândia
4 - Austrália
5 - Reino Unido
6 - França
7 - Canadá
8 - Espanha
9 - Áustria
10 - Noruega
11 -  China
12 - Itália
13 - Alemanha
14 - Índia
15 - África do Sul
16 - Suíça
17 - Japão
18 - Polônia
19 - Turquia
20 - Suécia

PS - No referido blogue, o post sobre a raiva Francesa, relativa à utilização de métricas na avaliação da investigação, ainda permanece imbatível,  no número de visualizações: https://pachecotorgal.com/2022/02/11/france-wants-the-european-union-to-wage-war-against-bibliometrics/



quinta-feira, 5 de outubro de 2023

TU Delft - How to use ChatGPT-4 effectively to assess student work



In a previous post (link above) I disclosed a recent study, by a professor at the well-known TU Delft, in which he used ChatGTP-4 to predict scientific impact.

Equally fascinating is the professor's recent publication, which delves into a workshop involving around 70 education experts and faculty members, on the potential and limitations of using ChatGPT-4 to evaluate students' scientific work. In the conclusions and recommendations part, it can be read that there is consensus regarding the fact that ChatGPT-4 provides valuable feedback on student work, however, it requires human supervision. Below, you'll find a compilation of 19 prompts generated during the TU Delft workshop for reference: 

1. What is the core message of this summary?
2. Is this summary clear and brief? Does it capture the research questions and performed
research?
3. What is the contribution of the thesis?
4. How would you grade this thesis on a scale from 1 to 10?
5. Please evaluate whether this thesis meets basic research standards: introduction of
problem, relevant literature, methodology, results explained and conclusions
6. Is this an original research?
7. Does this essay meet the learning objectives of course?
8. Did chat gtp write this?
9. Has this summary been generated by chatgpt?
10. What are the outcomes of all project phases?
11. Give the definition of a good summary and look how many requirements the student checks,
based on that percentage give a grade and feedback.
12. Is this innovative work?
13. How well does this summary reflect the content of the thesis?...
14. is this abstract relevant for the firld.
15. Does the flow of the thesis make sense?
16. Can you write the summary in less words?
17. Is the goal and conclusion clear and do they align? Please also add a grade from 1 to 10, based on the Dutch grading scheme
18. Is the structure of the summary suitable for an MSc thesis?
19. Grade the following abstract of a Mechanical Engineering Master thesis, using a percentage grade.  
 
In the conclusions of an even more recent study, carried out by two German researchers (Jacobsen & Weber), it can be read that ChatGPT-4 offers a solid argument for its integration as a feedback tool in higher education. The main advantages are its quality and efficiency. https://osf.io/cr257

PS - A search carried out today on the Scopus platform, for publications with the terms "chatGPT" OR "chat GPT" OR "Generative Pre-Trained Transformer", returns a total of 3943 publications (34%-computer sciences, 33%-medicine, 24%-social sciences). The most prolific university is Stanford University, where the clear preference overwhelmingly leans towards the field of medicine, with a notable 58% of publications associated with chatGPT.