Por que a reforma da comunicação científica parece tão difícil e lenta?

Jan Velterop responde a pergunta para o blog Scielo. Achei confusa, mas gostei da seguinte parte:

A pesquisa em si precisa de tempo necessário para que seja feita de forma responsável e completa, mas uma vez que haja resultados sólidos, a comunicação deles com outros cientistas pode e deve ser mais rápida. A velocidade é essencial para tirar o máximo proveito dos esforços coletivos da comunidade científica. Qualquer atraso na comunicação dos resultados da pesquisa é um atraso na busca de soluções. Atrasos desnecessários são devastadores em casos de vida ou morte.

Ele usa um termo interessante: o bolismo. Ou seja, você não pode ter tudo.

Mas há um problema subjacente que impede a comunicação científica rápida, eficiente e aberta necessária para fazer o progresso necessário. Em inglês se usa a expressão “ficar com o bolo e comê-lo”. Não é possível. Depois de comer o bolo, você não o terá mais. Em outras palavras, “você não pode ter tudo”. A crença teimosa de que você pode é conhecida como “bolismo”. Há um sabor diferente de “bolismo” no sistema. Vários atores na área da comunicação científica têm desejos difíceis de conciliar, ou apenas incompatíveis entre si. Quais são estes desejos? Por parte dos pesquisadores, geralmente temos: o desejo de publicar rapidamente; ter seus artigos revisados pelos pares; ser publicado em um periódico de prestígio; ser citado amplamente e com frequência; ter acesso ilimitado a trabalhos de outros pesquisadores; enfrentar pouco ou nenhum custo para publicar em acesso aberto; obter reconhecimento pelo trabalho publicado quando avaliados para promoção, estabilidade, convites para conferências e similares. Pesquisadores individuais podem até mesmo ter mais desejos.

Resumo visual

O BJN (Brazilian Journal of Nephrology) completou 40 anos e o Scielo fez um texto comemorativo do periódico.

Trata-se de um periódico internacional com raiz brasileira, editado em inglês e português, e aberto. Além das coisas que um bom periódico possui, como

a) adoção de um sistema de gestão de submissão e revisão de manuscritos, amplamente utilizado pela comunidade científica internacional, o ScholarOne; b) a publicação dos artigos em ahead of print, que permitiu sua rápida indexação nos índices internacionais; c) envio de alertas para a divulgação de novos fascículos às instituições de nefrologia da América Latina; d) ampliação da participação de autores estrangeiros nos fascículos, a partir da submissão de artigos convidados; e) ampliação da participação de pesquisadores estrangeiros no Grupo de Editores Associados; f) Indexação no PubMed Central e no Scopus; e g) submissão do BJN ao processo de indexação da base de dados Web of Science, da Clarivate Analytics.


o BJN usa as redes sociais e um recurso que achei muito interessante: resumos visuais. Veja um exemplo:

Periódicos Fake

A chamada “falsa ciência” tem tido cada vez mais espaço na produção científica mundial. Há mais de dez anos, editoras sem escrúpulos como a Omics e Science Domain da Índia, Waset da Turquia ou ainda Scientific Research Publishing da China, criaram centenas de revistas com nomes pomposos se passando por publicações científicas sérias. São as chamadas “revistas científicas predatórias”.

A ideia começou através do movimento Open Access (Acesso Aberto, em português), que busca uma ciência disponível à sociedade científica e geral através da democratização do conhecimento. O problema é que a grande maioria dessas revistas predatórias não se preocupa com o caráter científico, bibliográfico ou ético da publicação, se importando mais precisamente com o dinheiro a ser recebido e se aproveitando da pressão por publicações que muitos pesquisadores sofrem.

Estudo falso publicado em menos de dez dias

Visando expor essa situação cada vez mais comum, jornalistas de dois meios alemães, o diário Süddeutsche Zeitung e a rádio pública NDR, colocaram a mão no bolso e transmitiram à revista Journal of Integrative Oncology "os resultados de um estudo clínico" que apontavam para "o extrato de própolis sendo mais eficaz no caso do câncer colo retal que as quimioterapias convencionais".

"O estudo era falso, os dados fabricados e os autores, filiados num instituto de investigação fictício, que também não existia. Porém, a publicação foi aceita em menos de dez dias e publicada no dia 24 de abril", detalhou o Le Monde.

O site da revista disponibilizava um link para uma versão do estudo, que, no entanto, foi retirado, depois de os responsáveis terem sido avisados. Ali se lia que os pesquisadores tinham comparado a eficácia da quimioterapia com cápsulas de própolis. Na conclusão do falso artigo científico, havia também a menção de um tema sem qualquer relação com o assunto, no caso, o efeito das massagens sobre as doenças trombo embólicas.

Lista Branca

Para lutar contra esse fenômeno, comunidades científicas e governos já estão se organizando. Na França, um dos países menos impactados com a prática, o ministério da Ciência começou a estabelecer “listas brancas” de revistas a serem privilegiadas. É preciso também investir em políticas de avaliação de pesquisas que pensem menos em quantidade e mais em qualidade.

A ministra alemã da Investigação Científica, Anja Karliczek, declarou ser favorável a um inquérito para determinar como um estudo falso pôde ser publicado. "É no próprio interesse da ciência", disse, citada pela agência de notícias alemã, a DPA. Para a ministra, tudo deve ser feito "para que a credibilidade e a confiança na ciência não sejam afetadas (...). Tais erros devem ser expostos, porque só assim se pode mudar o que está errado".

Fonte: Aqui (grato Jailton Fernandes pela dia). Além dos periódicos, surge também os "congressos", geralmente em locais turísticos e com uma gama de temas ampla demais.

Revisores de periódicos ruins

Uma  pesquisa (aqui, via aqui) entrevistou mais mil cientistas de diversos países e várias áreas para saber a sua relação com os revisores. O resultado mostrou que mais da metade dos entrevistados recebeu uma revisão “não profissional” e uma outra quantidade expressiva - a maioria dos entrevistados - disse que recebeu comentários problemáticos, que incluíam críticas pessoais e não construtivas.

Muitos leitores já passaram por isto. Recentemente o autor desta postagem recebeu uma crítica severa sobre uma pesquisa, onde o revisor propunha uma mudança na metodologia. Eu e a co-autora fizemos o que o revisor solicitava. Mesmo assim ele recusou o artigo (O pior neste caso é o editor, que aceitou passivamente esta atitude do revisor).

Em muitos casos, as críticas relatadas na pesquisa prejudicaram a carreira acadêmica dos entrevistados. Um dos relatos é de uma pesquisadora com pós-doutorado em New Hampshire que tentou um ensaio na Science e recebeu uma crítica negativa ao seu inglês. Em muitos casos, as críticas são próximas ao bullying. E por isto existe uma sugestão que as críticas sejam publicadas, em lugar de serem mantidas em sigilo. Isto poderia melhorar a qualidade e o profissionalismo dos revisores. Mas isto pode expor os novos pesquisadores à retaliação dos mais antigos.

Quem paga os artigos?

Quando uma pesquisa é publicada, quem deveria pagar pelo artigo. Algumas opções: (a) quem está publicando, pois é de seu interesse que a pesquisa seja divulgada; (b) o assinante do periódico, pois é de seu interesse a leitura; (c) instituições de fomento à pesquisa (incluindo o governo), pois a divulgação da pesquisa pode trazer benefícios para todos. (Esqueci alguma outra opção?)

Este é um tema bastante discutido nas ciências. O movimento da publicação aberta de artigos, onde todos podem ler os artigos, tem crescido. A divulgação que a Elsevier, uma das grandes editoras científicas, tem uma margem de lucro de 37%, também ajuda neste debate. A reação da Universidade da Califórnia (vide aqui) é mais um capítulo nesta questão. Questões ideológicas também são consideradas neste debate. Eis uma posição sobre o assunto:

Algo huele a podrido en el mundo de las publicaciones académicas. Los investigadores ponen casi todo el trabajo: escriben los artículos, los evalúan y realizan la tarea editorial, todo esto de manera prácticamente gratuita. Sin embargo, las universidades deben pagar cuantiosas subscripciones para que sus investigadores puedan leer estos artículos. Los márgenes de las empresas editoriales que publican estas revistas sugieren que los precios que cobran son muy superiores a sus costes. Por ejemplo, Elsevier, una de las líderes del sector, tuvo en 2018 un margen
operativo del 37%.

A raíz de este problema, en los últimos años ha cobrado fuerza el movimiento a favor del acceso abierto (open access). La idea es sencilla (ver la discusión de Armstrong 2015). Obliguemos a las editoriales a que pongan libremente a disposición de los lectores todos sus artículos y, si quieren cobrar a alguien, que cobren a los autores. Las bibliotecas universitarias se ahorrarían las cuantiosas subscripciones y todos los lectores tendrían acceso a los artículos de investigación. Esta idea ha sido acogida con entusiasmo por muchas instituciones públicas, incluyendo el Consejo Europeo de Investigación (ERC) y ha dado lugar al llamado plan S. Según esta iniciativa, a partir del 1 de Enero de 2020, todos los científicos e investigadores cuya investigación ha sido financiada por el ERC deberán publicar su trabajo únicamente en revistas de acceso abierto o en repositorios abiertos. (...)

En cualquier caso, en lugar de obligar a los investigadores a que publiquen en revistas de acceso abierto, quizás harían mejor las instituciones públicas en exigir que publiquemos en revistas sin ánimo de lucro, independientemente de que estas cubran sus gastos cobrando a los lectores, a los autores, o a los miembros de la asociación.

Custo de Formatação de um artigo - Parte 2

Anteriormente divulgamos uma pesquisa sobre o custo de formatação de um artigo:

Uma pesquisa realizada por cientistas canadenses encontrou o tempo que se gasta para fazer este trabalho. Usando mais de 300 respondentes, o pesquisadores descobriram o tempo por artigo submetido e a quantidade de artigos. Além disto, solicitaram o valor da renda anual. Considerando uma carga de trabalho anual de 1950 horas, a pesquisa obteve que o custo anual de formatação de artigos é de ...1.908 dólares. Por artigo, o custo seria perto de 500 dólares ou 477 dólares.

Outra pesquisa (via aqui) mostra que o custo de reformatação de um artigo é de 1,1 bilhão de US$ por ano. Para isto, os autores usaram 203 autores e multiplicaram o número de horas pelo salário/hora e o número de submissões. Isto inclui alteração dos resumos, das figuras, contagem de palavras, inserção de dados, entre outros. Um outro problema é que a reformatação também atrasa a publicação do artigo - de três meses ou mais, em 1/5 dos artigos e um atraso de um a três meses em mais de 1/3 dos artigos.

E muitos artigos são rejeitados. Assim, a formatação não "agrega valor". E qual o benefício disto? Veja que isto também se aplica aos congressos.

Como sobreviver sem assinar periódicos

A Revista Fapesp apresenta uma discussão sobre as alternativas de obter um artigo sem possuir assinatura de periódicos. A parte interessante do texto é a figura abaixo, com algumas das estratégias possíveis:

Em muitos casos, um artigo pode ser obtido através de um download nas páginas de busca ou diretamente do periódico. Quando isto não funciona, uma possibilidade é obter uma versão anterior do texto; o problema é fazer a citação de um texto preliminar, que não é bem visto nos artigos científicos. Existem diversos caminhos alternativos, que inclui um site ilegal, como o Sci-Hub, cópia via torrent ou obter o texto através de amigos (ontem consegui um texto por este caminho). Outra alternativa é evitar citar as referências com acesso restrito; quando isto for possível é uma boa forma de protestar contra o abusivo preço cobrado pelas editoras. 

As dicas do artigo podem realmente serem uteis. Não conhecia algumas delas e poderei usar em uma próxima oportunidade. 

Accounting Review retira artigo polêmico sobre tributação

• Uma pesquisa sobre evasão fiscal foi publicada em 2017 no principal periódico de contabilidade do mundo, o The Accounting Review
• Um pesquisador, Alex Young, com dúvidas sobre a pesquisa, solicitou, sem sucesso, acesso aos dados e códigos usados, publicando suas dúvidas no EJW
• Agora, o The Accounting Review retirou o artigo de sua edição

Uma pesquisa sobre evasão fiscal, de autoria de dois pesquisadores da prestigiosa Carnegie Mellon, publicado no periódico contábil mais reconhecido, The Accounting Review, sobre um tema “quente”, evasão fiscal, foi questionado e, finalmente, retirado por conta das dúvidas sobre a validade dos dados (fonte das informações a seguir: Retraction Watch).

O resumo do artigo publicado é o seguinte:

We implement a regression discontinuity design to examine the effect of institutional ownership on tax avoidance. Positive shocks to institutional ownership around Russell index reconstitutions lead, on average, to significant decreases in effective tax rates (ETRs) and greater use of international tax planning using tax haven subsidiaries. These effects are smaller for firms with initially strong governance and high executive equity compensation, suggesting poor governance as an explanation for the undersheltering puzzle, and appear to come about as a result of improved managerial incentives and increased monitoring by institutional investors. Furthermore, we observe the largest decreases among high ETR firms, and increases for low ETR firms, consistent with institutional ownership pushing firms towards a common level of tax avoidance.

A questão sobre o artigo levou mais de um ano, após uma longa discussão sobre a existência de problemas na análise dos dados. Em janeiro de 2018, em uma edição do Econ Journal Watch, Alex Young, da North Dakota State University, tentou reproduzir os dados do artigo publicado em 2017 e uma versão da pesquisa de 2015. Voltando no tempo, em outubro de 2015, Young participou de uma apresentação de uma versão do artigo. Ele questionou um dos autores, Bird, sobre alguns aspectos da pesquisa. Quando o artigo foi publicado, Young percebeu que algumas especificações tinham mudado, “corrigindo” os pontos levantados na conferência, mas os dados eram os mesmos em todas as tabelas.

Young encaminhou um e-mail para Bird lembrando da conversa que teve com ele em 2015 e solicitando os dados e códigos. Dois dias depois, Karolyi respondeu brevemente, ignorando o pedido. Em maio, Young encaminhou um e-mail para um editor da The Accounting Review, indicando as preocupações. Quatro dias depois, o editor encaminhou uma mensagem para o editor sênior. Em novembro, o editor da Econ Journal Watch mandou um e-mail para os pesquisadores, solicitando o compartilhamento dos dados. A resposta ocorreu no dia seguinte, mas os dados não foram compartilhados. O editor da Econ Journal Watch repetiu a solicitação, que foi recusada.

No mesmo mês, a professora Mary Barth, editora sênior da The Accounting Review, enviou um e-mail para Young para dizer que estava iniciando uma investigação de possível desvio de conduta por parte dos autores.

Em janeiro de 2018, após a publicação do artigo de Young no Econ Journal Watch, Bird e Karolyi, os autores do artigo, afirmaram que Young tinha reproduzido as principais descobertas dos autores. Informaram que, em resposta as acusações de Young, afirmaram que as versões distintas da pesquisa, entre 2015 e 2017, foi decorrente de uma revisão de uma descrição potencialmente confusa da metodologia.

Mas a explicação dos autores parece não ter convencido a The Accounting Review, que decidiu retirar o artigo, colocando o seguinte aviso:

(...) os autores não conseguiram fornecer os dados e o código originais solicitados pelo editor que reproduzem os resultados, conforme mostrado nas tabelas do artigo, apoiando esta afirmação. Assim, o artigo foi recolhido.

Publicar ou perecer

O nome é infeliz, mas o assunto é importante: a publicação de pesquisadores em "revistas predatórias", ou seja, periódicos internacionais onde o critério de publicação é frouxo, é reduzido entre os brasileiros, mas a prática está crescendo. Menos de 1% doas artigos foram publicados nestes periódicos.

A determinação de uma "revista predatória" também é controverso. Há uma listagem de 1,5 mil publicações suspeitas, o periódico não fazer parte do Doaj e a inexistência de fator de impacto no Journal Citation Reports.

Embora a penetração das revistas predatórias seja restrita, o estudo apontou motivos de preocupação. Um deles é que vem crescendo o número de autores brasileiros que recorrem a esses periódicos. “Entre 2010 e 2015, triplicou o número de artigos de brasileiros em revistas listadas por Jeffrey Beall”, diz o engenheiro Denis Borenstein, especialista em pesquisa operacional aplicada, um dos autores do estudo. O dado mais delicado, porém, é que várias revistas apontadas como predatórias estavam presentes no sistema Qualis Periódicos, da Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (Capes), que classifica cerca de 30 mil publicações para avaliar a produção científica dos programas de pós-graduação do Brasil. “Em todas as áreas do conhecimento, havia revistas recomendadas pelo Qualis que se encaixam nos três critérios adotados por nós para identificar práticas predatórias. Nenhuma delas têm conceito elevado, mas o fato de valerem algo na avaliação estimula pesquisadores a submeterem artigos a elas”, explica Borenstein.


Um aspecto interessante é a questão da idade do pesquisador:

O estudo fez outras constatações. Não se confirmou a ideia de que pesquisadores jovens e inexperientes são o público principal desses periódicos. Observou-se que, quanto mais antigo era o título de doutor, maior era a probabilidade de o autor publicar em títulos suspeitos. “A má conduta está associada a pesquisadores experientes, que possivelmente têm conhecimento das práticas levianas, mas acham que podem se beneficiar delas.”

Ciência e preprint

A velocidade dos tempos modernos não está sendo acompanhada pelo processo de divulgação científica. O tempo entre o "fazer" e a "divulgação" do conhecimento científico é muito longo. Uma solução seria o preprint:

Para a América Latina, modelos como o preprint não apenas permitem solucionar um problema sobre a gestão do tempo e a gestão do trabalho acadêmico, como tende a equilibrar as desigualdades geradas sobre a publicação científica de um modelo tradicional cuja decisão do editor é soberana.

Tenho dúvidas se a forma como estamos fazendo o preprint nos periódicos de contabilidade resolvem o problema do tempo apontada.

Links

EUA e Inglaterra querem identificar os proprietários de Bitcoin

Periódico com Twitter em maior número de citações

Streaming está matando a música?

O custo com o Pokemon Go (em acidente de trânsito)

Efeito de um banco no crescimento econômico de uma cidade

Propaganda da ING que usa ilusão de ótica

Poder de síntese

O American Economic Review é um dos periódicos mais importantes na área de economia. Agora, o AER está lançando o AER Insights. Uma publicação interessante, que tem o seguinte propósito: publicar textos que possuam uma importante contribuição que pode ser apresentada de forma concisa.

Muitas descobertas importantes são as que exisgem poucas linhas. O texto de Samuelson sobre a eficiência possui três páginas, publicado em 1954. A descrição do DNA, de Watson e Crick, foi publicada em 1953 com duas páginas.

Além disto, uma das propostas do periódico é responder aos autores em no máximo três meses. E as respostas serão rejeição ou aceitação condicional, sem um texto longo nem uma segunda rodada. Os autores também terão um prazo mais curto. O texto deve ter menos de seis mil palavras e no máximo cinco figuras ou tabelas. Isto corresponde a 15 páginas de espaço dois num editor de texto. Ou um terço de um artigo normal publicado na AER.

Avaliação baseada em classificação dos periódicos marginalizam regiões e temas

Uma prática comum em muitos sistemas de avaliação de pesquisa é avaliar o valor de um trabalho baseado no periódico em que é publicado. Essas avaliações baseiam-se no pressuposto de que a pesquisa publicada em revistas de prestígio ("topo") é excelente e, portanto, deve ser recompensada. A declaração DORA e o Manifesto de Leiden advertiram contra esta prática, mas os sistemas de avaliação baseados em periódicos continuam a ser usados ​​em muitos países como a Espanha, o Brasil, a Colômbia, a África do Sul e em rankings globais influentes(...)

Um estudo mostra que os sistemas de avaliação de pesquisa baseados em periódicos subestimam a pesquisa que é relevante para importantes questões sociais, econômicas e ambientais, marginalizando assim alguns tipos de conhecimento. Por exemplo, horticultura de maracujá, doenças de palmeira de óleo, patógenos específicos que atacam cravos vermelhos, os estudos botânicos de biodiversidade e a história comercial latino-americana são assuntos publicados principalmente em revistas que obtêm baixa classificação. Como esses tópicos não se encaixam em idéias de excelência, eles recebem pouco reconhecimento e recursos governamentais e não são considerados desejáveis ​​na perspectiva da responsabilidade pública. No entanto, essas questões são essenciais para o desenvolvimento econômico, ambiental e social de regiões como a América Latina.

Outro estudo mostra que a inclusão de periódicos nas mais prestigiadas bases de dados de citações, a Web of Science (WoS), não se baseia em critérios objetivos. Especificamente, o estudo mostra que o país, a linguagem e a disciplina de um periódico influenciam a probabilidade de inclusão, independentemente da sua qualidade editorial ou impacto científico. (...)

Fonte: Aqui (grifo nosso)

Links

É possível salvar o peer review?

Pescador queria indenização da CHESF por falta de peixes no São Francisco

TCU condena ex-gestores da Petrobras pela compra de Pasadena e finalmente irá fazer auditoria no Sistema S

40% das formigas, símbolo do trabalho, não fazem nada

Seu app está deixando você miserável (gráfico)