Em agosto de 2024, a Grammarly lançou seu detector de conteúdo de IA depois de chamar os verificadores de IA de "não confiável".
O Grammarly tem a confiança de mais de 30 milhões de pessoas em todo o mundo.
Ele é conhecido por ajudar a corrigir a ortografia, a gramática, o estilo e o tom em vários dispositivos e plataformas.
Por esse motivo, as pessoas ficaram entusiasmadas quando o Grammarly adicionou uma ferramenta para detectar conteúdo escrito por IA.
Agora temos que verificar se o AI Checker do Grammarly resolve os problemas que eles criticaram?
O verificador de IA do Grammarly é preciso?
Ou seremos específicos.
O Grammarly AI checker é confiável?
Neste blog, testaremos o verificador de IA do Grammarly em seis tipos diferentes de conteúdo para ver se ele realmente funciona bem.
Mostraremos exatamente onde ele é bem-sucedido, onde falha e se você pode confiar nele para suas necessidades de verificação de conteúdo.
Principais conclusões
- O verificador de IA da Grammarly obteve apenas 33% de precisão em nossos testes com 6 tipos de conteúdo.
- A ferramenta identificou corretamente o conteúdo humano do 100%, mas não conseguiu detectar o texto totalmente gerado por IA.
- O verificador de IA do Grammarly é preciso? Com base em nossos testes, o detector tem dificuldades com o conteúdo de IA parafraseado e com a escrita mista de humano e IA.
- Os usuários gratuitos têm um limite de 1.000 palavras por envio, enquanto os usuários premium têm limites mais altos.
- Ferramentas mais especializadas, como Detector de IA indetectável (precisão de 100%) são muito mais confiáveis do que a versão gratuita do verificador de IA Grammarly.
O que é o Grammarly AI Checker?
O Grammarly AI Checker foi projetado para ajudá-lo a identificar se um texto pode ter sido gerado por IA.
O detector é incorporado diretamente no A plataforma existente da Grammarlypara que funcione junto com suas ferramentas de gramática, ortografia e estilo.
Veja como foi a implementação do verificador de IA da Grammarly:
Nunca mais se preocupe com a detecção de seus textos pela IA. Undetectable AI Pode lhe ajudar:
- Faça sua escrita assistida por IA aparecer semelhante ao humano.
- Bypass todas as principais ferramentas de detecção de IA com apenas um clique.
- Uso IA com segurança e com confiança na escola e no trabalho.
- Agosto de 2024: Lançamento oficial do detector de IA
- Setembro de 2024: Versão beta lançada para o Google Docs
- Início de 2025: Mais recursos a caminho, especialmente para educadores
Esse recurso faz parte do esforço mais amplo do Grammarly para "Grammarly Authorship". IÉ a maneira de defender a escrita autêntica e humana em uma época em que a IA está em toda parte.
Para quem é essa ferramenta?
- Alunos e professores.
- Criadores de conteúdo e profissionais de marketing.
- Escritores profissionais.
Como o detector faz parte da plataforma principal do Grammarly, é muito mais fácil de usar do que um detector separado. Ferramentas de verificação de IA.
Se você já usa o Grammarly, esse recurso se encaixa perfeitamente no seu fluxo de trabalho - não é necessário copiar e colar em outro site.
Principais recursos do Detector de IA do Grammarly
Aqui estão os recursos de destaque do verificador de IA da Grammarly:
- Grammarly AI checker free O plano analisa até 1.000 palavras. O Premium oferece limites mais altos e mais ferramentas.
- Totalmente incorporado aos aplicativos da Grammarly para web, desktop e dispositivos móveis - sem necessidade de ferramentas adicionais.
- Mostra uma probabilidade percentual de conteúdo gerado por IA.
- Funciona em extensões de navegador, aplicativos de desktop e dispositivos móveis.
- Detecta conteúdo de IA instantaneamente enquanto você escreve.
Como funciona o verificador de IA da Grammarly
O verificador de IA da Grammarly funciona detectando padrões que são comuns em conteúdo escrito por IA.
Ele analisa aspectos como a forma como as frases são construídas, o estilo da escrita e as estruturas linguísticas repetidas.
A ferramenta usa aprendizado de máquina.
Isso significa que ele foi treinado com muitos exemplos para reconhecer como a escrita de IA geralmente se parece.
A Grammarly diz que usa "testes rigorosos" para garantir que a ferramenta seja direcionalmente precisa - boa em identificar a provável IA, mesmo que não seja perfeita.
Mas até que ponto o desempenho do verificador de IA do Grammarly é confiável na prática? Ele funciona melhor com textos mais longos.
As passagens curtas não fornecem dados suficientes para análise, portanto, os resultados podem ser menos precisos.
Como está integrado à plataforma do Grammarly, ele também usa os mesmos sistemas que verificam a gramática e o estilo.
Isso o ajuda a entender o fluxo geral de sua escrita.
Mas há uma desvantagem: como não é um detector de IA dedicado, ele pode deixar passar coisas que as ferramentas especializadas são melhores em detectar.
O Grammarly AI Checker é preciso?
Para avaliar se o verificador de IA do Grammarly é preciso ou não, usamos Estrutura da ZDNet.
Essa metodologia analisa seis categorias de conteúdo distintas para medir o desempenho no mundo real.
O teste: 6 categorias de conteúdo
Testamos o verificador de IA que a Grammarly oferece em relação a seis tipos de conteúdo:
| Categoria | Tipo de conteúdo |
| 1 | 100% AI |
| 2 | 100% Humano |
| 3 | IA levemente editada |
| 4 | IA parafraseada |
| 5 | Misto de humano + IA |
| 6 | IA com plágio |
Vamos ver o desempenho do verificador de IA da Grammarly em cada categoria:
Categoria 1: 100% AI
Realidade: Totalmente gerado por IA
Resultado do Grammarly: 50% AI
Veredicto: Detecção incorreta
Esse conteúdo foi gerado inteiramente pelo ChatGPT, sem nenhuma edição humana.
O verificador de gramática de IA deveria ter sinalizado isso como altamente gerado por IA, mas detectou apenas a probabilidade de IA 50%.
Categoria 2: 100% Human (Anúncio clássico)
Realidade: Escrito por humanos
Resultado do Grammarly: 0% AI (100% Humano)
Veredicto: Detecção correta
O conteúdo foi escrito décadas antes da existência de ferramentas de IA. O verificador de IA Grammarly identificou corretamente que o conteúdo foi totalmente escrito por humanos.
Categoria 3: IA levemente editada
Realidade: Principalmente IA com o mínimo de edições humanas
Resultado do Grammarly: 25% AI
Veredicto: Detecção incorreta
Apenas 20-25% desse conteúdo recebeu edição humana. O verificador de IA Grammarly subestimou significativamente o envolvimento da IA.
Categoria 4: Conteúdo de IA parafraseado
Realidade: Origem da IA, parafraseada para parecer humana
Resultado do Grammarly: 33% AI
Veredicto: Detecção correta
Esse conteúdo foi originalmente gerado por IA e depois parafraseado usando ferramentas de humanização. O verificador de IA da Grammarly detectou alguns traços de IA.
Categoria 5: Conteúdo misto de humano e IA
Realidade: 50% escrita humana + 50% frases geradas por IA
Resultado do Grammarly: 20% AI
Veredicto: Detecção incorreta
Com partes iguais de conteúdo humano e de IA, o verificador de IA da Grammarly deveria ter detectado cerca de 50% de envolvimento de IA, e não 20%.
Categoria 6: IA com plágio
Realidade: Escrito por IA com sobreposição histórica factual
Resultado do Grammarly: 25% AI
Veredicto: Detecção incorreta
Esse era um conteúdo totalmente gerado por IA que, por acaso, incluía algumas informações historicamente precisas. O verificador de IA da Grammarly não detectou totalmente a geração de IA.
Tabela de pontuação final
De um total de 6 casos de teste:
- Detecções corretas: 2 (Categorias 2 e parcialmente 4)
- Falsos positivos/negativos: 4 (Categorias 1, 3, 5, 6)
Precisão de detecção: 33%
O verificador de IA da Grammarly mostra confiabilidade limitada, identificando com precisão o conteúdo em apenas um terço das vezes.
Embora seja excelente no reconhecimento de conteúdo puramente humano, ele subestima consistentemente o envolvimento da IA em todas as outras categorias.
Esse desempenho destaca um problema crítico: o verificador de IA Grammarly não é apenas não confiável, mas perigosamente enganoso para os usuários que precisam de uma detecção precisa de IA.
Portanto, para sua própria verificação de conteúdo...
Uso Detector de IA indetectável para obter resultados 100% precisos. Nos próprios testes da ZDNet, esse detector de IA identificou corretamente todas as seis categorias sem falsos positivos e negativos.
Você também pode aplicar nosso Humanizador de IA indetectável para reescrever as seções sinalizadas até que elas pareçam genuinamente humanas.
Teste novamente com vários detectores para confirmar que seu conteúdo é aprovado em diferentes plataformas
Pontos fracos e limitações do Grammarly AI Checker
Aqui estão as principais maneiras pelas quais o verificador de IA da Grammarly não atinge o objetivo:
Problemas de precisão
- Às vezes, ele ignora o conteúdo que foi claramente escrito por IA.
- Quando ele dá pontuações baixas de IA, pode fazer você pensar que o conteúdo é mais original do que realmente é.
- Os resultados não são consistentes - a precisão muda de acordo com o tipo de conteúdo e o modelo de IA que o criou.
Limitações técnicas
- Os usuários gratuitos só podem escanear até 1.000 palavras de cada vez.
- Ele é otimizado para o inglês e não lida bem com outros idiomas.
- A escrita casual, criativa ou informal pode confundi-lo.
- Ele tende a ficar mais lento ao analisar textos mais longos.
Desvantagens práticas
- Não é possível fazer upload ou verificar vários documentos de uma só vez.
- Ele não faz distinção entre conteúdo editado e escrito por IA.
Principais desafios
- A ferramenta está lutando para acompanhar a rapidez com que a IA está evoluindo.
- Os modelos de IA mais recentes podem facilmente passar despercebidos por sua detecção.
- O conteúdo misto, no qual os humanos editam ou expandem o resultado da IA, geralmente passa despercebido.
Grammarly AI Checker vs. outros detectores de IA
Quando se trata da precisão da detecção de IA, o verificador de IA do Grammarly tem dificuldades para acompanhar as ferramentas projetadas especificamente para essa tarefa.
Veja a seguir o desempenho dos principais detectores em nossos testes:
| Ferramenta | Precisão | Recurso de destaque | Fraqueza | Preço/Mês |
| Gramática | 33% | Integração perfeita com a plataforma de escrita | Taxas de precisão perigosamente baixas | $12 |
| Undetectable AI | 100% | Humanizador de IA para contornar detectores | Uso gratuito limitado | $19 |
| Copyleaks | 50-80% | Suporte multilíngue (mais de 30 idiomas) | Menos preciso com os modelos de IA mais recentes | $17 |
| GPT Zero | 100% | Pontuação de probabilidade de IA frase a frase | Nível gratuito limitado | $15 |
| IA do StealthWriter | 50% | Reescreve o texto da IA para parecer escrito por humanos | Pode alterar o significado original | $20 |
Observação: Realizamos análises abrangentes de ambos Copyleaks e IA do StealthWriter usando a mesma metodologia de teste.
A Grammarly pode detectar textos editados por IA ou parafraseados?
É nesse ponto que o verificador de IA Grammarly mostra seus maiores pontos fracos.
Desempenho do conteúdo de IA parafraseado
Em nossos testes, o Grammarly AI Checker detectou apenas 33% AI em conteúdo que foi originalmente gerado por 100% AI, mas parafraseado usando ferramentas de humanização.
Isso significa que qualquer pessoa que use ferramentas de parafraseamento de IA ou software humanizador de IA pode facilmente ignorar a detecção do Grammarly AI Checker.
Desafios do conteúdo editado por IA
O verificador de gramática com IA tem ainda mais dificuldades com o conteúdo editado por IA - texto que começa como humano, mas recebe aprimoramento ou expansão de IA.
Nosso "IA levemente editada" A categoria mostrou apenas 25% de detecção de IA quando a realidade era de 75-80% de envolvimento de IA.
Ferramentas como Humanizador de IA indetectável e Parafraseador de IA são projetados especificamente para evitar a detecção. Em nossa última revisãoEm um teste de precisão, testamos a precisão das ferramentas do humanizador, e nossos testes mostraram que:
IA do StealthWriter: Redução da detecção de IA de 100% para 5% em vários detectores.
IA indetectável: Detecção de IA 1% alcançada após a humanização
Parafraseando o Quillbot: Ainda mostrava detecção de IA 76% (menos eficaz)
O resultado final: Se alguém quiser ignorar o Grammarly AI Checker, as ferramentas prontamente disponíveis tornam isso trivialmente fácil.
Acesse nosso Detector de IA e Humanizador diretamente pelo widget abaixo.
Perguntas frequentes sobre o Grammarly AI Checker
O Grammarly pode sinalizar o conteúdo do GPT-4?
Não de forma confiável. O verificador de IA Grammarly frequentemente diz que o conteúdo do GPT-4 é menos IA quando, na verdade, é totalmente IA.
Ele tem problemas para detectar texto de ferramentas avançadas como o GPT-4.
Como o Grammarly se compara ao Turnitin ou ao GPTZero?
O Grammarly é mais fácil de usar, mas muito menos preciso. Em nossos testes, o Grammarly obteve apenas 33%.
O GPTZero apresentou uma precisão de 99,8%, enquanto o Turnitin obteve uma pontuação entre 87-90% em outros testes independentes. Se a precisão for sua prioridade, o Grammarly fica aquém.
Os resultados da detecção da Grammarly podem estar errados?
Sim - com frequência. O verificador de IA da Grammarly não detecta o conteúdo da IA e pode tranquilizar falsamente os usuários de que o texto gerado pela IA é original.
Ele também sinaliza incorretamente alguns conteúdos técnicos escritos por humanos.
Conclusão
O verificador de IA do Grammarly é fácil de usar porque está integrado à plataforma do Grammarly, mas nossos testes mostram que ele não é muito preciso.
Ele foi preciso em 33% das vezes. Isso significa que ele frequentemente deixa passar conteúdo gerado por IA ou fornece resultados incorretos.
Então, o verificador de IA do Grammarly é suficientemente preciso?
Se você precisar apenas de uma verificação rápida e simples dentro do Grammarly, ele pode funcionar.
Se você realmente precisa determinar se algo foi escrito por IA, essa ferramenta sozinha não é suficiente - há outras opções com desempenho muito melhor.
A versão gratuita do verificador de IA Grammarly permite que você verifique textos curtos, e a versão paga oferece mais recursos, mas nenhuma delas corrige o problema de precisão.
Se você precisa confiar nos resultados, é melhor usar ferramentas confiáveis como Detector de IA indetectável para precisão de 100%.