Interpretação de nossas pontuações de detecção de IA

Metodologia

A Winston AI é o detector de conteúdo gerado por IA mais poderoso do mundo. Nosso software é treinado em enormes quantidades de dados gerados pelas ferramentas de geração de texto de IA mais amplamente usadas, incluindo ChatGPT, Claude, Google Gemini, Llama e muito mais. Em paralelo, treinamos nosso software em conteúdo gerado por humanos.

Além disso, a Winston usa vários algoritmos de reconhecimento de padrões para detectar conteúdo gerado por IA.

Com base nesses elementos e em nossos testes, nossa ferramenta foi capaz de prever com 99,98% de precisão se um determinado texto foi gerado por uma ferramenta de IA.

Quando nossa ferramenta processar o conteúdo, ela retornará uma probabilidade (0-100%) de que o texto foi gerado por inteligência artificial.

É importante observar que essa é uma abordagem probabilística.

Nossa equipe está sempre acompanhando os novos modelos de geração de idiomas, portanto, você pode ter certeza de que nossa ferramenta está e continuará atualizada com os últimos desenvolvimentos e inovações.

Métodos usados pela Winston:

Há vários métodos que essas ferramentas usam para identificar se um texto foi criado por inteligência artificial (IA) ou não.

As duas principais categorias para detectar esses textos são a análise linguística e a comparação com textos gerados por IA conhecidos anteriormente.

  1. Análise linguística: Envolve a análise das características do texto, como o significado semântico e a repetitividade, que podem indicar se ele foi gerado por IA.
  2. Treinamento de dados: Da mesma forma, se um texto tiver semelhança com um texto conhecido gerado por IA, isso também pode sugerir que ele foi gerado por IA.

Na análise linguística, há dois elementos importantes que revelam se um determinado conteúdo é gerado por IA ou por humanos: Perplexidade e Exuberância.

-Perplexidade: A perplexidade é uma métrica que mede a eficácia de uma distribuição de probabilidade ou de um modelo de linguagem na previsão de uma determinada amostra. No âmbito da detecção de conteúdo gerado por IA, a perplexidade pode servir como uma ferramenta para avaliar a proficiência de um modelo de linguagem de IA e determinar se um texto é gerado por máquina ou escrito por humanos.

Se o texto for gerado por IA, o valor de perplexidade será menor, pois o modelo já teria encontrado padrões semelhantes nos dados usados para seu treinamento. Por outro lado, se o texto for mais complexo, é mais provável que tenha sido escrito por um ser humano. Em outras palavras, quanto menor a pontuação de perplexidade, maior a probabilidade de o texto ter sido gerado por IA.

-Burstiness: O texto gerado por IA tem um estilo distinto que difere do dos humanos. Como esses modelos são treinados em um conjunto de dados, eles tendem a empregar palavras e frases específicas com mais frequência do que os humanos. Esse padrão pode ser usado para identificar se um texto foi criado por uma IA.

Quando um texto apresenta um conjunto de palavras e frases que se repetem em um curto espaço de tempo, há uma boa chance de que ele tenha sido gerado por uma IA. Por exemplo, um texto gerado por IA pode apresentar falta de variação ou uso excessivo de termos específicos. Isso pode ser atribuído à tendência do modelo de repetir as palavras e frases mais comumente usadas em seus dados de treinamento.

Portanto, ao analisar o estilo de linguagem do texto, é possível discernir se ele foi gerado por IA ou escrito por um ser humano.

Em conclusão, embora nossa avaliação do conteúdo não seja obrigatória, a Winston continua sendo a principal solução para detectar conteúdo de IA, sempre treinando seus dados em novos LLMs. Recomendamos que escritores, estudantes e criadores de conteúdo continuem a melhorar sua “explosão”, originalidade e perplexidade ao escrever.

Pontuação humana

O Human Score é uma métrica usada pela Winston AI para estimar a probabilidade de que um determinado conteúdo tenha sido gerado por uma ferramenta de IA em vez de ter sido escrito por um ser humano.

É importante observar que uma pontuação de 80% de humanos e 20% de IA não significa que apenas 20% do conteúdo foi gerado por IA; em vez disso, significa que a Winston tem um nível de confiança de 80% de que o conteúdo foi criado por um humano.

Nosso algoritmo leva em conta todos os elementos mencionados acima: Treinamento de dados em todas as ferramentas de IA generativas, análise linguística, perplexidade e explosão para processar seu texto e retornar uma análise preditiva altamente precisa.

Mapa de previsão de IA

O Winston ajuda a detectar textos gerados por computador, analisando sua previsibilidade e destacando palavras com base na probabilidade de elas aparecerem. As frases com menos de 60 caracteres são ignoradas. Prevemos a classificação das palavras e as codificamos por cores, da mais para a menos previsível. É importante observar que nosso software selecionará o texto que uma ferramenta de geração de texto de IA teria escrito se solicitado.

Esse mapa de previsão funciona independentemente de nossa Pontuação humana para ajudar a obter informações e avaliações adicionais sobre seu texto. O mapa de previsão pode destacar texto humano, mas isso não significa necessariamente que ele foi gerado por IA, mas sim que foi escrito de uma forma que qualquer ferramenta de geração de texto teria feito. O mapa de previsão deve ser usado em conjunto com o Human Score para que você obtenha mais clareza em uma avaliação.

Pontuação de legibilidade

A pontuação de legibilidade Flesch-Kincaid é, na verdade, composta de dois testes: o Flesch Reading Ease e o Flesch-Kincaid Grade Level. Ambos os testes trabalham juntos para avaliar a legibilidade de um texto, mas o fazem de maneiras ligeiramente diferentes.

1. Facilidade de leitura Flesch: esse teste calcula uma pontuação com base na duração média das frases e no número médio de sílabas por palavra em um texto. O resultado é um número que geralmente varia de 0 a 100, sendo que as pontuações mais altas indicam que o texto é mais fácil de ler. Por exemplo, uma pontuação de 90-100 sugere que o conteúdo é facilmente compreendido por uma criança de 11 anos, enquanto uma pontuação de 0-30 significa que é mais adequado para graduados universitários.

2. Nível da série Flesch-Kincaid: Esse teste também leva em conta o comprimento médio das frases e a contagem de sílabas, mas traduz o resultado em um nível de série escolar dos EUA. Por exemplo, uma pontuação de 8,0 significa que o texto é adequado para alguém da 8ª série.

Então, por que a pontuação de legibilidade Flesch-Kincaid é importante? Saber quão acessível é a sua redação pode ajudar você a adaptar o conteúdo ao seu público-alvo. Por exemplo, se você estiver escrevendo uma postagem de blog para um público geral, será necessário obter uma pontuação mais alta de facilidade de leitura e uma pontuação mais baixa de nível de classificação para garantir que seja fácil de entender. Por outro lado, se você estiver escrevendo um artigo técnico para especialistas em sua área, uma pontuação de facilidade de leitura mais baixa e uma pontuação de nível de classificação mais alta podem ser mais apropriadas.

Em resumo, a pontuação de legibilidade Flesch-Kincaid é uma ferramenta valiosa para que os redatores avaliem a acessibilidade de seu conteúdo. Ao manter a legibilidade em mente, você pode criar um texto envolvente e eficaz que atinja um público mais amplo e comunique suas ideias com mais clareza. Boa redação!

O Grammarly aciona detectores de IA?

O produto legado da Grammarly funciona como uma ferramenta de edição avançada, refinando textos por meio de correções gramaticais e estilísticas sem gerar novo conteúdo, portanto, normalmente não acionando detectores de conteúdo de IA como o Winston AI. No entanto, o GrammarlyGO é uma ferramenta de escrita com IA que responde às solicitações do usuário para criar composições originais. Essa capacidade de geração se alinha estreitamente com os marcadores identificados pelos algoritmos de detecção de IA, potencialmente categorizando a saída do GrammarlyGO como gerada por IA. Para obter mais informações, recomendamos que você leia nosso artigo sobre esse assunto: Os detectores de IA detectam o Grammarly?