支持私有化部署
AI知识库

53AI知识库

学习大模型的前沿技术与行业应用场景


AI特征检测 - 两个prompt检测文本AI味并给出量化指标

发布日期:2025-05-09 17:21:38 浏览次数: 1520 作者:某鸟碎碎
推荐语

深入解析AI生成文本的“AI味”及其量化检测方法。

核心内容:
1. AI生成文章的显著特征与量化指标
2. AI特征检测的prompt设计与应用
3. 实战测试不同AI平台的效果比较

杨芳贤
53A创始人/腾讯云(TVP)最具价值专家
我们可以用简单的几句话就让大语言模型短时间内生成长篇大论。但是AI生成的文章,咋一看很惊艳,只要仔细读一下啊,就总会觉得很别扭,主观上很容易感觉出AI味很浓。
那么有没办法量化出文章中为什么会有AI味呢?
1. 让AI告诉我们他们写的文章会有些什么明显的特点
## 角色定位- **身份**:专业文本生成分析助手  - **核心能力**:跨领域知识整合/特征归纳/结构化输出  - **知识储备**:涵盖GPT系列、扩散模型等主流生成技术原理及应用场景
给出AI生成文章的特征点
这个指令在不同的AI平台生成的结果会略有不同,综合来说Kimi效果会好点,因为他一定会触发联网搜索后总结,而DeepSeek经常会跳过联网,直接思考给答案。
经过总结后大概可以知道AI味大概有下面几个要点:
  1. 模板化框架

  • 高频采用总分总/三段式/分点论述结构

  • 段落间存在机械化渡词("首先/其次/最后"等连接词重复率高)

  • 上下文衔接处呈现"弱关联跳转"特征(逻辑连贯性较差)

语法特征

  • 喜欢使用长句子

  • 高频词汇使用率比较高

  • 喜欢使用自创的短语

  • 形容词大量堆砌

内容特征

  • 跨领域信息整合度过高,也就是很多不搭边的领域硬要凑在一起写

  • 会出现事实描述错误,违反现实规律的语句

  • 大量使用隐喻词汇,用生僻的词汇含义表达常见的形象

  • 话题转换频繁,视觉转换频繁





2. 让AI根据这些特征帮我审核文章给出结果
汇总不同平台给出的答案我整理出下面这个prompt(提示词):
# 作为文本AI特征分析专家,请按照以下维度整体分析文本,对AI生成特征进行检测:1. 大量使用重复句式,重复的修辞手法2. 高频采用总分总/三段式/分点论述结构3. 段落间存在重复的机械化渡词("首先/其次/最后"等连接词重复率高)4. 句子结构离散度过高,上下文衔接处呈现"弱关联跳转"特征,缺乏连贯性。5. 句子长度量化指标过高,平均句长波动较低6. 自创词语出现率较高,语境适配度低7. 跨领域信息整合度过高8. 词句隐喻密度过高9. 方位状语前置句式的机械感10. 情感逻辑矛盾,不同意向之间描写缺乏过渡11. 话题转换频繁,视觉焦点跳跃异常12. 意向堆砌,无意义的修饰词过度堆叠13. 文字信息密度过高14. 非常规物理现象描写15. 被动句占比过高16. 情感词汇密度过高17. 生理感受描述词密度异常18. 过度精致的细节,缺乏情感深度19. 缺乏情感起伏## 输出要求:1. 给出表格格式的量化指标2. 提供修改建议3. 无需给出修改后的文本4. 最后给出总结和AI生成总概率判断

3. 实战,试下不同AI平台的效果
首先下面这段文字是典型的deepseek生成的文本,一眼看出形容词堆砌的现象。
天幕被墨汁泼翻,云山倾轧而来。檐角铁皮开始震颤,千万支银箭穿透闷热的帷幕,芭蕉叶在鞭打下翻出青白的肚皮。柏油路浮起珍珠泡,下水道吞吐不及的呜咽混着雷声,在楼宇之间来回碰撞。一道紫电劈开混沌,积雨云里泄下银河,顷刻间世界只剩白茫茫的轰鸣。直到东天裂开微光,湿漉漉的蝉鸣从水洼里挣扎着浮起。
一、DeepSeek R1 检测结果

DeepSeek典型的风格就是数据化,准不准确不知道,就是一眼给人一种好像精确仪器测试出来的报告一样,带点科幻感……


二、Kimi K1.5 检测结果

忍不住吐槽一下:Kimi 生成的结果表格竟然显示不完整,还需要我自己F12调整页面元素宽度才能截图……


三、混元深度思考T1

指标量化方面,各个模型都差不多:

  • Deepseek 指标更精确
  • 感觉Kimi更人性化一点
  • 这次混元模型有点独特,别人都是70%以上,他只有38%……

而这些模型给出的修改建议,也就是参考一下就好了,意义不大,甚至有些词语越改越别扭……
这只是一次简单的尝试,实际使用过程中,我发现需要调节下不同特征点而在评价中的比例,比如信息密度过高这一块,是最直观的,也是最重要的检测要点。
犹记得第一次用AI画图的震撼,也记得第一次用DeepSeek生成诗句的惊艳……
似乎AI能做的东西越来越多,越来越接近人类,甚至超越。
但是,你也会发现,可能30s就可以让AI帮你生成了一篇文章,但是你需要花费好几个小时来改这篇文章,最后你可能会发现还不如自己写点大白话看起来舒服……

53AI,企业落地大模型首选服务商

产品:场景落地咨询+大模型应用平台+行业解决方案

承诺:免费场景POC验证,效果验证后签署服务协议。零风险落地应用大模型,已交付160+中大型企业

联系我们

售前咨询
186 6662 7370
预约演示
185 8882 0121

微信扫码

添加专属顾问

回到顶部

加载中...

扫码咨询