php压缩过滤html等代码文件tokens数量方便安全检测代码
代码语言:php
所属分类:其他
代码描述:php压缩过滤html等代码文件tokens数量方便安全检测代码,节省token成本
代码标签: php 压缩 过滤 html 代码 文件 tokens 数量 方便 安全 检测 代码
下面为部分代码预览,完整代码请点击下载或在bfwstudio webide中打开
<?php
/**
* 专门为 AI 审计准备的文本清洗函数 (PHP 5.6+)
* 目标:保留核心语义,剔除冗余 Tokens
*/
function cleanContentForAI($text) {
if (empty($text)) return '';
// 1. 剔除不可见的危险/无用标签及其内容
// script, style, head, noscript, iframe (这些通常不含用户可见文字,或 AI 难以根据代码审计违法)
$text = preg_replace('/<(script|style|head|noscript|ifra.........完整代码请登录后点击上方下载按钮下载查看















网友评论0