跳到正文
原文
LINUX DO 最新· O·· 3 小时前AI 评分12

公司要求对过去的文本数据进行敏感过滤清洗

AI 导读

一名开发者需要对约 1 亿份中文评论进行敏感过滤清洗,正发帖求助借助大模型构建识别规则与获取 token 的方案。该任务要求整条屏蔽违规内容以避免误判,提问者考虑采用 GPT-6A 或 GPT-6.1SOL 等模型建立规则。针对本地缺乏算力且禁止使用中转站的限制,社区进一步探讨了向大厂商租用算力训练本地模型的处理路径。

来源:LINUX DO 最新 · linux.do