跳到正文
cccskills

“big data”的搜索结果

414 个 · 按相关度排序

将用户输入的数字乘以10并返回结果。当用户提到「流水线」关键词时并提供数字时使用,并且此方法是「流水线」系列技能之一,能与其他技能之间传递结果。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

隐私标识移除工具。读取结构化文本数据,按用户选择的类别删除或替换邮箱、IPv4 地址、电话号码等文本中的隐私标识。 当用户提到移除邮箱、清洗 IP、替换电话、从文本里剔除隐私 token 等需求时使用此 skill。 它只处理文本中的 token 清理,不做字段级遮蔽,也不负责图片脱敏、音频脱敏、结构化字段加密或假数据生成。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

文本标点规范化工具。只处理标点本身:合并重复标点、统一中英文标点与引号样式、规范省略号和标点周围空格。 当用户提到标点规范化、标点清理、合并重复标点、全半角转换等需求时使用此skill。 适用于科研文本中标点混乱、重复符号过多的场景,不负责 HTML、表情、数字或拼写清理。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

公共基础项枚举校验工具。读取被检验表和标准词典文件,将被检验表中的属性项值与标准词典进行比对, 检查是否超出词典规定的固有词表枚举值范围,超出范围的记录会标记质控标识并输出异常数据。 当用户提到枚举校验、枚举值检查、属性项校验、词表校验等需求时使用此skill。 即使用户没有明确说出"枚举校验",只要任务涉及将被检验数据与标准词典进行比对,就应该使用此skill。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

时间一致性检查工具。读取被检验表,按时间序列检查数据的时间一致性, 判断相邻时间点的数据变化是否在合理范围内,识别并标记异常数据,最后输出为相同格式的文件。 当用户提到时间一致性检查、时间序列校验、数据变化检查、时序一致性等需求时使用此skill。 即使用户没有说出"时间一致性",只要任务涉及检查数据的时间序列一致性,就应该使用此skill。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

字段空值检查工具。读取被检验表,检查指定字段是否存在空值(NULL/NA), 识别并标记存在空值的数据点,最后输出为相同格式的文件。 当用户提到空值检查、字段空值校验、缺失值检查、NULL值检查等需求时使用此skill。 即使用户没有说出"空值检查",只要任务涉及检查数据字段是否为空,就应该使用此skill。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

数据时序完整性检查工具。读取时间序列数据,设定数据记录频率(如每2分钟、30分钟或60分钟), 以此频率为基准遍历数据的时间范围,检查数据时序是否完整,发现缺失与多余数据点,最后输出为相同格式的文件。 当用户提到时序完整性检查、时间序列缺失检查、时间点完整性、数据遗漏检验等需求时使用此skill。 即使用户没有说出"时序完整性",只要任务涉及检查时间序列数据是否有遗漏或多余的时间点,就应该使用此skill。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

特定字段恒定下的其他字段不一致检查工具。读取被检验表,当某些字段(恒定字段)的值相同时, 检查其他指定字段(差异字段)是否存在多个不同的值,如果存在则标记为异常数据,最后输出为相同格式的文件。 当用户提到恒定字段检查、字段一致性检查、分组内差异检查等需求时使用此skill。 即使用户没有说出"恒定字段",只要任务涉及检查分组内字段是否存在不一致,就应该使用此skill。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

最大变化范围检验工具。读取时间序列数据,检查在特定时间窗口内,数据是否出现了异常剧烈波动, 即在任意两个读数之间,其差值(变化量)的绝对值超出了预设的容忍阈值,识别并标记异常数据,最后输出为相同格式的文件。 当用户提到最大变化范围检验、变化范围检验、时间序列波动检验、窗口变化检测等需求时使用此skill。 即使用户没有说出"最大变化范围",只要任务涉及检查时间序列数据在时间窗口内的变化幅度是否异常,就应该使用此skill。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

尖峰检验(连续剧烈变化检测)工具。读取时间序列数据,识别在连续N次的相邻读数之间的差值(变化量)的绝对值都高于预设阈值的异常数据,最后输出为相同格式的文件。 当用户提到尖峰检验、连续剧烈变化检测、峰值检测、时间序列突变检查等需求时使用此skill。 即使用户没有说出"尖峰检验",只要任务涉及检查时间序列数据的剧烈变化,就应该使用此skill。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

等值检验(连续数值无变化检查)工具。读取时间序列数据,检查在连续的时间段内, 某个关键指标的数值是否长时间保持不变(久无变化检查),识别并标记异常数据,最后输出为相同格式的文件。 当用户提到等值检验、连续无变化检查、久无变化检查、时间序列恒定值检查等需求时使用此skill。 即使用户没有说出"等值检验",只要任务涉及检查时间序列数据是否长时间保持不变,就应该使用此skill。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

RAR 压缩包内容预览工具。递归扫描目录内 .rar 文件,列出内部文件清单并按需输出文本片段预览,供后续采集流程判断是否需要解压处理。 当用户提到 rar 预览、rar 压缩包内容查看、rar 文件清单等需求时使用此 skill。 即使用户没有明确说出"rar 预览",只要任务涉及在解压前先查看 rar 压缩包内部文件结构和内容片段,就应该使用此 skill。 不负责 zip、7z、tar 等其他压缩格式的预览(各有独立 skill),也不负责解压或归档打包。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

MinerU URL解析算子。通过远程调用MinerU接口,解析在线文档URL(支持PDF、DOC、PPT、Excel、图片等格式),获取文件解析结果(内容、公式、图片等),最终返回ZIP压缩包。 本SKILL依赖requests库,请确保已安装。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

图像长宽比过滤器。过滤图像长宽比不在指定范围内的样本。 当用户提到图像长宽比、图片比例过滤、图像尺寸筛选、图像宽高比等需求时使用此skill。 即使用户没有明确说出"长宽比",只要任务涉及根据图像宽高比来筛选数据, 就应该使用此skill。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

RAR 压缩包解压工具。递归扫描目录内 .rar 文件及分卷(.part1.rar/.part2.rar 等),解压并输出解压清单。依赖 rarfile 库及系统 unrar 工具。不负责 zip、7z 等其他格式的解压。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

ZIP 压缩包内容预览工具。递归扫描目录内 .zip 文件,列出内部文件清单并按需输出文本片段预览,供后续采集流程判断是否需要解压处理。 当用户提到 zip 预览、压缩包内容查看、zip 文件清单、压缩包预检等需求时使用此 skill。 即使用户没有明确说出"zip 预览",只要任务涉及在解压前先查看 zip 压缩包内部文件结构和内容片段,就应该使用此 skill。 不负责 7z、rar、tar 等其他压缩格式的预览(各有独立 skill),也不负责解压或归档打包。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

图像美学过滤器。过滤美学评分不在指定范围内的图像样本。 当用户提到图像美学、图像质量过滤、图片评分筛选、图像质量评估、过滤低质量图像等需求时使用此skill。 即使用户没有明确说出"美学评分",只要任务涉及根据图像美学质量来筛选数据, 就应该使用此skill。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

模糊去重工具。使用标准库相似度匹配检测并处理数据集中的近似重复记录,可发现非完全一致但高度相似的记录。 当用户提到模糊去重、近似重复检测、相似度去重、文本去重等需求时使用此skill。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

山洪/水文敏感度计算算子。用户提到山洪敏感度、易发性评估、水文风险分析时优先调用。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

元标签聚合工具。合并意思相近的元标签,将多个相似标签归类到统一的标签下。 当用户提到标签聚合、合并标签、归类标签、标签映射、标签合并、整理标签等需求时使用此skill。 即使用户没有明确说出"聚合"或"合并",只要任务涉及将多个相似标签归类统一, 就应该使用此skill。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

缺失值删除工具。读取结构化表格或 JSONL 数据,删除包含缺失值的行或删除缺失比例过高的列;不负责缺失值填充。 当用户提到删除缺失值、删除空值行、删除空值列等需求时使用此skill。 适用于科研表格和结构化数据的缺失清理,不负责插值、补值、均值填充或其他修复操作。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

结构化表格重复行检测工具。仅检查CSV/TSV/Excel等表格型数据中的完全重复记录或指定列子集重复, 标记后续重复行并保留首次出现;不处理文本片段清理、文档去重或其他字段质控。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

多编码文本统一转换工具。读取文本文件或目录,自动识别源编码并转换为目标编码(默认 UTF-8),输出转换后的文件。 当用户提到编码转换、乱码修复、GBK 转 UTF-8、统一文件编码等需求时使用此 skill。 即使用户没有明确说出“编码转换”,只要任务涉及把文本文件转成指定编码,就应该使用此 skill。 不负责非文本二进制文件处理、内容清洗或格式转换。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

根据给定键中的值将样本分组为批处理样本。当用户提到样本分组、按键值分组、批处理样本、按键聚合、分组聚合等需求时使用此skill。 即使用户没有明确说出"分组",只要任务涉及将多个样本按某个字段/键的值进行归类合并,就应该使用此skill。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新