跳到正文
cccskills

“big data”的搜索结果

415 个 · 按相关度排序

pdf_merge

免费

将多个PDF文件合并为一个PDF文件。当用户需要合并PDF文档时使用此skill。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

从PDF文件中提取表格数据,输出为JSON格式。当用户需要从PDF中提取表格时使用此skill。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

Ray分布式文档去重工具。使用精确匹配(MD5哈希)在文档级别删除重复的样本,基于Ray分布式框架。 当用户提到文档去重、删除重复文档、样本去重、分布式去重、大规模数据去重等需求时使用此skill。 即使用户没有明确说出"Ray"或"分布式",只要任务涉及大规模文档去重处理, 就应该使用此skill。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

从CSV数据集中随机抽取样本。支持按比例(0-1)或固定数量抽取,当两者同时提供时取较小值。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

JSONL 随机采样工具。读取 JSONL 数据集,按抽样数量或抽样比例无放回抽取样本,输出保留原字段结构的采样结果。 当用户提到随机采样、按数量抽样、按比例抽样、JSONL 抽样筛查等需求时使用此skill。 即使用户没有明确说出"random_sampler",只要任务涉及对 JSONL 记录做无放回随机抽取,就应该使用此skill。 不负责分层采样、领域均衡采样、表格采样或其他格式转换。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

批量阈值检验-输入框工具。读取被检验表,将数据列的值与输入阈值条件中定义的上下限进行比对, 识别并标记超出允许范围(包括上限和下限)或为空值的数据点,最后输出为相同格式的文件。 当用户提到批量阈值检验、输入框阈值检验、多字段阈值检查、范围校验等需求时使用此skill。 即使用户没有明确说出"批量阈值输入框",只要任务涉及根据输入的阈值条件进行批量范围校验,就应该使用此skill。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

字段分布校验工具。读取结构化数据文件(CSV、TSV、Excel等),按模式检查数值字段统计特征或分类字段频率分布是否合理。 数值模式用于检查均值、标准差、中位数、分位数等统计量;分类模式用于检查类别数上限和单类占比是否异常。 当用户提到分布校验、统计特征验证、类别频率检查、类别倾斜检测等需求时使用此skill。 即使用户没有明确说出"分布校验",只要任务涉及验证字段整体分布是否偏移或失衡,就应该使用此skill。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

分子格式转换工具。支持在 .smi、.mol、.xyz、.gjf、.sdf 等格式之间转换,并可从 SMILES 或 2D 结构生成带坐标的 3D 结构。 当用户提到分子格式转换、3D构象生成、openbabel等需求时使用此skill。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

pdf_split

免费

将PDF按指定页码范围拆分为独立的PDF文件。当用户需要拆分PDF文档时使用此skill。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

PDF/OCR伪影清洗工具。修复从学术论文PDF提取文本时的常见问题:断行连字符拼接(dehyphenation)、 页码去除、Unicode连字归一化(fi→fi)、页眉页脚去除。 当用户提到PDF文本清洗、OCR伪影处理、断行修复、连字符拼接等需求时使用此skill。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

数值格式清洗工具。读取 JSONL 结构化数据,按字段规则统一单位、数值格式、范围和空值表达,输出规整后的 JSONL 和统计文件。 当用户提到数值格式化、单位统一、千分位、科学计数法、空值填充、数值规整等需求时使用此skill。 即使用户没有明确说出"数值格式清洗",只要任务涉及按字段规则整理数值表达,就应该使用此skill。 不负责文本去重、标点清洗、字段校验或非数值内容整理。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

无用数字字符清理工具。读取结构化文本数据,对指定或全部文本字段移除无语义的独立数字字符,输出清理后的结构化文件。 当用户提到无用数字字符清理、数字噪声删除、文本中的杂散数字清理等需求时使用此skill。 即使用户没有明确说出"number_noise_cleaner",只要任务涉及从文本中删除无业务意义的数字字符,就应该使用此skill。 不负责数值规整、字段校验或通用正则替换。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

嵌套聚合工具。将多个文档碎片整合成一个连贯的文档总结。 当用户提到文档摘要、整合文档、文档聚合、碎片整合、长文总结等需求时使用此skill。 即使用户没有明确说出"嵌套"或"聚合",只要任务涉及将多个短文档整合成一个总结, 就应该使用此skill。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

将批处理的样本拆分为独立样本。当用户提到样本拆分、拆分批次、批处理展开、反向分组等需求时使用此skill。 即使用户没有明确说出"拆分",只要任务涉及将批处理数据(字段值为数组)展开为独立样本,就应该使用此skill。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

将用户输入的整数减去5并返回结果。当用户提到「流水线」关键词时并提供数字时使用,并且此方法是「流水线」系列技能之一,能与其他技能之间传递结果。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

质量标识字段检测工具。检查数据表是否配置质量标识字段,验证标识字段的存在性、值规范性 (是否为预定义合法值)、非空完整性,标记不合格数据。 当用户提到质量标识检查、QC字段检测、标识字段合规等需求时使用此skill。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

将所有样本分组为一批样品。当用户提到样本合并、合并所有样本、一批分组、全部聚合等需求时使用此skill。 即使用户没有明确说出"合并",只要任务涉及将多个样本合并为单个批次,就应该使用此skill。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

使用 Multiwfn 波函数分析程序读取 Gaussian 生成的 .fchk 文件,提取 HOMO/LUMO、原子电荷、分子表面分析等信息。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

最相关实体聚合工具。从文档中提取与给定实体最相关的指定类型实体,并按重要性排序。 当用户提到提取相关人物、查找相关实体、排序实体、分析实体关系、提取主要角色等需求时使用此skill。 即使用户没有明确说出"最相关实体",只要任务涉及从文档中分析并提取与目标相关的实体, 就应该使用此skill。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

将用户输入的整数加10并返回结果。当用户提到「流水线」关键词时并提供数字时使用,并且此方法是「流水线」系列技能之一,能与其他技能之间传递结果。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

将用户输入的数字乘以10并返回结果。当用户提到「流水线」关键词时并提供数字时使用,并且此方法是「流水线」系列技能之一,能与其他技能之间传递结果。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

单字段多条件阈值检验工具。读取被检验表和阈值表,将指定字段的属性项值与阈值表中定义的多条件门限进行比对, 检查是否在门限范围内,不允许超出门限值(包括上限和下限)。不满足条件的数据会标记质控标识并输出异常数据。 当用户提到单字段阈值检验、多条件阈值检验、单字段多条件检查等需求时使用此skill。 即使用户没有说出"单字段多条件",只要任务涉及根据多个条件进行单字段阈值校验,就应该使用此skill。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

批量阈值检验工具。读取被检验表和阈值表,将数据列的值与阈值表中定义的上下限进行比对, 识别并标记超出允许范围(包括上限和下限)或为空值的数据点,最后输出为相同格式的文件。 当用户提到批量阈值检验、阈值表校验、多字段阈值检查、范围校验等需求时使用此skill。 即使用户没有明确说出"批量阈值",只要任务涉及根据阈值表进行多字段范围校验,就应该使用此skill。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新

数值关联规则校验工具。读取被检验表,根据用户自定义的条件表达式(类似Hive SQL规则)进行数据校验, 具有关联关系的数据项需满足特定约束条件。不满足条件的数据会标记质控标识并输出异常数据。 当用户提到关联规则校验、数据约束校验、自定义规则校验、条件表达式校验等需求时使用此skill。 即使用户没有说出"关联规则",只要任务涉及根据自定义条件表达式进行数据校验,就应该使用此skill。

中文简介正在准备中。当前显示原文说明。

cas-bigdatalab/piflow5412026年10月17日 更新