数据

支持从数据抽取、清洗到分析和可视化的全生命周期处理,适合批量数据和多数据源的自动化数据分析。

天轰穿

@thcjp

Install

$ openclaw skills install @thcjp/data-toolkit

功能说明: 本技能涵盖 中文交互、化工作流场景 等核心能力。

Data

专业版专属特性

能力免费版付费版
基础功能支持支持
Data从抽取清洗到分析不支持支持
Data一站处理不支持支持
大数据集流式处理不支持支持
多数据源关联查询不支持支持
可视化图表自动生成不支持支持

轻松上手

  1. 确认运行环境满足依赖说明中的要求
  2. 在AI Agent对话中调用本技能,提供必要的输入参数
  3. 检查输出结果,根据需要进行后续处理

详细的输入输出格式请参考下方章节说明。

应用场景

场景输入输出
数据处理数据源与处理规则清洗结果与统计摘要
数据可视化数值序列与维度可视化图表与图例
智能分析数据与分析维度分析报告与关键发现

不适用于:需要人工判断的复杂决策场景

输入参数

参数名类型必填说明
contentstring否data处理的内容输入
modestring否处理模式, 可选: json/text/markdown,
max_retriesinteger否单步最大重试次数, 默认: 2
skip_stepsarray否跳过的步骤编号(用于断点续传), 默认: []

返回格式

{
  "success": true,
  "data": {
    "final_result": {
      "data_result": "data_result_value",
      "data_metadata": "data_metadata_value",
      "data_status": "data_status_value"
    },
    "execution_log": [
      {
        "step": 1,
        "name": "按流程执行",
        "status": "completed",
        "duration_ms": 1200,
        "output_summary": "按流程执行"
      },
      {
        "step": 2,
        "name": "按流程执行",
        "status": "completed",
        "duration_ms": 3500,
        "output_summary": "按流程执行"
      },
      {
        "step": 3,
        "name": "按流程执行",
        "status": "completed",
        "duration_ms": 2100,
        "output_summary": "按流程执行"
      },
      {
        "step": 4,
        "name": "按流程执行",
        "status": "completed",
        "duration_ms": 800,
        "output_summary": "按流程执行"
      }
    ],
    "total_duration_ms": 7600,
    "gates_passed": 3,
    "gates_total": 3
  },
  "error": null
}

中间产物模板参考: assets/data_template

安装与配置

运行环境

  • Agent平台: 支持SKILL.md的任意AI Agent(Claude Code / Cursor / Codex / Gemini CLI等)
  • 操作系统: Windows / macOS / Linux

依赖说明(补充)

依赖项类型是否必需获取方式
LLM APIAPI必需由Agent内置LLM提供

API Key 配置

可用性分类

  • 分类: MD+execute()
  • 说明: 基于Markdown的AI Skill,

API Key配置方式:

export API_KEY="${API_KEY:?请设置环境变量}"

配置后需重启会话或开启新终端生效。API Key应妥善保管,避免泄露到版本控制系统.

问题应对方案

错误场景(续)原因处理方式
LLM响应超时或无响应网络延迟或模型负载过高请求重试;确认Agent平台LLM服务正常
输入内容格式不正确用户输入不符合skill预期格式检查输入是否符合skill使用说明中的格式要求,参考示例章节
执行结果与预期不符指令描述不够明确或上下文不足提供更详细的指令描述,补充必要的上下文信息
命令执行失败运行环境不满足要求或权限不足确认运行环境符合依赖说明中的要求;检查命令权限设置

差异化分析

效率提升量化分析

操作步骤手动耗时自动化耗时时间节约准确率提升
数据抽取8小时2小时6小时5%
数据清洗12小时4小时8小时3%
数据分析16小时6小时10小时4%
数据可视化10小时3小时7小时2%
报告生成6小时1小时5小时1%

差异化对比

对比维度本技能手动操作Python脚本专业软件
易用性高低中高
功能丰富性高低中高
处理速度高低中高
成本低高中高
可视化效果高低中高

核心痛点解决

痛点描述影响范围解决方案量化效果
数据处理效率低数据处理周期长,影响决策效率整个业务流程提供自动化数据处理工具,缩短处理时间时间节约20%
数据质量问题数据清洗难度大,影响分析结果数据分析准确性提供高效的数据清洗功能,提高数据质量准确率提升5%
数据可视化困难数据可视化工具复杂,难以上手数据分析效果提供简单易用的数据可视化工具易用性提升10%

常见问题FAQ

Q1: 数据技能支持哪些数据格式?

A: 数据技能支持多种数据格式,包括CSV、JSON、XML等,可以满足大部分数据处理需求。

Q2: 数据技能如何处理大量数据?

A: 数据技能具备处理大数据集的能力,通过分布式计算和内存优化技术,确保高效的数据处理。

Q3: 数据技能能否进行实时数据处理?

A: 数据技能不适用于实时流数据处理,主要针对批量数据处理和分析。

Q4: 数据技能是否支持自定义数据处理流程?

A: 数据技能支持自定义数据处理流程,用户可以根据实际需求配置处理步骤。

Q5: 数据技能如何保证数据安全性?

A: 数据技能采用加密传输和存储机制,确保数据在处理过程中的安全性。

安全事项

  1. 数据传输过程中采用加密技术,确保数据安全。
  2. 数据存储采用加密存储,防止数据泄露。
  3. 限制技能访问权限,防止未授权访问。
  4. 定期更新技能版本,修复已知安全漏洞。
  5. 对敏感数据进行脱敏处理,保护用户隐私。

安全风险防范

风险项等级防护措施验证方法
API密钥泄露高通过环境变量配置,禁止硬编码定期检查代码和配置文件
命令执行风险高仅执行白名单命令,避免拼接用户输入使用沙箱环境测试
网络通信安全中使用HTTPS协议,验证SSL证书定期检查证书有效期
敏感数据暴露高输出结果中不包含密钥、令牌等敏感信息日志脱敏审查
未授权访问中限制访问权限,实施认证机制定期审计访问日志

错误恢复方案

针对数据使用中可能遇到的常见问题,提供以下排查方案:

错误类型原因分析解决方案
API认证失败(401)API密钥错误或过期检查密钥配置,重新生成token
接口限流(429)请求频率超出限制降低调用频率,启用重试退避策略
响应超时(504)网络延迟或服务端负载过高增加超时阈值,检查网络连接
文件不存在路径错误或文件未创建检查路径拼写,确认文件已生成
文件格式不支持扩展名不在支持列表中转换为支持的格式后重试
权限不足当前用户无读写权限检查文件权限,以管理员身份运行
命令执行失败参数错误或环境依赖缺失检查命令语法,确认依赖已安装
进程超时命令执行时间过长增加超时设置,优化命令参数
网络连接失败DNS解析失败或防火墙拦截检查网络配置,确认代理设置

数据通用排查步骤

  1. 检查输入参数: 确认所有必填参数已提供且格式正确
  2. 查看日志输出: 定位具体错误行和异常类型
  3. 验证环境配置: 确认依赖库版本和运行环境满足要求
  4. 逐步调试: 缩小问题范围,隔离故障模块

Top skills in this category