OpenParable
Skip to content
← Back to skills

Clean Ip Mapper

Documents
clean_ip_mapper

Clean Ip Mapper is an Agent Skill for documents published in the cas-bigdatalab/piflow repository on GitHub: a SKILL.md instruction file an AI agent can load to do this task.

清除文本示例中的IPv4和IPv6地址。当用户提到清理IP、删除IP地址、去除IP、清理网络地址等需求时使用此skill。 即使用户没有明确说出"IP"，只要任务涉及从文本中删除或替换IP地址，就应该使用此skill。

View on GitHub ↗
QUICK START

How to use this skill

Bring this guide into your coding agent with a prompt tailored to the tool you use.

  1. Open your project in Codex.
  2. Copy and paste the prompt below.
  3. Review files and risks before approving any action.
Prompt to paste
Inspect the Agent Skill at https://github.com/cas-bigdatalab/piflow/blob/HEAD/workspace/skills/clean_ip_mapper/SKILL.md and all supporting files. Report provenance, permissions, scripts, dependencies, and security risks. Propose an exact installation into .agents/skills/clean-ip-mapper, but wait for my approval before writing files or running scripts.

Copying this prompt does not install or run the skill. Review third-party files before use.

Clean IP Mapper

清除文本中的IPv4和IPv6地址。

本SKILL使用依赖data_juicer，请在调用前安装好python环境并安装data_juicer，你可用同以下指令进行安装：

pip install py-data-juicer

核心参数

参数类型必填默认值说明
input_pathstring是-输入JSON文件路径
output_pathstring是-输出JSON文件路径
replstring否空字符串替换字符串（默认为删除）

使用方法

python scripts/run_clean_ip_mapper.py --input_path <input_path> --output_path <output_path> [--repl <replacement>]

实现原理

参照测试代码 test_clean_ip_mapper.py 中的 _run_clean_ip 函数：

# 1. 初始化算子
op = CleanIpMapper()  # 删除IP
# 或
op = CleanIpMapper(repl='<IP>')  # 替换为指定字符串

# 2. 将数据转为Dataset，使用 op.run(dataset) 处理
dataset = Dataset.from_list(samples)
result_dataset = op.run(dataset)

输入输出格式

输入格式 (JSON数组)

[
  {"text": "服务器IP：192.168.1.1"},
  {"text": "IPv6地址：2001:0db8:85a3"}
]

输出格式 (JSON数组)

[
  {"text": "服务器IP："},
  {"text": "IPv6地址："}
]

示例

示例1：删除IP地址（默认）

python scripts/run_clean_ip_mapper.py --input_path example_input.json --output_path output.json

示例2：替换为占位符

python scripts/run_clean_ip_mapper.py --input_path example_input.json --output_path output.json --repl "<IP>"

注意事项

  • 默认行为是删除IP地址
  • 可以指定 repl 参数来替换为其他字符串
  • 支持IPv4和IPv6地址的识别和清理