工具集

进程内分析型 SQL 数据库，命令行可直接用 SQL 查询 CSV、Parquet、JSON 文件，无需导入或启动服务，适合 agent 抽样与聚合大文件。官方维护。

自适应网页抓取框架：scrapling extract 一条命令即可把网页抓成 Markdown、纯文本或 HTML，支持 CSS 选择器与浏览器渲染动态页面，另有 MCP 服务（需装 ai 扩展）。需 Python 3.10+，首次使用需安装浏览器。

开源的 LLM 友好网页爬虫，把网页转成干净的 Markdown 供 RAG 与 agent 使用；自带 crwl 命令行，支持深度爬取与按问题抽取数据（抽取需配置大模型 Key）。可免费自托管。

OpenBB 开源投资研究平台的命令行版，在终端查询股票行情、财报、宏观经济等金融数据，可用 Routine 脚本批量自动取数。官方维护，部分数据源需自备 API Key。

以结构化数据为核心的跨平台 shell：管道里传的是表格而不是纯文本，可以直接打开并查询 JSON、CSV、TOML 等文件；默认构建自带 nu --mcp 模式，可作为 MCP 服务给 agent 调用。

一站式安全扫描器：检查容器镜像、文件系统、Git 仓库与 Kubernetes 集群中的已知漏洞、IaC 错误配置、泄露密钥与软件许可证，并能生成 SBOM。Aqua Security 开源维护。

HashiCorp 的密钥管理系统：vault 命令行可读写密钥、按需签发数据库与云平台的动态凭据、加解密数据并管理租约与吊销。需要连接可用的 Vault 服务端。

基于 YAML 模板的高性能漏洞扫描器：配合社区贡献的模板库，在 HTTP、DNS、TCP、SSL 等协议上检测已知漏洞，支持自定义模板并可接入 CI/CD。仅用于已授权的目标。

把网站和 Electron 桌面应用变成确定性的命令行接口：内置 B 站、知乎、小红书、Reddit、HackerNews 等适配器，并让 agent 通过你已登录的 Chrome 操作任意网页。需安装配套浏览器扩展。

检测 Git 仓库、目录文件与标准输入中硬编码的密码、API Key 和令牌，可配成 pre-commit 钩子或 GitHub Action 拦截密钥泄露。已宣布功能冻结、只发安全补丁，作者转向 Betterleaks。

在 Git、GitHub、S3、文件系统等来源中查找泄露的凭据，可识别 800 多种密钥类型，并登录对应服务验证密钥是否仍然有效，减少误报。

评测与红队测试大模型应用的 CLI 与库：批量对比提示词与模型输出、扫描安全漏洞、接入 CI/CD，评测在本地运行。已并入 OpenAI，仍以 MIT 协议开源。

开源逆向工程框架与命令行：反汇编、调试、模拟执行与修改二进制，支持多种架构和文件格式，可通过 r2pipe 或内置 JavaScript 脚本化调用。

加密 YAML、JSON、ENV、INI 等配置文件中的密钥值，支持 AWS / GCP / Azure KMS、age 与 PGP，让密钥可以安全地和代码一起存进 Git。CNCF 沙箱项目。

阿里巴巴开源的离线数据同步工具，用 JSON 作业配置在 MySQL、Oracle、PostgreSQL、Hive、HDFS、MaxCompute 等异构数据源间批量同步，通过 python datax.py 执行。需 JDK 1.8+ 与 Python，下载官方工具包解压即用。

语义化的多语言静态分析工具：用写法接近源码的规则查找漏洞与缺陷，支持 30 多种语言与自定义规则，默认在本地扫描、不上传代码。跨文件分析与 Pro 规则需登录。

对 AWS、Azure、GCP、Kubernetes、GitHub、M365 等环境做安全基线与合规检查，内置 CIS、NIST、PCI-DSS、SOC2 等框架，可以生成报告，也能打开本地看板。需要先配置对应云账号的凭证。

数仓建模与 ELT 转换的命令行框架：用 SQL 编写模型，自动处理依赖、数据测试与文档生成。v2 用 Rust 重写为单一二进制，dbt Labs 官方维护，需配置数据仓库连接。

经典的网络探测与安全审计工具：主机发现、端口扫描、服务版本与操作系统识别，并可用 NSE 脚本做漏洞检测。只应扫描已获授权的网络。

带智能补全与语法高亮的 PostgreSQL 命令行客户端，兼容 psql 的环境变量，支持用 -c 执行语句后退出，便于 agent 非交互地查询数据库。

扫描容器镜像、文件系统目录与 SBOM 中的已知漏洞，覆盖主流 Linux 发行版软件包和多种语言依赖，支持按 EPSS、KEV 排序风险，也支持用 OpenVEX 过滤结果，适合在 CI 中做漏洞门禁。由 Anchore 官方维护。

Simon Willison 开发的大模型命令行与 Python 库：在终端调用 OpenAI、Claude、Gemini 及本地模型，对话自动记入 SQLite，支持嵌入、结构化抽取与工具调用，可用插件扩展。

带智能补全与语法高亮的 MySQL 终端客户端，兼容 MariaDB、TiDB 等；支持 --execute 与批处理模式，可按 CSV 或表格格式输出查询结果，便于 agent 直接执行 SQL。

把 SQLite 数据库发布成可以浏览、可以查询的网页和 JSON API，支持 SQL 查询、元数据和插件扩展，也能用 datasette publish 部署到 Cloud Run 等平台。适合数据探索和数据新闻，需要 Python 3.10 及以上版本。