数据开发 推荐工具
为{{role_name}}精选的 43 个在线工具,提升你的工作效率
JSON 格式化
格式化、压缩、统计 JSON 数据
SQL 格式化
格式化和压缩 SQL 语句
CSV 转 SQL
CSV 数据转换为 SQL INSERT/CREATE 语句,支持多种分隔符、数据库类型、批量插入
CSV 查看器
CSV 文件在线查看和预览
Excel 转 JSON
上传 Excel 文件转换为 JSON,支持多 Sheet 切换、首行作为键、表格预览、CSV 导出
JSON 转 Excel
JSON 数组/对象转 Excel(.xlsx),支持多 Sheet、嵌套展开、自动列宽,也可导出 CSV
JSON 转 CSV
将 JSON 数组转换为 CSV 格式
SQL结果转JSON
SQL查询结果格式转JSON
SQL转CSV
从SQL语句解析列名并生成CSV
YAML ↔ JSON
YAML 与 JSON 格式互转
SQL 查询构建器
可视化构建 SQL 查询,支持 SELECT/JOIN/WHERE/GROUP BY/ORDER BY/LIMIT,实时生成规范 SQL
JSON合并工具
JSON对象浅合并/深合并/数组拼接
JSON扁平化
嵌套JSON扁平化和还原
虚拟数据生成
生成JSON/CSV/SQL虚拟测试数据
MySQL ↔ MongoDB
MySQL SQL/DDL与MongoDB查询/Schema双向转换,含聚合管道/事务模板
Hive 查询结果格式化
将 Hive/SQL 查询结果转换为格式化表格,支持导出 CSV/JSON/SQL
MySQL ↔ ES DSL 转换器
MySQL SQL与Elasticsearch DSL双向转换,DDL与Mapping互转,DSL格式化
SQL参数化生成
SQL参数化查询生成、CRUD模板、SQL注入检测
DDL 造数据生成器
解析 CREATE TABLE DDL → 自动生成 INSERT SQL,支持 MySQL/Hive(含分区字段),22种字段数据规则可自定义
Spark 参数调优
输入集群资源(CPU/内存/节点) → 自动计算最优 Spark 配置 + spark-submit 命令 + AQE/DynamicAllocation
Hive↔Spark SQL
Hive SQL ↔ Spark SQL 语法自动转换 + LATERAL VIEW/USING/PARTITION差异 + 函数对照表
大数据迁移生成器
跨组件建表DDL转换(MySQL→Hive/HBase/Kudu/ES) + Sqoop脚本 + DataX JSON配置生成
HBase RowKey 设计
可视化 RowKey 分段设计 + 热点检测 + Salt策略 + Scan范围预览 + Java/Shell/Python代码生成
文件格式对比器
Parquet/ORC/Avro/TextFile/JSON/SequenceFile 全方位对比 + ETL/流式/ML/归档场景推荐
Hive 分区设计器
分区策略设计 + 分区数量估算 + 文件大小预警 + DDL生成 + 分区裁剪查询建议
DataFrame↔SQL
Spark DataFrame API ↔ Spark SQL 互转 + API对照表 + 性能对比分析
YARN 资源计算器
YARN 集群资源配置计算 + 队列分配 + 容器配置 + yarn-site.xml/capacity-scheduler.xml 生成
Kudu 表设计器
Kudu 表结构设计 + Hash/Range分区 + 列编码压缩 + Impala DDL + Java/Python Client代码
大数据端口速查
60+ 大数据组件默认端口速查 + 组件筛选 + 搜索 + 配置文件/配置项参考
Hive UDF 模板库
8种常用 Hive UDF/UDAF/UDTF Java模板(脱敏/解析/加密/日期/聚合) + Maven依赖 + 注册命令
Spark 性能检查
30项 Spark 性能优化检查清单(资源/读写/Shuffle/SQL/GC) + 进度追踪 + 检查报告生成
DAG 生成器
可视化任务编排 → Airflow DAG Python代码 / Oozie workflow.xml + 依赖管理 + 多任务类型
数据迁移脚本生成
MySQL迁移/MySQL→ES同步/分库分表建表/Flyway·Liquibase版本管理
DDL 互转(PG/Oracle)
MySQL/PostgreSQL/Oracle DDL双向转换,含完整类型映射表
压缩/解压工具
支持 Gzip、Deflate、Deflate-Raw 压缩与解压
分布式工具集
雪花ID调试器、幂等号生成、分库分表辅助、分布式ID方案对比
日志分析工具
Nginx日志统计、Java堆栈格式化、慢SQL提取、日志脱敏处理
Shell脚本工具箱
Shell脚本格式化/模板生成/循环代码/awk·sed模板/Crontab生成器
Redis 进阶工具箱
Redis存储设计/排行榜/Lua脚本库/过期清理/缓存架构方案
JSON Schema 生成
从 JSON 样本生成 Schema 并验证数据
JSON Schema 验证器
验证 JSON 数据是否符合 JSON Schema 规范
JSON 转 SQL
将 JSON 数据转换为 CREATE TABLE 和 INSERT 语句
JSON 数据模拟
根据字段定义自动生成模拟 JSON 数据