sql-llm-benchmark
sql-llm-benchmark项目是一个测评大模型 SQL 能力的脚本工具和排行榜列表，旨在评估大型语言模型 (LLM) 在 SQL 相关任务方面的能力。它支持对 LLM 的 SQL 理解、方言转换和 SQL 优...
标签：AI大模型 sql-llm-benchmarksql-llm-benchmark项目是一个测评大模型 SQL 能力的脚本工具和排行榜列表，旨在评估大型语言模型 (LLM) 在 SQL 相关任务方面的能力。它支持对 LLM 的 SQL 理解、方言转换和 SQL 优化能力进行深入测评，集成了 MCP (Model Context Protocol) 网络搜索功能来增强裁判模型的判断准确性，并最终生成详细的测评报告，通过前端界面直观展示。
可以在sql-llm-benchmark的网站上查看排行榜和详细测评报告
- sql-llm-benchmark官网入口网址：https://sql-llm-leaderboard.com/
- sql-llm-benchmark开源项目地址：https://github.com/actiontech/sql-llm-benchmark
- sql-llm-benchmark中文介绍：链接
特性
- 多维度评估: 支持 SQL 理解、方言转换和 SQL 优化三大核心能力。
- 智能裁判增强: 集成 MCP 网络搜索功能，裁判模型可实时搜索数据库文档和最佳实践，显著提升判断准确性。
- 灵活的数据集: 允许用户自定义和扩展测评数据集。
- 可配置的 LLM: 支持集成多种大模型作为被测对象和裁判模型。
- 自动化报告生成: 自动生成详细的测评报告，包括总分、案例详情和交互日志。
- 直观的前端展示: 提供排行榜列表和详细报告页面，方便用户查看和分析结果。
- 可扩展架构: 易于添加新的 LLM 接口、HTTP 接口和测试用例。
sql-llm-benchmark项目旨在通过科学、严谨的测评体系，全面评估大语言模型（LLM）在SQL处理方面的核心能力。项目聚焦于三大关键维度：SQL优化能力、方言转换能力以及SQL深度理解能力。通过构建多维度、多指标的综合测评体系，并采用不同难度等级的真实案例进行测试，以科学加权评分的方式，评估模型在数据库操作中的实际表现。
sql-llm-benchmark项目旨在为开发者、数据库管理员及企业技术决策者提供权威、客观的参考依据，推动大模型在数据库智能化应用中的技术发展与选型落地。
sql-llm-benchmark项目旨在通过科学、严谨的测评方法，全面评估大语言模型在SQL处理方面的能力，为相关领域的技术发展和应用提供参考。
数据统计
相关导航
MiniMind 是一个开源的大语言模型（LLM）项目，旨在从零开始，以极低的成本（仅需3块钱）和极短的时间（2小时）训练出一个轻量级的语言模型。该项目由开发者 Jingyao Gong 发起，旨在降低大模型的学习门槛，让更多人能够从零开始训练和理解大模型的原理。 MiniMind官网入口网址：https://jingyaogong.github.io/minimind/MiniMind开源项目地址：https://github.com/jingyaogong/minimind MiniMind 的核心特点是其极小的模型体积，最小模型体积仅为 GPT-3 的 1/7000，适合个人 GPU 快速训练。项目提供了完整的训练流程，包括预训练、监督微调（SFT）、LoRA 微调、强化学习（RLHF）等全过程代码，并且所有代码均从零开始用 PyTorch 重构，不依赖第三方库。 MiniMind 提供了多种模型版本，包括 MiniMind2 系列和 MiniMind-V（多模态扩展），支持多种训练和推理框架，如 llama.cpp、vllm、ollama 等。项目还提供了丰富的数据集和训练脚本，支持从零开始训练模型，并提供了详细的训练和评估工具。 MiniMind 的目标是推动 AI 社区的进步，让更多人能够理解和参与大模型的开发与训练。通过 MiniMind，用户可以体验从零开始训练一个语言模型的全过程，感受创造的乐趣。
九天人工智能平台是中国移动倾力打造的国家级人工智能平台，旨在构建面向通用智能的大模型体系。作为国家新一代人工智能开放创新平台的重要组成部分，九天不仅承载着中国移动智慧运营转型的重任，更致力于赋能千行百业的数智化升级。 九天人工智能平台官网入口网址：https://jiutian.10086.cn/ 核心架构：全链路的大模型生态体系 平台构建了一体化的“大模型+平台”架构，涵盖了从底层算力到上层应用的完整闭环： 九天基础大模型：这是平台的“大脑”，具备强大的理解能力、生成能力和知识集成能力。它能够处理复杂的语言逻辑和多模态信息，为上层应用提供通用的智能底座。大模型生产平台：提供全链路的服务，包括多样化的算力支持、训推加速技术，极大地降低了大模型的开发门槛，让企业能够快速完成模型的训练和部署。大模型应用平台：这是连接AI与业务场景的桥梁。通过智能体（Agent）、插件集成、知识库和推理服务，平台支持开发者构建针对特定场景的AI应用，实现从“通用智能”到“专用智能”的落地。技术实力与创新成果 九天平台在技术研发上保持高频更新，紧跟全球AI前沿趋势。 前沿研究：九天团队在语音理解（如基于动态图卷积网络的多轮口语理解建模）、结构化数据处理等领域取得了突破性进展。其多项研究成果被INTERSPEECH、ACL等国际顶级学术会议录用。标准化建设：平台牵头编制的《人工智能 大规模预训练模型总体技术要求及评估方法》团体标准已正式发布，这标志着九天在推动行业规范化发展方面发挥了引领作用。产品迭代：平台持续发布高性能模型版本，如支持8K上下文的“九天语言大模型-13.9b-8k-chat v3”，显著提升了模型在长文本处理和复杂对话场景下的表现。生态合作与开放共享 九天平台秉持开放共赢的理念，构建了广泛的产业生态圈： 国际合作：作为中日韩三方运营商战略合作（SCFA）的一部分，九天与韩国电信（KT）等国际伙伴开展深度合作，致力于让全球用户都能轻松体验和利用人工智能。产教融合：平台积极与高校合作，例如与南京大学签署合作协议，并将“九天大模型应用实战课程”上线至国家高等教育智慧教育平台，为国家培养未来AI人才提供实战教学资源。算力与算法开放：作为一个开放平台，九天向社会开放算力、算法、数据和网络环境，旨在构建“通信+AI”的行业新生态，降低中小企业和科研机构的AI研发成本。 九天人工智能平台不仅仅是一个技术工具集，它更是一个推动产业升级的引擎。通过携手产业、科研机构及各类组织，九天致力于实现大模型的供给、汇聚及运营，让人工智能技术像水电一样普及，为数字经济的高质量发展注入澎湃动力。
Siray.ai 是一个面向开发者与企业的下一代人工智能基础设施平台，致力于提供统一、高效、低成本的 AI 模型接入服务。通过 Siray.ai，用户可以一站式访问超过 300 个全球领先的 AI 模型，涵盖文本生成、多模态理解、代码生成、图像生成、视频生成、音频处理等多个领域，支持包括 OpenAI、Anthropic、Google、DeepSeek、Qwen、X.AI 等主流厂商的模型。 Siray AI官网入口网址：https://siray.ai/ 平台采用智能路由技术，在保障 99.9% 高可用性的同时，平均为用户节省高达 30% 的 API 成本，部分场景下甚至可节省 70%。Siray.ai 提供简洁易用的 SDK（支持 Node.js、Python 等）和 RESTful API，集成仅需四步：注册账号、获取 API 密钥、更新请求地址、发起首次调用。 此外，Siray 还在全球 15+ 区域部署了企业级 GPU 集群，支持低延迟、高并发的 AI 推理与训练任务，无需用户管理底层基础设施。 无论是初创团队还是大型企业，Siray.ai 都能为其提供快速构建、测试和部署 AI 应用的能力，真正实现“做更多 AI，花更少成本”（Do More AI, Spend Less）。
SeedEdit是字节跳动旗下豆包大模型团队推出的一款通用图像编辑模型，旨在通过自然语言指令实现高效、精准的图像编辑操作。这款工具以其创新性和易用性，为用户提供了前所未有的图像编辑体验，标志着AI图像编辑领域的一次重要突破。 SeedEdit官网入口网址：https://team.doubao.com/en/special/seededit SeedEdit的核心功能包括修图、换装、美化、风格转化以及在指定区域添加或删除元素等操作。用户只需输入简单的自然语言描述，即可完成复杂的编辑任务，无需专业的图片处理技能。例如，用户可以通过一句话指令将小狗的背景替换为梦幻场景，或将世界名画中的蒙娜丽莎换成其他人物，同时保持原图的细节和质量。 办公人导航分享的SeedEdit的技术优势主要体现在以下几个方面：首先，它基于Diffusion架构，能够精准理解用户的指令，并仅处理文字指令涉及的区域，从而避免对图像整体造成影响，确保编辑效果的自然性和高质量。其次，SeedEdit支持多轮编辑，允许用户不断调整和优化编辑结果，为创意表达提供了更大的灵活性。此外，SeedEdit还支持中英文输入，能够理解成语和专有名词，展现了强大的语言理解能力。 SeedEdit的应用场景非常广泛。对于个人创作者而言，它可以帮助制作社交媒体图片、设计海报或进行艺术创作；在商业设计领域，SeedEdit可以快速生成不同风格的广告素材；在线教育中，教师也可以利用该工具教授图像编辑技能。目前，SeedEdit已在豆包PC端和即梦网页端上线测试，并提供免费体验服务。 尽管SeedEdit在图像一致性、细节处理和语言理解等方面表现出色，但在处理复杂图像（如人像）时仍存在一定的局限性，例如面部表情与原图不一致等问题。然而，凭借其创新的技术框架和强大的功能，SeedEdit已经引起了业界的广泛关注，并被认为是国内首个产品化的通用图像编辑模型。 SeedEdit不仅降低了图像编辑的门槛，还为用户提供了更高效、更灵活的创作工具。随着技术的进一步优化和功能的扩展，SeedEdit有望在更多领域发挥重要作用，推动AI图像编辑技术的发展。
Goku 是由中国香港大学与字节跳动联合推出的一款先进的视频生成模型，旨在通过图像和文本的联合生成技术，推动广告创作、内容制作等领域的创新。该模型的核心优势在于其革命性的 Rectified Flow Transformer 框架，不仅支持文本到图像、图像到视频的生成，还能够实现文本到图像的生成。 Goku官网入口网址：https://saiyan-world.github.io/goku/ Goku开源项目地址：https://github.com/Saiyan-World/goku Goku 的官网地址为：https://saiyan-world.github.io/goku/ 。在官网上，用户可以找到详细的项目介绍、技术文档以及在线体验入口。此外，Goku 的 GitHub 仓库也提供了完整的代码和模型库，方便开发者进行研究和应用。 模型的主要特点包括： 高质量生成：Goku能够生成高质量的视频内容，支持多种场景，如广告、电商、电影预告片等。低成本制作：相比传统广告视频制作，Goku的成本降低了100倍，极大地降低了内容创作的门槛。多模态支持：Goku支持文本到视频、图像到视频和文本到图像的生成，能够处理复杂的时空关系和多模态任务。虚拟数字人生成：Goku可以生成逼真的虚拟数字人，展现自然动作，适用于虚拟主播、客服等场景。广告优化：Goku+是Goku的扩展版本，专注于广告场景，能够生成稳定且表现丰富的视频内容。 Goku 的应用场景非常广泛，包括但不限于广告视频制作、产品展示视频制作以及互动视频生成等。通过 Goku，用户可以轻松地将文本描述转化为高质量的视频内容，极大地提升了内容创作的效率和质量。 Goku 是一个具有强大功能和广泛应用前景的视频生成模型，其官网提供了全面的信息和支持，帮助用户更好地理解和使用这一创新技术。