达摩院AliceMind上新！首个中文表格预训练模型来了，已向业界开源

作者：佚名 2021-12-02 13:43:42
云计算 12月2日，达摩院深度语言模型体系AliceMind发布中文社区首个表格预训练模型SDCUP，该模型在全球权威表格数据集WikiSQL、SQuALL上取得了业界最优效果，且模型和训练代码均已对外开源。

创新互联专注为客户提供全方位的互联网综合服务，包含不限于做网站、网站建设、古交网络推广、微信平台小程序开发、古交网络营销、古交企业策划、古交品牌公关、搜索引擎seo、人物专访、企业宣传片、企业代运营等，从售前售中售后，我们都将竭诚为您服务，您的肯定，是我们最大的嘉奖；创新互联为所有大学生创业者提供古交建站搭建服务，24小时服务热线：028-86922220，官方网址：www.cdcxhl.com

 12月2日，达摩院深度语言模型体系AliceMind发布中文社区首个表格预训练模型SDCUP，该模型在全球权威表格数据集WikiSQL、SQuALL上取得了业界最优效果，且模型和训练代码均已对外开源。（https://github.com/alibaba/AliceMind）

表格是应用普遍的结构化数据，也是智能对话系统和搜索引擎的重要答案来源。但传统表格查询需技术人员撰写专业查询语句，阻碍了表格查询的大规模应用。新兴的表格问答技术，可将自然语言转换为查询语句，使用户能通过简单问句直接与表格数据库交互，具有广泛应用前景。

不过，由于表格内容复杂多样、涉及各行业专业知识，表格问答任务一直是自然语言处理领域的难题。此前，谷歌、微软、亚马逊等海外公司开展了相关探索，但在中文场景，该方向处于空白。

本次，达摩院对话智能团队提出了首个中文表格预训练模型SDCUP，其基于“模式依存”方法，通过模型直接预测自然语言与表格结构内容的关键词映射，提升了表格问答的准确率。具体而言，即参考语义依存分析方法对Schema Dependency任务建模，使用全连接网络获取每个节点作为父亲节点和作为孩子节点的语义表示，然后使用双仿射网络预测每个边存在的概率和该边关系类型的概率。同时，团队使用了模仿人类的“课程学习”方法减少数据噪声。

（SDCUP生成SQL示例）

在耶鲁大学发布的业界最大规模的英文文本-表格数据集WikiSQL，以及微软构建的英文文本-表格高难度预测任务SQuALL数据集上，SDCUP模型均取得业界最优效果。在达摩院构建的表格问答中文数据集TaBLUE上，SDCUP比同参数规模BERT模型效果提升约3个百分点。

（SDCUP在WikiSQL数据集上取得业界最优效果）

（SDCUP在SQuALL数据集上取得业界最优效果）

达摩院资深算法专家李永彬介绍，SDCUP模型是达摩院表格对话技术系列研发的一部分，后续将持续对外开源。其相关技术先后在四大国际公开数据集WikiSQL、Spider、SParC、CoSQL上取得第一。

据了解，该技术完成了产品化，已通过阿里云智能客服为政务、金融、零售等行业客户提供表格问答和数据库自然交互服务。

网站栏目：达摩院AliceMind上新！首个中文表格预训练模型来了，已向业界开源
本文链接：http://www.shufengxianlan.com/qtweb/news33/481233.html

网站建设、网络推广公司-创新互联，是专注品牌与效果的网站制作，网络营销seo公司；服务项目有等

广告

声明：本网站发布的内容（图片、视频和文字）以用户投稿、用户转载内容为主，如果涉及侵权请尽快告知，我们将会在第一时间删除。文章观点不代表本网站立场，如需处理请联系客服。电话：028-86922220；邮箱：631063699@qq.com。内容未经允许不得转载，或转载时需注明来源： 创新互联