
*本文约2600字,阅读约需6分钟
天冕联邦学习平台(WeFe)联邦SQL分布式数据连接和查询功能正式上线,为跨企业的数据查询提供了一种简单而高效的方式。这篇文章,我们将带领大家了解和学习如何使用这一功能。

1.数据资源
2.资源授权及权限配置
系统已添加的数据资源可以授权给项目使用,成员可以使用项目内的数据资源进行联合数据分析。为了数据安全性,成员可对己方数据资源进行权限控制。
显示项目内已被授权可使用的数据资源,可预览数据资源及元信息。

我们的SQL探索页面为成员方提供了一个方便的查询接口,他们可以通过输入查询语句来获取结果。为了确保数据的安全性和隐私保护,我们对输入的查询语句做了一些限制和验证。
首先,我们只允许输入查询语句,不允许执行其他类型的SQL语句。这样可以避免成员方对数据进行修改或删除操作,确保数据的完整性和一致性。同时,我们还限制了查询语句中只能使用数据权限配置中可用的字段。这样可以防止成员方访问他们没有权限的数据字段,保护了数据的安全性。
其次,我们只允许查询数据权限配置中可查的字段。这样可以确保成员方只能查询他们有权限的数据字段,避免了对敏感数据的访问和泄露。
此外,我们还对查询语句中的group by字段进行了限制。如果group by的字段分组的数量小于权限配置中设置的最小分组数,那么查询语句将不被允许执行。这样可以避免成员方对数据进行过于细粒度的分组,保护了数据的隐私。
最后,我们的SQL探索页面支持同时执行多条查询语句。这样可以提高查询的效率和灵活性,方便成员方进行批量查询和分析。
在SQL探索页面上,我们为用户提供了个人工作区,其中包括笔记区、模板、函数几个模块,以便更好地支持用户的查询和分析需求。
模板:我们提供了一些系统模板,其中包含一些基本语句的参考。用户可以双击函数名或语句,将其插入到SQL编辑区的光标处,从而快速构建查询语句。另外,用户也可自定义自己的模板,以便更好地适应个人的查询需求和工作流程。
函数:用户可以查看支持的函数列表,并且双击函数名将函数名插入到SQL编辑区的光标处。这个功能方便用户使用和调用各种函数。
1.采用可信执行环境(TEE)技术,确保数据的安全性和完整性,防止数据被篡改或泄露。
2.通过解析SQL查询语句的抽象语法树,将SQL片段进行拼接,实现灵活的查询操作。
3.采用安全Join技术,确保在联接操作中不会泄露敏感数据。
4.基于大数据分布式查询引擎,处理海量数据查询。
1.多方联合分布式查询,支持海量数据查询。
2.分布式执行计划优化,支持Join下推,谓词下推,提升查询性能。
3.支持二十多种异构数据源。
4.支持动态数据源加载。
5.支持Join、GroupBy、Unoin、隐式表关联等联邦关键字,支持复杂表达式、where语句子查询等。
跨组织数据查询:在跨不同组织或企业的数据集中进行查询和分析时,联邦SQL可以实现数据的联合查询和聚合操作,而无需将数据集中到单个位置。例如,金融行业中的多家银行可以使用联邦SQL查询客户的跨银行交易数据,以便进行反洗钱分析和风险评估。
多地区数据分析:当数据分布在不同地区或分公司时,联邦SQL可以用于在各个数据源上进行查询和分析,而无需将数据集中到一个中心位置。这在零售、物流等行业中特别有用,可以进行跨地区销售分析、库存管理等操作。



