Greenplum + PostGIS 在地理空间大数据分析的应用
本文全面的分析了地理空间大数据在电信行业的非实时和实时应用场景 如:网络覆盖分析,业务网格展现,人流密度等,并 结合实际生产环境给出了基于 Greenplum+PostGIS 的一种高效处理地理空间大数据的方法 。希望能够帮助我国的相关应用的推广和发展。
本文全面的分析了地理空间大数据在电信行业的非实时和实时应用场景 如:网络覆盖分析,业务网格展现,人流密度等,并 结合实际生产环境给出了基于 Greenplum+PostGIS 的一种高效处理地理空间大数据的方法 。希望能够帮助我国的相关应用的推广和发展。
2021年7月15日,在由HIT专家网主办、 VMware 公司协办的 “医院大数据平台建设与应用” 在线研讨会上,与会专家通过“回首”,分享了医院大数据平台建设经验,并就如何实现医疗大数据应用的常态化等热点话题进行了研讨分析…
在使用Greenplum之前,我们已经用Oracle有10多年时间了。开始接触Greenplum还是两年前的事,这么短的时间,我们就果断的决定转换阵营,还是由于Greenplum的强大功能.接下来我来介绍一下我们医疗数据的具体情况,同时也邀请大家多关注民生行业…
Greenplum集群主要包括Master节点和Segment节点,Master节点称之为主节点,Segment节点称之为数据节点。Master节点与Segment节点都是可以有备份的,其中Master节点的备节点为Standby Master(不能够自动故障转移),Segment是通过Primary Segment与Mirror Segment进行容错的。通过本文你可以了解:
统计数据是描述存储在数据库中的数据的元数据,查询规划器需要最新的统计信息来为查询选择最佳的执行计划。通过执行analyze语句收集和更新统计信息。最近遇到gp5.x通过analyze收集统计信息慢、集群性能下降的现象。本文将分享统计信息收集的优化过程以及涉及到相关概念…
《Pgbouncer最佳实践》系列已经连载到了第四篇,概念篇介绍了数据库连接池在Pgbouncer中的三种方式。性能提升篇介绍了Pgbouncer带来的性能提升的相关测试。池模式篇详细介绍事务池、会话池和语句池。第四篇,将为大家介绍Pgbouncer的部署形式和用户密码认证方式…
《Pgbouncer最佳实践》系列已经连载到了第三篇,概念篇 介绍了数据库连接池在Pgbouncer中的三种方式。性能提升篇介绍了Pgbouncer带来的性能提升的相关测试。本文将详细介绍事务池、会话池和语句池…
最近来自中兴通讯的系统架构师、敏捷教练王爱军在工作过程中,遇到gp5.20通过 gprecoverseg -F做全量恢复失败的异常。master和primary的pg_log日志中打印internal error,然后primary crash。本文分享问题的定位过程以及涉及到相关概念,供大家学习参考…
PXF是 Greenplum平台扩展框架(PXF),通过内置连接器提供对外部数据的访问。PXF作为Greenplum与hadoop集群数据交互的并行通道框架,在标准功能外,还支持自定义开发与扩展,在Greenplum中通过PXF可以并行加载及并行卸载Hadoop平台数据…
Motion:除了常见的数据库操作(例如表扫描,联接等)之外,Greenplum数据库还有一种名为motion的算子。motion用于在segment之间移动元组。
Slice:为了在查询执行期间实现最大的并行度,Greenplum将查询计划的工作划分为slices。slice是计划中可以独立进行处理的部分。查询计划会为motion生成slice,motion的每一侧都有一个slice。Gang:*属于同一个slice但是运行在不同的segment上的进程,称为gang。
扫码添加小助手即可入群,添加时请备注 “GP网站”