开源SDK

帮助企业采集用户行为数据,奠定数据分析基石

{{item.h3}}

前往GitHub

{{item.h3}}

前往GitHub

Apache DolphinScheduler

分布式、易扩展的可视化DAG工作流任务调度系统

- 数据库减压,减少极端情况下可能造成的调度延时

- Worker 去 DB 操作,职责更单一

- Master 和 Worker 直接通信,降低延时

- Master 多种策略分发任务

高可靠性

去中心化的多 Master和 Worker, 支持 HA 功能, , 实现超大规模任务调度,采用任务队列和自身保护机制来避免过载、不会造成机器卡死

简单易用

DAG 监控界面,所有流程定义皆为可视化,通过拖拽任务定制 DAG ,以API 与第三方系统对接、一键部署

场景丰富

支持暂停恢复操作. 支持多租户,更好的应对大数据 的使用场景,支持Spark, Hive, MR, Python, sub_process, Shell等多种任务类型

高扩展性

支持自定义任务类型,使用分布式调度器、调度能力随集群线性增长。Master 和Worker 支持动态上下线

IOTA架构

去ETL的大数据架构

·填补国内ad-hoc查询引擎空缺,目前单台服务器可以支持百亿条数据的复杂查询在7秒内查询返回,且未有国外第三方商业组件,整体国内安全可控。
·满足基于用户相关数据下的自定义多维分析、即席查询、实时数仓、统一用户视图、用户画像、智能触达等
·技术人员无需天天写SQL,业务人员自定义口径,数据治理工作量小

其它开源技术

Presto+

presto-hbase-connector组件基于presto connector接口规范实现,用来给presto增加查询hbase的功能。 相比与其他开源版本的hbase connector,我们的性能要快到10到100倍以上。

在GitHub上加入我们

Backquarter

易观开源大数据互联网百亿级记录互传Backquarter项目,可以同步Ucloud上的Kafka消息到IDC机房:消费者消费Ucloud上Kafka集群的消息,生成文件,实时同步文件至IDC机房。生产者实时监控文件,解析文件发送至IDC的Kafka集群。

在GitHub上加入我们

Kong Plus

易观根据自身需求定制的封装Kong的相关功能的简单Portal。为了方便开发和集成,我们自己开发了一套简单的界面来帮助公司开发人员方便地集成自己的服务。界面功能包含API的创建、认证插件的添加、其他扩展插件的添加、API管理、Kong服务器状态查询以及API调用统计等功能。功能也在随着需求的增加不断完善。

在GitHub上加入我们

在中国,开源的时代正在觉醒,需要每一位小伙伴不懈的努力,最终才能让开源精神在中国拨云见日,遍地生花。

郭炜 易观CTO

在GitHub上加入我们

2020智能用户运营实战手册

数据重构企业用户运营
从理论到业务场景实战
免费领取

零成本获得智能运营解决方案

免费版智能运营产品组件+ 智能分析产品组件

限时免费服务器+服务支持

立即报名获取