阿里云 数据湖分析DLA 招聘 平台研发技术专家

招聘hbase 发表了文1章 • 0 个评论 • 138 次浏览 • 2020-05-22 17:22 • 来自相关话题

阿里云 数据湖分析DLA 招聘 平台研发技术专家】

【描述】
数据湖分析Data Lake Analytics是阿里云数据库自研的云原生数据湖分析系统,目前已有数千企业在使用,是阿里云 库、仓、湖战略高地之一 !!!
现紧急招聘【 数据湖平台工程师】 产品链接:https://www.aliyun.com/product/datalakeanalytics  !!!

团队内部拥有多位Apache PMC&Committer,在国内外拥有良好的影响力,加入后您将与国内最顶尖的大数据、数据库领域专家一起工作,打造世界一流的数据湖分析服务能力!!!
业界趋势:数据湖是比大数据关注更多的词汇,未来5年数据湖同比以50%在高速发展。在全球多家云厂商,阿里云 数据湖分析 Data Lake Analytics 处于领先地位 !!!

【岗位职责】
1、 负责产品云化,打造Serverless弹性多租户平台能力
2、 负责平台的资源调度、高并发连接、多租户管理、安全、计量、被集成 等研发
3、 负责商业化输出研发,包括公有云、集团、专有云、混合云等多种形态
4、 生产问题的定位解决,系统性能的调优改进,业务需求的分析落地。
5、 工作地可以open to  杭州, 深圳,北京

【职位要求】
1、熟悉JAVA,较好的架构意识、性能意识、清晰的代码能力
2、有平台相关经验,有落地的平台系统经验优先
3、熟悉linux、docker以及k8s等系统和容器技术优先
4、了解开源的Spark/Kylin/Hadoop/Flink/Presto/Kudu或类似分布式计算引擎者优先
5、具备一定的抗压能力、自我驱动力、皮实、自省、良好的团队沟通及学习能力

联系人:封神   微信: fengshenwukong 查看全部

阿里云 数据湖分析DLA 招聘 平台研发技术专家】

【描述】
数据湖分析Data Lake Analytics是阿里云数据库自研的云原生数据湖分析系统,目前已有数千企业在使用,是阿里云 库、仓、湖战略高地之一 !!!
现紧急招聘【 数据湖平台工程师】 产品链接:https://www.aliyun.com/product/datalakeanalytics  !!!

团队内部拥有多位Apache PMC&Committer,在国内外拥有良好的影响力,加入后您将与国内最顶尖的大数据、数据库领域专家一起工作,打造世界一流的数据湖分析服务能力!!!
业界趋势:数据湖是比大数据关注更多的词汇,未来5年数据湖同比以50%在高速发展。在全球多家云厂商,阿里云 数据湖分析 Data Lake Analytics 处于领先地位 !!!

【岗位职责】
1、 负责产品云化,打造Serverless弹性多租户平台能力
2、 负责平台的资源调度、高并发连接、多租户管理、安全、计量、被集成 等研发
3、 负责商业化输出研发,包括公有云、集团、专有云、混合云等多种形态
4、 生产问题的定位解决,系统性能的调优改进,业务需求的分析落地。
5、 工作地可以open to  杭州, 深圳,北京

【职位要求】
1、熟悉JAVA,较好的架构意识、性能意识、清晰的代码能力
2、有平台相关经验,有落地的平台系统经验优先
3、熟悉linux、docker以及k8s等系统和容器技术优先
4、了解开源的Spark/Kylin/Hadoop/Flink/Presto/Kudu或类似分布式计算引擎者优先
5、具备一定的抗压能力、自我驱动力、皮实、自省、良好的团队沟通及学习能力

联系人:封神   微信: fengshenwukong


structedStreaming似乎不能指定groupid,如果任务重启,重新分配了groupid,那岂不是偏移量不能接上回的消费了吗

回复

spark刘狗 发起了问题 • 1 人关注 • 0 个回复 • 159 次浏览 • 2020-05-20 18:07 • 来自相关话题

【奇安信】诚招 HBase 内核开发工程师

回复

招聘elva 发起了问题 • 1 人关注 • 0 个回复 • 270 次浏览 • 2020-04-10 11:34 • 来自相关话题

[阿里云] 诚招大数据NoSQL研发(社招/校招), p6/7/8

招聘zjusch 发表了文1章 • 0 个评论 • 257 次浏览 • 2020-03-28 15:02 • 来自相关话题

私聊加微信(zjusch)
工作地:杭州/深圳

部门介绍:
阿里云智能-数据库产品事业部,承载着阿里云和阿里巴巴集团的所有在线数据以及数据服务,提供OLTP、OLAP、NoSQL的全栈数据库产品,是阿里巴巴最硬核的技术团队之一。

团队描述:
负责大数据NoSQL产品研发,包括自研(Lindorm)和开源(HBase、Phoenix、HDFS、Solr、Cassandra)。相关产品服务于整个阿里经济体,包括淘宝、天猫、支付宝、菜鸟、高德、优酷等,作为基础存储设施,支撑了亿级峰值请求和百PB存储的海量规模,每年将经受双十一、新春红包等大促的全新洪峰挑战。同时,作为阿里云平台的核心云数据库产品,服务于所有企业级客户,探索和建设云原生技术。

团队内部拥有多位Apache PMC&Committer,在国内外拥有良好的影响力,加入后您将与国内最顶尖的大数据、数据库领域专家一起工作,打造世界一流的数据库服务能力,一起参与开源生态建设,一起感受云计算市场的蓬勃发展,一起探索学习业界领先的技术。


岗位职责:
1. 参与分布式文件系统、LSM存储引擎、一致性协议、检索引擎、SQL引擎等核心组件的技术研发,支撑新一代大数据NoSQL系统Lindorm。
2. 探索和实现低成本海量存储、弹性Serverless、多数据模型、智能冷热分离、二级索引、全文检索、全球多活、跨机房强一致等业界领先的创新技术。
3. HBase/HDFS/Phoenix/Solr/Cassandra等开源系统的内核开发,回馈、建设开源社区,在社区形成影响力。
4. 生产问题的定位解决,系统性能的调优改进,业务需求的分析落地。
5. 学习和吸纳业界优秀的开源技术和理论成果,敢于探索、创新,拓展和丰富产品的能力

岗位要求:
我们希望你拥有以下特质:
1. 客户第一,理解业务,目标驱动
2. 热爱技术,自我学习,敢于创新
3. 不畏难题,坚韧毅力
4. 不畏挫折,坚持信念

技能:
1. 有扎实的编程基础,至少精通一门开发语言(java, c/c++, python,go),有大型数据库/存储内核开发经验优先。
2. 熟悉常用调优方法,熟悉Linux脚本开发,熟悉Linux OS常用系统参数
3. 对高并发、多线程、网络编程等有丰富实践经验
4. 严谨的程序开发态度以及较强的自我学习驱动能力
5. 良好的沟通技能与团队合作能力
6. 具有较大规模分布式集群开发及运维调优经验优先
7. 对Hadoop/HBase/Elasticsearch/Cassandra/Rocksdb等开源存储产品的任一个深度熟悉者优先,对源代码熟悉者优先

以上要求,可按工作年限调整,社招/校招均可以
只要你喜欢我们做的事,欢迎联系,相信缘分!   查看全部
私聊加微信(zjusch)
工作地:杭州/深圳

部门介绍:
阿里云智能-数据库产品事业部,承载着阿里云和阿里巴巴集团的所有在线数据以及数据服务,提供OLTP、OLAP、NoSQL的全栈数据库产品,是阿里巴巴最硬核的技术团队之一。

团队描述:
负责大数据NoSQL产品研发,包括自研(Lindorm)和开源(HBase、Phoenix、HDFS、Solr、Cassandra)。相关产品服务于整个阿里经济体,包括淘宝、天猫、支付宝、菜鸟、高德、优酷等,作为基础存储设施,支撑了亿级峰值请求和百PB存储的海量规模,每年将经受双十一、新春红包等大促的全新洪峰挑战。同时,作为阿里云平台的核心云数据库产品,服务于所有企业级客户,探索和建设云原生技术。

团队内部拥有多位Apache PMC&Committer,在国内外拥有良好的影响力,加入后您将与国内最顶尖的大数据、数据库领域专家一起工作,打造世界一流的数据库服务能力,一起参与开源生态建设,一起感受云计算市场的蓬勃发展,一起探索学习业界领先的技术。


岗位职责:
1. 参与分布式文件系统、LSM存储引擎、一致性协议、检索引擎、SQL引擎等核心组件的技术研发,支撑新一代大数据NoSQL系统Lindorm。
2. 探索和实现低成本海量存储、弹性Serverless、多数据模型、智能冷热分离、二级索引、全文检索、全球多活、跨机房强一致等业界领先的创新技术。
3. HBase/HDFS/Phoenix/Solr/Cassandra等开源系统的内核开发,回馈、建设开源社区,在社区形成影响力。
4. 生产问题的定位解决,系统性能的调优改进,业务需求的分析落地。
5. 学习和吸纳业界优秀的开源技术和理论成果,敢于探索、创新,拓展和丰富产品的能力

岗位要求:
我们希望你拥有以下特质:
1. 客户第一,理解业务,目标驱动
2. 热爱技术,自我学习,敢于创新
3. 不畏难题,坚韧毅力
4. 不畏挫折,坚持信念

技能:
1. 有扎实的编程基础,至少精通一门开发语言(java, c/c++, python,go),有大型数据库/存储内核开发经验优先。
2. 熟悉常用调优方法,熟悉Linux脚本开发,熟悉Linux OS常用系统参数
3. 对高并发、多线程、网络编程等有丰富实践经验
4. 严谨的程序开发态度以及较强的自我学习驱动能力
5. 良好的沟通技能与团队合作能力
6. 具有较大规模分布式集群开发及运维调优经验优先
7. 对Hadoop/HBase/Elasticsearch/Cassandra/Rocksdb等开源存储产品的任一个深度熟悉者优先,对源代码熟悉者优先

以上要求,可按工作年限调整,社招/校招均可以
只要你喜欢我们做的事,欢迎联系,相信缘分!  

需求:要用hbase通过mq的传输来存储微服务的日志,求hbase表怎么设计?以及需求实现思路?

回复

hbase我是歌手 发起了问题 • 1 人关注 • 0 个回复 • 268 次浏览 • 2020-03-25 10:06 • 来自相关话题

HBase 可以做快照的增量同步吗?

回复

hbasesiaron 发起了问题 • 1 人关注 • 0 个回复 • 419 次浏览 • 2020-01-16 17:20 • 来自相关话题

HBase监控,报警规则

回复

hbaselizikunnn 发起了问题 • 1 人关注 • 0 个回复 • 457 次浏览 • 2019-11-17 13:27 • 来自相关话题

hbase如何正确使用自定义过滤器

回复

hbase刘狗 发起了问题 • 1 人关注 • 0 个回复 • 433 次浏览 • 2019-11-13 16:27 • 来自相关话题

[蚂蚁金服] 诚招 Java /大数据研发,上海/北京/杭州, p6/7/8

招聘hbasegroup 发表了文1章 • 0 个评论 • 584 次浏览 • 2019-11-12 17:56 • 来自相关话题

Java/大数据技术宅赶紧看过来~~ 简历请投递 qing.zhengjq@antfin.com ,微信 Asuka4J,团队 Lead 直接评估安排面试~~

我们所在大团队主要负责蚂蚁全站系统的“高可用(从线程级到 IDC 级的故障自动定位和恢复决策)”和“资损防控(所有业务资金流的实时自动核对和止损)”这两大领域。在庞大的系统规模、频繁的变更频率、错综复杂的业务流程>大背景下,可以预计这两项工作已经无法通过堆人的方式应对,即便是很有经验的专家。所以大方向是以数据驱动和智能化的思路破局,一方面需要构建夯实的数据基础设施,支撑全站全量数据的高可靠近线传输、存储与计算。另一方面则需要结合场景去运用业界较为前沿的算法理论经验,实现问题域的智能分析,达到人工辅助或自动决策。当下整个体系已有一定基础,同时也存在很大的探索空间,如果 1.你本善于工程,同时又期望探索数据和智能化的实际>应用,2.你本善于算法,但苦于没有大规模的场景去施展落地,我们觉得都是蛮好的一个尝试方向。

职位描述:

1. 负责蚂蚁金服数据基础设施的研发建设,包括基础的监控时序数据,资金流数据,系统变更数据等。
2. 对全链路稳定性和数据质量负责,进行实时监控,分析,最终提供保障数据的质量,包括低延时,高可用等指标。
3. 参与数据流建设,满足实时数据流上的各种复杂计算需求,包括图计算,多流合并,以及各种常见 transform 计算。
4. 对接数据平台上的各类技术风险防控业务方,满足不断发展的业务需求。
5. 对接各类数据源端系统,包括蚂蚁技术体系内部的各种队列,关系数据库,日志等系统。

职位要求:

1. 扎实的计算机专业基础,包括算法和数据结构,操作系统,计算机网络,计算机体系结构,数据库等。
2. 扎实的 Java 或相关编程语言基础(我们以 Java 为主),良好的编程素养,对代码有美感和极致的追求。
3. 理解实时流计算( 比如 Spark/Storm/Flink )或海量数据处理( 比如 Hadoop/HBase/Hive )相关经验优先考虑。
4. 掌握机器学习、数据挖掘或深度学习的原理和相关算法优先考虑。
5. 强烈的技术热情和工作责任感,热衷于创新和分享,逻辑清晰并具备批判性思维能力和习惯。
6. 计算机软件或相关专业毕业,本科或以上学历; 211/985 优先。

工作地点:

上海,上海中心大厦
北京,环球金融中心
杭州,黄龙国际大厦

编程语言:

Java

招聘范围:

社招( P6+ ~ P8 ) 查看全部

IMG_0136.JPG

Java/大数据技术宅赶紧看过来~~ 简历请投递 qing.zhengjq@antfin.com ,微信 Asuka4J,团队 Lead 直接评估安排面试~~

我们所在大团队主要负责蚂蚁全站系统的“高可用(从线程级到 IDC 级的故障自动定位和恢复决策)”和“资损防控(所有业务资金流的实时自动核对和止损)”这两大领域。在庞大的系统规模、频繁的变更频率、错综复杂的业务流程>大背景下,可以预计这两项工作已经无法通过堆人的方式应对,即便是很有经验的专家。所以大方向是以数据驱动和智能化的思路破局,一方面需要构建夯实的数据基础设施,支撑全站全量数据的高可靠近线传输、存储与计算。另一方面则需要结合场景去运用业界较为前沿的算法理论经验,实现问题域的智能分析,达到人工辅助或自动决策。当下整个体系已有一定基础,同时也存在很大的探索空间,如果 1.你本善于工程,同时又期望探索数据和智能化的实际>应用,2.你本善于算法,但苦于没有大规模的场景去施展落地,我们觉得都是蛮好的一个尝试方向。

职位描述:

1. 负责蚂蚁金服数据基础设施的研发建设,包括基础的监控时序数据,资金流数据,系统变更数据等。
2. 对全链路稳定性和数据质量负责,进行实时监控,分析,最终提供保障数据的质量,包括低延时,高可用等指标。
3. 参与数据流建设,满足实时数据流上的各种复杂计算需求,包括图计算,多流合并,以及各种常见 transform 计算。
4. 对接数据平台上的各类技术风险防控业务方,满足不断发展的业务需求。
5. 对接各类数据源端系统,包括蚂蚁技术体系内部的各种队列,关系数据库,日志等系统。

职位要求:

1. 扎实的计算机专业基础,包括算法和数据结构,操作系统,计算机网络,计算机体系结构,数据库等。
2. 扎实的 Java 或相关编程语言基础(我们以 Java 为主),良好的编程素养,对代码有美感和极致的追求。
3. 理解实时流计算( 比如 Spark/Storm/Flink )或海量数据处理( 比如 Hadoop/HBase/Hive )相关经验优先考虑。
4. 掌握机器学习、数据挖掘或深度学习的原理和相关算法优先考虑。
5. 强烈的技术热情和工作责任感,热衷于创新和分享,逻辑清晰并具备批判性思维能力和习惯。
6. 计算机软件或相关专业毕业,本科或以上学历; 211/985 优先。

工作地点:

上海,上海中心大厦
北京,环球金融中心
杭州,黄龙国际大厦

编程语言:

Java

招聘范围:

社招( P6+ ~ P8 )

phoenix官网游标声明错误

回复

Phoenixnicholas 发起了问题 • 1 人关注 • 0 个回复 • 362 次浏览 • 2019-11-09 16:43 • 来自相关话题

hbase统计增量比实际增量要多,这是什么原因呢

回复

hbase各鸥 发起了问题 • 1 人关注 • 0 个回复 • 412 次浏览 • 2019-11-08 18:53 • 来自相关话题

求大佬解答,hbase集群启动时,03机器采集02机器日志进行合并时报错:

回复

hbasesorvey 发起了问题 • 1 人关注 • 0 个回复 • 469 次浏览 • 2019-11-08 16:44 • 来自相关话题

有大佬能讲解一下 “HBase数据即索引” 这句话吗

回复

hbasewoshihaoyujie 发起了问题 • 2 人关注 • 0 个回复 • 523 次浏览 • 2019-10-31 16:09 • 来自相关话题

云服务器重启,cdh的hbase服务重启之后查询 新增数据异常,导致服务不可用。

回复

hbasesutao 发起了问题 • 3 人关注 • 0 个回复 • 410 次浏览 • 2019-10-30 18:56 • 来自相关话题

phoenix数据量增大region越来越多,hive读取phoenix表每天增量数据,导致map资源越来越多

回复

Phoenixnicholas 发起了问题 • 1 人关注 • 0 个回复 • 438 次浏览 • 2019-10-25 17:34 • 来自相关话题

hbase2.1.6空洞问题

回复

hbasebearpeng 发起了问题 • 1 人关注 • 0 个回复 • 525 次浏览 • 2019-10-13 15:53 • 来自相关话题

regionserver.IO.FsReadTime_mean 异常,引起hbase查询超时

回复

hbasepanbc 发起了问题 • 1 人关注 • 0 个回复 • 400 次浏览 • 2019-10-08 21:47 • 来自相关话题

如何看待HBase2.0 MOB特性可能导致数据丢失的问题(HBASE-22075)

回复

hbasemicrobot 发起了问题 • 2 人关注 • 0 个回复 • 556 次浏览 • 2019-09-11 15:44 • 来自相关话题


中国HBase技术社区微信公众号:
hbasegroup

欢迎加入HBase生态+Spark社区钉钉大群