| 设立背景 | 公司要建国际网站数据仓库,得有人搭和管后台。 | ||
|---|---|---|---|
| 核心职能 | 搭数据仓库、写etl流程、监控数据、挖用户行为、支持业务决策。 | ||
| 工作内容 | 搭维护数据仓库、写sql和python脚本、跑etl任务、盯数据异常、回临时需求。 | ||
| 协作关系 | 跟产品、运营、开发一起干活。向大数据组长汇报。用邮件 会议同步进度,数据结果发给业务方看。 | ||
etl高级工程师职位要求
1、计算机、数学或统计等专业,本科以上学历;
2、精通sql语言;熟悉数据仓库设计、建模;
3、精通python,能够编写脚本处理、分析数据;
4、熟悉批量离线式分布式并行计算技术(如hadoop、mapreduce、hive、spark等)
5、熟悉sqlserver、mysql数据库;了解redis等非关系型数据库;
6、熟悉至少一种常用etl工具(如kettle、ssis、gobblin);了解常用报表工具(如reporting services以及各类开源报表);
7、了解常用数据挖掘方法(回归、决策树、聚类等)。
| 设立背景 | 公司要支持中国营销业务增长,得有人做数据处理和报表开发。 | ||
|---|---|---|---|
| 核心职能 | 用ibm cognos做报表;用etl工具取数、清洗、存表;设计表、算数据。 | ||
| 工作内容 | 开发新功能;跟项目经理聊需求;取交易数据;清洗数据;下载更新到表;算表里数据;做cognos报告。 | ||
| 协作关系 | 跟项目经理聊需求;跟业务分析师、产品专家一起做报告;向技术主管汇报;和全球同事线上配合。 | ||