资源描述:
《大数据平台架构师岗位职责大数据平台架构师职责任职要求》由会员上传分享,免费在线阅读,更多相关内容在应用文档-天天文库。
1、大数据平台架构师岗位职责大数据平台架构师职责任职要求大数据平台架构师岗位职责工作职责:负责大数据开发、数据挖掘、算法平台的技术架构及建设;负责大数据实时检索分析平台的架构和建设;负责PCG业务算法推荐,实时流计算框架的研发优化;跟踪移动互联网开源大数据框架、新算法框架的技术选型及平台化预研及架构;负责业务挖掘、算法应用的平台支持;负责>5人的技术或FT团队管理。任职要求:5年以上系统建设,设计,架构经验;4年以上大数据系统开发,设计,架构经验;3年以上软件工程管理经验;熟识商业智能系统,熟
2、识数据仓库,熟识数据集市;熟识大数据相关技术:Hadoop,Hive,HBase,ZooKeeper,Spark,Cassandra,MapReduce;并阅读过相关源码;管理过数据量上T级别,节点数300以上的大数据集群,开发,优化并管理过上T级别的大数据作业;-7-熟识常用机器学习算法,了解深度学习,强化学习,迁移学习算法,了解相关原理(FF,BF,SGD等);熟识各种抽样方法(分层,过抽样等),特征处理方法(缺失值处理,离散化等);熟识机器学习框架或工具(SparkMLLib,tensorflow
3、,caffe等),了解源码并能应用项目;具备大数据云平台、计算存储平台、可视化开发平台经验,具备中大型成功项目经验优先;具备大规模分布式计算平台的使用和并行算法的开发经验,对大数据处理及应用有深厚兴趣;具备较强的团队管理能力和沟通能力,思维活跃,前瞻学习能力强;了解软件项目管理、机敏管理方法论,在中大型项目中有所实践。篇2:大数据架构师岗位职责大数据架构师职责任职要求大数据架构师岗位职责工作职责:负责大数据开发、数据挖掘、算法平台的技术架构及建设;负责大数据实时检索分析平台的架构和建设;负责PCG业务算
4、法推荐,实时流计算框架的研发优化;-7-跟踪移动互联网开源大数据框架、新算法框架的技术选型及平台化预研及架构;负责业务挖掘、算法应用的平台支持;负责>5人的技术或FT团队管理。任职要求:5年以上系统建设,设计,架构经验;4年以上大数据系统开发,设计,架构经验;3年以上软件工程管理经验;熟识商业智能系统,熟识数据仓库,熟识数据集市;熟识大数据相关技术:Hadoop,Hive,HBase,ZooKeeper,Spark,Cassandra,MapReduce;并阅读过相关源码;管理过数据量上T
5、级别,节点数300以上的大数据集群,开发,优化并管理过上T级别的大数据作业;熟识常用机器学习算法,了解深度学习,强化学习,迁移学习算法,了解相关原理(FF,BF,SGD等);熟识各种抽样方法(分层,过抽样等),特征处理方法(缺失值处理,离散化等);熟识机器学习框架或工具(SparkML