岗位职责:
数据平台开发工程师
职位描述:
1.参与数据平台的架构制定、技术选型、规范制定;
2.海量数据离线分析和实时分析系统架构的建设和维护;
3.与数据挖掘和机器学习算法同学合作,保证数据挖掘和机器学习算法的正确性和效率;
职位要求:
1、较强的数据库及SQL能力,熟悉MYSQL等开源数据库,并对Hadoop技术体系有所了解和研究;
2、熟悉UNIX操作系统;
3、精通shell、 python 、perl或tcl脚本语言编程;
4、熟悉Hadoop MapReduce编程,熟悉Pig、Hive等工具的使用;
5、了解分布式存储及分布式计算者优先;
6、有海量数据处理经验者优先;
7、对大数据分析和处理计算有强烈兴趣,乐于接收挑战,自学和独立工作能力强,勤奋肯干,有责任心。
8、良好的英文读写能力