数据工程师 7k-14k

1.负责科研、教育相关数据的采集工作，从学术期刊、教育机构、公共数据库等多种渠道获取数据，并确保数据的完整性和准确性。
2.对采集到的数据进行清洗，去除无效信息、噪声数据，处理缺失值和异常值，提高数据质量。
3.选择合适的数据库（如 MySQL、MongoDB 等）和存储方案，对数据进行安全、高效的存储和管理，保障数据的可访问性和安全性。
4.对数据进行处理和转换，包括数据整合、格式转换、特征提取等，使其满足数据分析和算法训练的需求。
5.参与数据管理系统的设计与维护，不断优化数据处理流程和存储方案。
任职要求：
1.本科及以上学历，计算机科学、数据科学、信息学等相关专业。
2.熟悉 Python、SQL 等编程语言，掌握 Hadoop、Spark 等大数据处理技术，具备数据处理和分析的能力。
3.具备数据采集、清洗、存储和处理的实际经验，了解数据管理的基本原理和方法。
4.具有良好的逻辑思维能力、问题解决能力和团队合作精神，能够积极沟通协作，高效完成工作任务。
5.具备较强的学习能力和创新精神，能够快速适应新技术和新业务的需求。