1、负责金融领域公开数据的采集更新工作,搭建稳定、高效的数据采集体系;
2、熟练处理常规爬虫限制等各类难题,保障数据采集的稳定性、实时性和完整性;
3、负责数据的清洗、去重、纠错补全等标准化工作,确保数据高质量;
4、搭建分布式爬虫、增量爬虫任务体系,优化爬虫调度策略、代理池策略,解决数据延迟、漏爬等问题;
5、配合数据产品、数据分析、算法团队,对接数据需求,输出标准化数据接口和数据文档。
1、本科及以上学历,1~3年专业爬虫开发实战经验,有金融数据采集从业经验者优先;
2、熟练掌握Python爬虫技术,精通JS逆向、接口抓包、参数解密、签名破解;
3、熟练掌握分布式爬虫开发,熟悉代理池搭建与维护,具备高并发大规模数据采集落地经验。
4、熟悉MySQL、Redis等数据库,掌握数据入库、增量更新、数据索引优化等技能;
5、具备较强的问题排查和逻辑能力,对数据敏感度高,严谨细致,能够保障金融数据精准度。
1、有金融数据公司、量化投研、财经媒体、金融终端平台爬虫开发经验;
2、独立搭建过完整金融数据采集、清洗、入库、更新闭环体系;
3、熟悉各类主流财经平台结构及反爬规则;
4、有大规模分布式爬虫、数据ETL流水线落地经验。
1、基础薪资:15~20k,14月薪资,另加年终绩效奖金;
2、期权分配:具备竞争力的期权分配方案;
3、完善保障:顶额五险一金、带薪年假、节日福利、定期体检、月度团建;
4、成长体系:垂直技术深耕通道,专注金融数据+AI领域,定期技术分享、AI赋能培训;
5、轻松氛围:纯技术+应用导向团队,无冗余加班,专注技术落地,团队年轻化、氛围简单纯粹。
1、 深耕金融数据垂直赛道,业务稳定、需求长期可持续;
2、核心技术岗位,直接支撑公司核心数据产品;
3、参与新一代金融数据体系规划和建设;
4、技术落地性强,不做无效开发,个人成果可直接赋能业务变现。
北京市通州区复地金融中心
邮箱: hr@vofar.com
微信: waditu_a (备注:应聘数据)