数据采集方案

数据采集方案 篇1

岗位职责:

1、负责货物入库数据的录入工作。准确核对入库货物的数量、品名、产品批号、生产日期和有效期;

2、做好库存货物的效期管理。随时跟踪库存货物的效期状况,对处于警戒区域内的货物要及时报告;

3、做好发货单、退货验收报告单的整理,并及时对帐处理,确保库存帐、物相符,发现问题及时向上级反馈;

4、做好办公室场所和仓库的卫生工作;

5、完成上级交办的其它工作任务。

任职要求:

1、及略懂财务优先

2、两年以上工作经验

3、上班地点人和(可提供住宿)

数据采集方案 篇2

职责:

1、负责大数据平台的技术和产品的设计、开发、优化和维护;

2、负责大数据平台设计文档编写，线上产品的维护;

3、负责系统性能优化，解决各类潜在系统技术风险，保证系统的安全、稳定、快速运行;

4、负责整个产品平台的搭建、多维数据库建设及管控流程设计;

5、参与指标设计，数据建模，负责将数据模型在系统中实现;

6、负责数据抽取、数据交换、实时计算等框架研究及相关产品的研发;

7、负责追踪整体产品过程及质量把控。

任职要求:

1、专业技能:精通Hadoop生态圈中的一项或几项技术，深入了解Hadoop及相关组件的.部署及调优;设计或开发过大容量，高性能，高可用，易扩展的分布式系统;熟悉实时计算/流式计算系统，至少熟悉一项Nosql技术;具有扎实java功底及开发能力;对hadoop，hive，hbase，spark等相关源码有一定了解;

2、学历背景：计算机相关专业本科及以上学历;

3、工作经验：3年以上JAVA开发经验及1年以上大数据研发经验

4、能力素质：具有出色的抽象设计能力，思路清晰，善于思考，良好的团队合作能力、沟通能力、较好的自学能力，具有敬岗爱业的精神。

5、有团队管理经验者优先。

数据采集方案 篇3

职责：

1、负责数据库日常运维、性能优化和故障处理;

2、承担研发过程中的数据库相关问题的定位和解决;

3、负责拟定数据库相关的开发、测试、运维和日常管理规范，承担规范落地的检查工作;

4、完成领导交办的其它工作。

任职要求：

1、至少三年以上MySQL DBA的实战经验。

2、了解MySQL数据库的运行机制和架构体系。

3、熟悉MySQL数据库基本调优，了解MySQL数据库内存与I/O机制。

4、熟悉MySQL数据库数据同步的异步、半同步、Group Replication等基本原理。

5、至少熟练一门脚本编程语言或JAVA编程语言。

6、至少掌握业界中的mysqlslap、sysbench、tpcc-c等任一2种以上性能压测工具。

7、有Cobar、Amoeba、MyCAT使用经历者优先。

8、具备良好的团队合作能力及沟通协调能力，工作主动、积极，责任心强和自学能力较强

9、有docker容器相关经验优先

数据采集方案 篇4

1.参与大数据精准学平台设计与研发，在大数据采集、存储、分析及应用领域都会有所涉及。

2.参与需求分析、系统架构设计、并完成需求设计相应文档的'编写。

3.参与核心代码实现、系统性能优化。

4.保质保量地完成项目组分配的开发任务。

5.协助项目经理进行技术支持工作，共同解决产品研发过程遇到的技术难题。

数据采集方案 篇5

1、负责数据同步、采集平台产品的规划、开发、维护和升级;

2、参与数据同步、采集平台的部署运维，保障系统可用性、稳定性和可扩展性；

3、理解业务系统需求，参与数据同步、采集平台架构的持续优化以满足业务快速发展的要求。

岗位要求：

1、3年以上java系统开发经验；

2、熟悉java并发编程和网络编程，熟悉tcp/ip通信协议，熟悉netty编程；

3、熟悉和理解分布式系统原理，例如cap、分布式一致性协议、高可用策略、分布式应用编程模型等；

4、熟悉网站前后端交互技术和原理，能独立完成前端页面界面开发；

5、能长期保持对技术的学习热情。

加分项：

1、熟悉mysql binlog同步机制者优先；

2、熟悉kafka、protobuf的使用优先；

3、熟悉elasticsearch的使用优先；

4、熟悉容器kubernetes生态者优先。