咔咔彩票

  • EN
 
  • app download

登录 / 注册咔咔彩票

职场百科   职场文库   招聘信息  

您所在的位置:最新招聘信息 >全国职位信息 >数据采集工程师招聘信息

职位推荐:建筑规划师房地产土建预算红酒导购工程检测男科医生净水工艺餐饮策划电子设计法务实习生网页设计师地铁安检助理物业管理师电话催收临床医学品牌策划

职位分类:不限

更多
更多:

已选条件:
数据采集工程师
清除条件
全选
申请职位

控制与数据采集系统开发中国科学院上海高等研究院上海-浦东新区1-1.5万/月07-17

学历要求:硕士|工作经验:无需经验|公司性质:事业单位|公司规模:1000-5000人

岗位职责1.参与光束线控制系统的建设;2.负责实验站控制与数据采集系统的开发。专业背景与技能1.计算机、物理等相关专业;2.熟悉C/C++程序设计,掌握linux程序开发;3.具有控制或数据采集系统开发经验;4.有EPICS开发经验者优先考虑;5. 思想品德端正、工作责任心强,具有良好的沟通能力和团队及协作精神。

立即申请
收藏

后端JAVA高级开发工程师(数据采集)深圳市拓安信计控仪表有限公司深圳-南山区2-3万/月07-17

学历要求:本科|工作经验:5-7年|公司性质:民营公司|咔咔彩票公司规模:150-500人

岗位职责: 1.根据产品要求进行开发,与团队能够快速融合和完成任务;  2.负责主导数据采集和协议相关等技术开发;  3.参与技术整体规划和实施,编写相关设计和开发文档;  4.负责数据采集整体技术架构、编程实现和方案编写;  5.负责完成其他后端开发任务; 6.负责与产品、客户沟通解决数据采集技术问题。 任职要求 1、本科及以上学历,计算机、软件相关专业; 2、5年以上Java软件开发工作经验;掌握Java开发框架,精通TCP/IP、Socket、 HTTP等网络开发; 3、精通网络编程及分布式系统架构技术,有redis,zookeeper,mq的使用经验  4、精通Netty Java NIO开发和基于TCP/UDP的私有通讯协议或标准modbus/NB-IoT/ CoAP/MQTT等协议的编程  5、精通多协议适配框架搭建、对各类协议有深入理解、能快速完成同类新协议的接入;  6、精通数据采集定时任务框架搭建、采集集群策略等技术,有支持大量设备接入的 开发能力; 7、熟悉多线程、高并发开发和处理,大数据存储和JVM优化; 8、有物联网技术开发经验优先  9、熟练掌握Java语言,熟悉Spring、SpringBoot开发,对分布式有一定理解,; 熟悉常用的设计模式  10、具有良好的沟通能力、团队合作精神和职业稳定性,工作积极主动、服从安排, 能承受较大压力,责任心和学习能力强。  公司福利:1、薪酬福利:五险一金,补贴补助,高额奖金,股权激励等2、关怀福利:     国家法定节假日,提供住宿;     享有带薪年休假,春节假等假期;传统佳节礼品福利;     不定期举行比赛、团建活动、年度旅游等;      职称评定, 落户深圳等,助你安家立业。3、晋升通道 :专业、管理双通道发展体系,轮岗机会可供选择。           

立即申请
收藏咔咔彩票

产品开发工程师-数据采集博众精工科技股份有限公司苏州-吴江区1.5-2.5万/月07-16

学历要求:大专|工作经验:3-4年|公司性质:民营公司|咔咔彩票公司规模:1000-5000人

职责描述:1. 负责对不同通讯协议的设备进行通讯代码编写,并做成标准接口供MES调用;2. 负责独立设计自动化通讯架构,包括以太网、总线等方式;3. 开发设备相关的管理系统。4. 负责各类标机(CNC加工中心、注塑机、冲压机)、非标设备(PLC、工控机)联网通讯。任职要求:1、了解OPC相关协议,并有过基于OPC/OPC UA协议的软件开发经验;2、了解Profinet、Modbus 、S7等通讯协议,熟悉RS232、RJ45、RS485等通讯接口特性;3、有比较好的逻辑思维能力,能独立设计数据采集方案;4、能熟练使用.NET或JAVA平台进行软件开发;5、至少2年以上工厂设备数据采集经验,对 各类品牌PLC、组态类SCADA系统(如:Wincc、组态王、开物 等)有一定的了解,有过Fanuc、西门子828D/840D等系统的对接实际开发经验更佳;

立即申请
收藏

爬虫开发工程师/数据采集工程师上海晟钧建筑工程有限责任公司上海-黄浦区1.5-2万/月07-14

学历要求:本科|工作经验:3-4年|公司性质:民营公司|公司规模:50-150人

爬虫开发工程师/数据采集工程师岗位职责:1、负责数据抓取平台规划和建设,完成数据采集与爬取、解析处理和入库;2、研究各种网页探寻特点和规律,负责网页信息抽取、数据清洗工作;3、负责领域知识的定向爬取、深度提取和挖掘;4、配合数据清洗、整理、去重和合并工作;5、负责爬虫相关技术的创新和优化。任职要求:1、计算机相关专业,本科以上学历,3年以上爬虫领域工作经验,1年以上爬虫团队合作经验。2、熟悉Python开发,熟悉wxpython,熟悉抓取框架,有完整的界面化爬虫平台开发经验;3、熟悉Web抓取原理及技术实现细节,对HTTP协议和HTML有深入了解;4、熟悉数据抓取和整合技术,从结构化和非结构化数据中提取信息;5、熟悉反爬机制,能够通过逆向js脚本,获取参数,熟悉使用正则表达式/验证码加密处理/代理池,熟悉行为验证码识别、模拟登陆。以下经验之一者优先考虑:1、有房地产项目类数据爬取经验者优先

立即申请
收藏

数据采集开发工程师上海润迅商凯电话商务有限公司上海-长宁区1.5-2.2万/月07-13

学历要求:本科|工作经验:3-4年|公司性质:民营公司|公司规模:1000-5000人

咔咔彩票岗位职责:1.负责完成外部业务系统的数据的对接、采集;2.根据数据采集标准化规范,完成数据规范化清洗、预处理、入库3.负责数据采集相关的ETL开发及维护;4.负责采集数据的质量监控的开发、部署和维护工作;5.协助完成数据仓库的模型的标准制定,实施,监督工作。任职要求:1、三年以上BI工作经验,至少一年以上数据建模工作,熟悉一种建模工具;2、精通java、Python语言,两年以上开发经验;3、精通Hadoop,hive,spark,sqoop等;4、精通MySQL等主流数据库的应用设计、性能调优及存储过程的开发具有2年以上ETL相关开发经验;5、对ETL有较深刻的认识,对于数据的定义有独到理解,熟悉至少一种ETL工具;6、拥有良好的代码习惯,要求结构清晰,注释清晰,命名规范,逻辑性强,代码冗余率低,尤其是习惯写开发文档。

立即申请
收藏咔咔彩票

数据采集软件开发工程师苏州太谷电力股份有限公司南京-雨花台区1-2.5万/月05-25

学历要求:本科|工作经验:在校生/应届生|公司性质:民营公司|公司规模:150-500人

具体要求:1. 熟悉国网用电信息采集系统Q/GDW1376.1-2013通讯协议、Modbus通讯协议;2. 具备电力采集协议开发经验者;3. 熟悉嵌入式Linux编程(C/C++),掌握主流数据结构和基本算法,有良好的编码习惯和技术文档撰写习惯;4. 熟悉电力基本知识和电力数据采集行业业务流程,熟悉采集终端和电表的技术规范、开发流程和调试方法;5. 熟悉电力能效监测系统技术规范、国网用电信息采集系统技术规范、电能表技术规范和行业标准;6.211、985院校毕业优先考虑。主要职责:1. 负责376.1-2013通讯协议、Modbus通讯协议的应用开发;2. 负责嵌入式平台上数据采集软件的开发工作。

立即申请
收藏咔咔彩票

Python 爬虫开发工程师深圳市迈维智视科技有限公司深圳0.8-1.5万/月07-17

学历要求:本科|工作经验:2年|公司性质:民营公司|公司规模:少于50人

咔咔彩票岗位职责:1.参与分布式爬虫和数据采集系统的架构设计和开发;2.负责网络数据抓取规划、增量爬取指定渠道的数据;3.设计爬虫策略和防屏蔽规则,提升网页抓取的效率和质量;4.参与数据层建设,专注于垂直领域数据爬取,进行多平台信息的抓取和分析;5.实现数据提取、清洗、结构化、入库、统计分析等需求;6.研究优化算法,提升爬虫系统的稳定性、可扩展性。职位要求:1. 本科或以上学历,计算机或相关专业;2年或以上python爬虫开发相关工作经验;2. 扎实的python基础,熟悉Python的多线程/进程/协程等操作,有良好的编码习惯,掌握面向对象设计原则,可熟练运用常见的设计模式;3. 熟悉Oracle,mysql等常见数据库;4. 熟悉爬虫开发,熟悉常用爬虫框架如Scrapy、Requests、XPath等, 并了解原理和机制。了解常见的反爬手段及其应对措施;5. 熟悉WEB到后端的数据链路和交互,有linux/unix下项目开发以及程序调试经验;6. 善于沟通和逻辑表达,良好团队合作精神和积极主动的沟通意识,有项目管理经验优先;7. 有强烈的上进心和求知欲,善于学习和运用新知识;8. 熟悉java/kotlin/php 等其它语言者优先。

立即申请
收藏

大数据开发工程师华新水泥技术管理(武汉)有限公司武汉-洪山区07-17

学历要求:本科|工作经验:3-4年|公司性质:上市公司|咔咔彩票公司规模:5000-10000人

岗位职责: 1.负责数据采集、数据处理、数据分析应用功能的开发 -根据业务团队、软件开发团队和AI算法开发经理的需求,设计并开发数据采集接口、数据处理和分析应用程序; -设计数据清洗规则,开发数据清洗工具,并与系统运维团队和软件开发一同进行数据清洗,保证数据健康; -负责对涉及项目的大数据存储结构进行设计,以确保其能有效支撑各类应用开发; -开发并优化边缘计算程序、流数据计算程序。 2. 参与公司大数据计算平台和边缘计算平台的设计和搭建工作 -负责公司大数据计算平台的设计工作,并与系统运维团队和软件开发一同进行搭建; -负责公司边缘计算平台的设计与搭建工作; -负责对大数据计算平台和边缘计算平台的性能需求进行评估,并提出容量需求建议。 3. 负责进行大数据开发应用领域的技术研发 -不断学习最新的大数据计算和开发技术,并将其应用到实际当中; -对团队成员进行基础培训; -管理内部人工智能开发相关的知识和资料,并对其进行保密。 任职要求: 1.教育背景(含所学专业): -计算机、通讯、自动化、应用数据或相关专业; -本科及其以上学历。 2.工作经验: -3年及以上大数据或后端开发相关工作经验; -主导或负责过至少一项大数据应用开发的项目; -有数据清洗、数据结构设计相关的项目经验; -有过实时流数据处理开发经验; -有过工业自动控制程序实现经验者优先。 3.专业技能: -至少熟悉一种大数据开发和计算平台框架,以及流式数据计算处理技术; -熟悉各类数据采集、存储和处理方法和工具,可高效进行数据处理; -熟悉数据采集、数据挖掘、数据清洗等方法和算法; -至少熟练掌握C/C++/Java/Python之一,能熟练编写数据采集和响应接口; -了解传统机器学习算法和深度学习算法,能理解AI开发工程师的算法落地实现需求; -能独立搭建大数据开发平台及边缘计算平台; -熟悉工业领域的数据收集与处理方式者优先 ; -熟悉自动化控制实现方法者优先。 4.行为能力: -具备良好的计划及时间管理能力,结果导向; -具备勇于挑战的开放思维和创新精神; -具备良好的团队协作精神和沟通能力。 5.领导力和管理能力: -追求卓越 6.文化和语言能力: -英语:能够借助翻译工具阅读本专业一般的英文资料 7.其他要求: -项目进度紧张时可能安排加班; -项目上线调试期间可能需要出差。

立即申请
收藏

爬虫开发工程师亿翰智库上海-静安区1-1.5万/月07-17

学历要求:本科|工作经验:3-4年|公司性质:上市公司|咔咔彩票公司规模:150-500人

咔咔彩票爬虫工程师岗位职责:1、负责数据抓取平台规划和建设,完成数据采集与爬取、解析处理和入库;2、研究各种网页探寻特点和规律,负责网页信息抽取、数据清洗工作;3、负责领域知识的定向爬取、深度提取和挖掘;4、配合数据清洗、整理、去重和合并工作;5、负责爬虫相关技术的创新和优化。任职要求:1、计算机相关专业,本科以上学历,3年以上爬虫领域工作经验,1年以上爬虫团队合作经验。2、熟悉Python开发,熟悉wxpython,熟悉抓取框架,有完整的界面化爬虫平台开发经验;3、熟悉Web抓取原理及技术实现细节,对HTTP协议和HTML有深入了解;4、熟悉数据抓取和整合技术,从结构化和非结构化数据中提取信息;5、熟悉反爬机制,能够通过逆向js脚本,获取参数,熟悉使用正则表达式/验证码加密处理/代理池,熟悉行为验证码识别、模拟登陆。以下经验之一者优先考虑: 1、有房地产项目类数据爬取经验者优先。

立即申请
收藏

MES开发工程师深圳市金讯祥科技有限公司深圳-光明新区0.6-1万/月07-17

学历要求:本科|工作经验:2年|公司性质:民营公司|公司规模:少于50人

岗位职责1、参与制造执行系统(MES)软件开发; 2、参于项目需求分析、MES系统框架设计; 3、参与完成项目测试,部署实施, 解决项目中的关键问题和技术难题; 4、负责技术文档的撰写;任职要求:1、本科及以上学历,计算机、自动化等相关专业;2、具有2年及以上工作经验,熟悉B/S、C/S、精通C#软件编程;精通SQL语法及Mysql、sql server或Oracle数据库应用开发;3、有MES、生产管理或ERP等方面软件开发经验; 4、了解制造行业,熟悉自动化控制系统、数据采集系统,有自动化生产设备、测试设备的整合、联网经验者优先,熟悉PLC编程者优先;5、具有良好的沟通、项目管理、需求分析、系统分析设计的能力; 6、同时具备android/ios平台应用开发3-5年开发经验者更佳(请提供作品演示)工作地点:工作地点在深圳市光明新区。

立即申请
收藏咔咔彩票

大数据开发工程师武汉格蓝若智能技术有限公司武汉-东湖新技术产业开发区1.5-2万/月07-17

学历要求:本科|工作经验:5-7年|公司性质:民营公司|公司规模:50-150人

岗位职责要求:1、负责数据中台相关功能组件开发及文档输出;2、负责基于阿里云数据中台架构,参与数据项目中数据开发工作,包括并不限于:数据采集、清洗、加工、转换、数据分析、数据模型设计等;3、负责数据中台的相关维护和开发;4、参与大数据相关算法的实现与研究。岗位要求1、计算机相关专业,本科及以上学历,3年以上大数据相关工作经验;2、熟悉Linux环境及常用指令,掌握Shell、Python脚本开发,能够独立承担数据处理工作以及数据接口服务开发等工作;3、熟悉阿里云集群(MaxCompute、DataWorks)产品及使用调优,有实际操作经验;4、精通Hadoop,Spark,Flink,HBase,Hive,Kafka,Druid等大数据组件的原理和调优,至少有3年以上的运维和开发经验。

立即申请
收藏

高级开发工程师(LabVIEW)北京中科泛华测控技术有限公司北京-海淀区1.5-2万/月07-17

学历要求:本科|工作经验:5-7年|公司性质:民营公司|公司规模:50-150人

咔咔彩票1、独立承接或辅助参与测试系统开发项目(数据采集分析等相关项目);2、能够独立完成系统电气设计或软件开发(labview);3、能够按照项目节点要求完成项目现场调试、文档编写等工作。任职要求:1、测试自动化、计算机或者相关工科学历或工作背景,相关工作经验2年以上;2、熟练使用Labview, 熟悉生产消费多线程设计,对数据实时保存、传输及缓冲等机制能够灵活应用,熟悉NI PXI、PCI等总线各类硬件,精通上下位机通信(TCP/OPCServer等),报表生成,队列管理,数据格式等,开发过labview RT平台程序优先;3、熟练使用电气开发软件如Eplan,有过中大型项目电气设计的经验,能够自主完成项目的全系统电气设计;4、熟悉SQL Server/MySQL等数据库者优先,有较为丰富的基于labview语言的数据库开发经验;5、熟悉各类传感器工作原理者优先,能够完成项目传感器前期选型、关键参数比较、现场电气接线及调试;6、能够适应现场调试、出差的项目安排。

立即申请
收藏咔咔彩票

大数据开发工程师武汉海星通技术股份有限公司武汉-江汉区1-1.8万/月07-17

学历要求:本科|工作经验:3-4年|公司性质:民营公司|公司规模:少于50人

岗位职责:1、设计合理数据采集任务,数据采集平台设计及开发;2、负责日常数据采集任务的监控与质量检验;3、负责海量数据的分析、挖掘、可视化;4、参与数据平台各系统的性能分析与系统优化。任职要求:1、本科及以上学历,拥有3年以上工作经验;2、精通Java和Python等,编程能力扎实;3、熟悉Linux开发环境,能进行shell脚本的编写;4、熟悉Kettle或其他开源ETL工具的使用 ,有完整的数据仓库类项目的开发经验更佳;5、熟悉sqoop,flume等Hadoop生态圈ETL工具;6、对待工作有热情,并有良好的逻辑分析能力和学习能力。

立即申请
收藏咔咔彩票

c++/c#运维开发工程师上海宝信软件股份有限公司湛江分公司湛江4.5-6千/月07-17

学历要求:大专|工作经验:在校生/应届生|公司性质:国企|公司规模:50-150人

咔咔彩票1. 负责湛江钢铁 L2 过程计算系统业务维护,包括生产数据管理,物料跟踪,生产数据采集处理,设备参数预设定计算等;2. 负责业务系统的功能新增,bug 修复等二次开发工作;3. 负责生产设备参数的优化更新,过程计算模型的调优;4. 负责业务系统的硬件,软件的状态监控,备份恢复,变更上线投运等;5. 负责业务系统的故障处理,原因分析;6. 负责与生产方进行系统问题反馈,变更需求协商等沟通工作.任职要求1.计算机科学与技术、电气自动化技术,冶金、数学与应用数学等相关专业毕业(专科及以上)2. 熟练使用 Linux 操作系统,熟悉 Shell/Python/Perl 或其他脚本语言者优先;3. 熟悉 SQL 数据库操作语言,了解 DB2 数据库者优先;4. 熟悉 Linux 系统下的 C/C++ 软件开发;5. 熟悉 Windows 系统下的 C# 软件开发;6. 有较强的独立思考和问题分析能力,有团队合作精神; 

立即申请
收藏

嵌入式开发工程师杭州凌石信息技术有限公司杭州-西湖区1-1.5万/月07-17

学历要求:大专|工作经验:2年|公司性质:民营公司|公司规模:少于50人

岗位职责:1.参与项目研发工作,负责软件项目、模块的需求分析、设计、编码实现、验证;2.负责基于ARM Cortex架构的嵌入式系统的固件开发、调试;3.负责数据采集、处理、控制、通信等模块组件的设计和开发;4.完成上级交付的临时性工作。岗位要求:1.计算机、通信、电子或相关专业学历,二年以上项目开发经验;3.熟懂硬件电路图,精通C/C++语言及嵌入式实时操作系统理论,熟悉IIC、SPI、CAN、UART、TCP/IP、USB协议等协议,拥有开发过ST、TI等主流MCU相关经验的优先;4.熟悉各种外围接口编程,对常用的外围器件如:SRAM、LED、A/D、 D/A等有一定的应用经验;5.熟悉LINUX等开发环境,了解各种网络应用编程模式及其应用范围;6.善于独立解决问题,有较强的学习和沟通能力,具备良好的合作和敬业精神;7.有完整的产品开发经验者优先。

立即申请
收藏

物联网开发南京南邮通信网络产业研究院有限公司南京-栖霞区1-1.5万/月07-17

学历要求:本科|工作经验:3-4年|公司性质:民营公司|咔咔彩票公司规模:50-150人

咔咔彩票岗位职责:(1)负责物联网平台整体架构设计、体系及其标准制定和功能模块设计;(2)负责物联网数据采集层、数据传输层、云服务层、业务应用层的数据传输协议,以及接口规范定义及云平台架构搭建,并制定产品解决方案;(3)编写相应的设计报告、技术标准和技术文档;(4)负责软件框架代码的开发和调试工作,物联网数据采集设备安装、调试,后期数据采集、脚本编写;(5)参与物联网感知数据的数据分析和数据可视化工作;(6)解决工程项目当中遇到的问题,进行系统性能优化和安全加固,保证平台安全、稳定、快速运行;(7)负责与站点运维人员的沟通了解工作,并对运维人员进行日常故障的培训工作,指导参与配合简单故障的处理;(8)负责收集终端硬件、程序、功能异常和建议,重大故障的汇总、统计、分析上报、运维技术积累、总结、交流。任职要求:本科以上学历,物联网、计算机、通讯工程、自动化等相关专业,3年及以上物联网开发经验岗位要求:(1)熟悉MQTT、Modbus、OPC等物联网协议,熟悉WiFi/BLE/LoRa/NB-IoT/eMTC等无线通讯协议;(2)熟悉SDK组件开发流程,独立开发过SDK组件;(3)熟悉HTTP、TCP/IP、MQTT协议;(4)熟悉C/C++/Java等语言中的一种;(5)熟悉物联网技术,有相关开发经验者优先;(6)熟悉分布式、多线程及高性能的设计与编码及性能调优者优先;

立即申请
收藏

数据采集分析员广东中思拓大数据研究院有限公司广州-天河区8-10万/年07-17

学历要求:本科|工作经验:1年|公司性质:民营公司|公司规模:50-150人

咔咔彩票岗位职责:1、主要负责相关资料、数据的收集整理,基础数据录入、数据统计工作,定期收集和监测相关市场运行数据;2、文字资料收集整理,如政策信息摘录整理,形成标准化、可以统计的存储格式;3、负责数据清洗和核对,保证系统数据与实际数据一致;4、数据汇总、图表制作,具备一定数据分析和可视化能力;5、协助数据产品需求沟通,为团队提供沟通支持,优化数据的展现方式;6、公司交办的其他事项。任职要求:1、本科以上学历,经济学、统计学、数学、土地资源管理、地理信息系统、城市规划、房地产开发与管理等相关专业优先,优秀毕业生亦可;2、严密的逻辑思维能力、对数据敏感,熟练运用EXCEL进行数据处理或其他数据展示工具;3、创意能力强,工作细致、严谨,具有较强的责任感、良好团队合作精神;4、敏锐的观察力,较强的文字功底,熟悉文字排版,熟练使用Word和制作PPT;5、思路开拓,较强的沟通能力;6、熟悉八爪鱼等采集工具优先,有上市公司、金融、经济、土地、楼盘等数据处理工作经验优先;6、有志于从事数据挖掘、信息分析、市场分析及相关行业的分析研究。

立即申请
收藏咔咔彩票

高级爬虫开发工程师深圳市天泰网络技术有限公司深圳1.6-3万/月07-17

学历要求:大专|工作经验:5-7年|公司性质:民营公司|公司规模:150-500人

【岗位职责】高级爬虫1. 负责各大航空公司官网或者APP数据采集,主要是动态数据。2. 负责网页爬虫架构设计(包括基础资源,如代理池技术、反爬技术、浏览器采集技术等等)与核心技术研发。3. 负责API或者爬虫获取数据,数据解析和分析等功能的研发。4. 验证码、模拟票预定、出票等。【任职要求】1. 大专以上学历,计算机专业,211/985优先,爬虫牛人;2. 熟悉常用的浏览器调试技术。3. 熟悉常见的反爬机制及对应的应对措施,如cookie识别。4. 精通网页爬虫、分布式、多线程开发技术。5. 具有攻克难题的强烈兴趣,以及提升技术能力的意愿。6. 善于主动学习,责任心强,能够承受较高的工作压力。【工作福利】1.工作时间:周末双休。2.工作地点:周边地铁,4/9号线-上梅林站,卓越城。3.办公环境:环境舒适,营业面积2000余平。4.工作福利:法定假期,社保公积金、定期体检、年终奖、工龄奖、全勤奖、餐补、职业生涯通道、员工宿舍。天泰,欢迎你的加入。(公司200+人规模,技术团队20+人,产品、项目、java、.net、爬虫)

立即申请
收藏

中级数据开发工程师哈尔滨安天科技集团股份有限公司成都-高新区1.1-1.8万/月07-17

学历要求:本科|工作经验:3-4年|公司性质:民营公司|咔咔彩票公司规模:500-1000人

职责要求1.负责大数据平台的设计、研发和持续优化2.负责大数据管理与调度,2.负责理解业务需求,进行大数据建模与大数据分析3.参与解决大数据基础框架项目中的关键框架问题和技术难题4.编写相关技术文档技能要求:1.具备三年以上大数据开发经验2.精通python开发语言,精通机器学习、深度学习及其计算模型开发经验3.掌握apache生态圈分布式相关技术,具有SPARK项目开发经验4.熟悉大数据处理流程,包括数据采集、清洗、预处理、存储、分析5.有网络安全数据分析经验者优先

立即申请
收藏咔咔彩票

数据开发工程师深圳市第一卫电子有限公司深圳-龙华新区1-1.5万/月07-17

学历要求:本科|工作经验:2年|公司性质:民营公司|公司规模:500-1000人

岗位职责 1. 负责公司BI、大数据应用平台的系统架构设计、技术规划、应用设计与开发。 2. 负责数据采集(包括多系统数据API对接、外部数据通过爬虫或其他方式的采集)、ETL作业设计与开发,数据同步。 3. 负责数据平台相关数据管理工作,如研发规范、数据规范的制定,并落地。任职要求 1. 本科及以上学历,计算机相关专业,两年以上数据开发经验 2. 熟练掌握及使用java或Python,熟练使用Sql/HiveSql编程语言 3. 熟悉DataStage或informatic等主流ETL工具 4. 熟悉Hadoop生态(Spark/Hive/HDFS/Hbase/MapReduce等),熟悉离线/实时计算整体框架 5. 了解数据中台架构,维度建模,并对数据分层有一定了解 6. 有0到1的数据平台搭建经验优

立即申请
收藏

全选
申请职位
共182页,到第确定

-中高端人才求职平台

招聘职位: 后端开发,前端开发,移动端开发,测试,产品/设计/运营
招聘职位: 财务审计,合规与风险控制,后台运营,投行,销售
招聘职位: 房地产开发,建筑工程,规划设计,商业,市场营销
招聘职位: 汽车新能源,软件与汽车电子,生产制造,质量管理,供应链管理
彩客彩票平台-咔咔彩票 彩客彩票平台-咔咔彩票 彩客彩票平台-安全购彩 彩客彩票平台---咔咔彩票_欢迎您 彩客彩票平台-Welcome