1、熟练使用SCALA语言，JAVA语言，C语言及shell脚本
2、理解kafka分布式流式平台的生产者，消费者，ack机制，副本机制及底层理解，及kafka基本操作，shell和API
3、理解Redis的持久化Aof与Rdb策略，掌握Api的编写与命令的使用。
4、掌握Spark数据处理引擎底层理解和API操作，包括底层SparkCore，批处理SparkStreaming，离线计算SparkSql
5、掌握Hive分布式数据仓库底层理解和基本操作；理解内部表，外部表，分区和分桶概念
6、熟悉HBASE等非结构化数据库，熟悉informix，ORACLE，等关系型数据库
7、熟练掌握MySql数据库相关操作
8、掌握HDFS分布式文件系统底层理解和shell命令及API操作，
9、理解Mongodb的模型概念，掌握Api的编写与命令的使用。
英语： 读写能力一般 听说能力一般
C语言：熟练
linux操作：熟练
使用makefile：良好
shell编程：良好
SQL：良好
hadoop：熟练
mongodb：熟练
java/scala：熟练

项目名称：社交网站数据分析系统
使用语言:Java, scala, Spark Streaming,SparkSQL,SparkCore
项目描述：该项目主要分析贴吧发帖数据，对数据进行分析，根据每个区域，每个用户，每小时的数据做分析处理，然后分析总体数据的词频来分析舆情情况，计算每天的发帖数和每天的发帖用户
责任描述：
1）从事该项目需求分析，项目设计和开发工作
2）使用maven构建工程模块
3）使用SparkStreaming做实时计算，并且将原始数据存Hbase，热点数据存Redis
4）使用SparkSql做离线计算
5）最终结果保存至MongoDB
6）本地测试项目运行状况，测试编译
7）编写测试文档和开发文档


项目名称：成都农商银行大数据系统
使用语言:Java, hsql,
项目描述：通过舆情的分析，总结出客户特征模型，制作出监控标准。如：通过定义标签信息，一个是用户开户地区比较广泛，另一个是持有比较多的借记卡，可以认为他涉嫌倒卖银行卡的嫌疑。
通过与监控模型的比对，将这些人员分类出来，对其正在开展的业务和之后，将要进行的业务，进行处理和控制。
责任描述：
1）根据农商业务需求，确定需求内容。
2）通过sqoop将数据放到hadoop里，通过hive把上游的数据进行加工，生成一个纯层量的数据，减少批量处理时间，提升批量处理性能。


项目名称：农商核心项目组的维护与改造
使用语言:C,Makefile,shell
项目描述：配合人行261号文和302号文的改造要点，各个商业银行自己的对接系统的开发。
责任描述：
1）根据农商业务需求，确定需求内容。
2）负责维护核心的新需求，即人行261号文和302号文的功能实现,主要涉及24小时延迟转账及涉案账户的需求改造,一类户的改造，新增二类户及相关的需求等的功能实现。
3）负责维护运维、业务提出的缺陷修复，如：对日终二任务耗时过长，分析其任务，对日终二部分任务优化等相关维护。
4）负责后期的文档编写及配合测试工作。

2011.09 - 2016.10 南天佳信 （5年2个月）
软件开发工程师 | 8001-10000元/月
计算机软件 | 企业性质：股份制企业
项目名称：四川农信金融IC卡一、二期借记卡项目
项目时间：2011.09 — 2013.07
硬件环境：IBM小型机(AIX系统)
责任描述：
1.	根据四川农信提供的需求文档,确定需求内容。
2.	负责四川农信金融IC卡的柜面开发,使用南天公司的AutoBranch工具，按需求的功能完成前端柜面的界面开发。
3.	负责根据需求文档的功能要求，在后台AIX系统中进行C编码开发日间交易。
开发柜面\ATM\POS渠道发起的日间日常交易，在后台前置机AIX系统中处理与外围系统（核心、IC卡系统等第三方系统提供相应的报文接口）交互的处理数据。
4.	负责四川农信银联电子现金类的日间交易开发，负责处理行内渠道发起到后端前置机的数据，根据银联规范文档的报文规范要求处理交互数据转发给银联，以及银联返回的处理数据，负责行内发起的本带他交易与他行受理发起的他带本的日间交易处理。
5.	负责配合测试，会使用银联仿真离线系统测试。
6.	负责后续文档的编写。


项目名称：四川农信金融IC卡借记卡项目的迁移改造
项目时间：2013.07 — 2015.01
硬件环境：IBM小型机(AIX系统)
责任描述：
1.	根据四川农信的项目文档，进行确定改造内容，负责移植到新系统中，各功能模块与日间交易处理交互数据的变化，做好相应的功能移植改造。
2.	负责在新环境中开发新增业务需求的日间交易
3.	负责后期移植改造后产生的测试，配合相关测试人员进行后续测试，以及处理测试过程中发现需要修复的内容。
4.	负责后期的详细改造文档；
5.	负责新系统上线后，针对金融IC卡借记卡账户的生产维护与支持。


项目名称：四川农信银联项目维护与改造项目
项目时间：2015.01 — 2016.10
硬件环境：IBM小型机(AIX系统)
责任描述：
1.	负责解决在生产过程中，运维发起的银联项目中日间产生的问题事件。
2.	负责解决由运维发起相关电子现金脱机消费在生产过程中产生的问题。
3.	负责提供电子现金脱机消费在账务处理过程中出现的错账的调整方案。
4.	负责银联项目中涉及到与银联交互相关交易的业务需求功能改造，以及实际生产中产生的缺陷修复改造。
5.	负责解决POS商户自动入账过程中产生的问题,主要解决商户入账金额与实际入账金额不符，或查询机构分润，以及内部帐出现异常金额的分析。

项目名称2018.05 - 2019.01 分布式舆情系统
责任描述1）接收数据
使用爬虫获取帖子ID，发帖者ID，发帖者名称，发帖者所属区域，总共发帖数量，发帖时间，发帖内容，区域Id数据，通过负载均衡和效率的综合考虑采用Kafka。
通过将数据创建成一个case class来封装成一个对象,最后将数据都写入kafka。
由于庞大的数据中丢失一条数据影响不大，为提升效率将kafka的Ack机制设置为1，至少保证leader接受到数据。
2）实时计算
a、实时统计每个区域用户最高发帖数，取区域前5名同时存到MongoDB
b、实时统计每个小时用户最大发帖数量
读取kafka数据进行实时处理，将发帖者所属区域字段对应代码在MongoDB的数据表中，需要从mongodb中读取区域对应代码，将数据合成保存到hbase中。
考虑到在集群中每个Execoutor中创建连接，太浪费资源，采用scala的lazy机制，将连接广播到每个节点，每个节点共享该连接，节约资源开销；
使用sparkStreaming做实时计算，因为多个业务计算的同一份数据，所以此处将RDD数据cache；因为jvm的内存的有限，所以将实时计算的数据存在Redis分布式内存数据库中，将最终结果保存至MongoDB。
3）离线计算
统计帖子内容中，出现频率最高的100个词语，及它们的出现次数，保存到Mongodb里。
通过使用SparkSql做离线计算，使用ansj作为词频工具，依赖于ansj的词库来进行分词做词频计算，将结果都保存在Mongodb。
项目描述该项目主要针对于社交网站数据分析。
分析贴吧发帖数据，对数据进行分析，根据每个区域，每个用户，每小时的数据做分析处理，然后分析总体数据的词频来分析舆情情况，计算每天的发帖数和每天的发帖用户；

2008.09 - 2011.07 成都东软信息职业学院 其他 大专

加米谷培训
成都尚观科技
培训中学习linux基础，Makefile，熟悉shell编程，内嵌汇编，和s3c6410上驱动开发