简介
项目经验:
1、上海电信数据中心高级数据架构师,负责数据中心项目基础架构、数据建模,ETL、脱敏解决方案。完成上海市人群分布趋势分析项目。每天处理的数据在150TB。主要使用技术(HADOOP,HBASE,HIVE,KAFKA,STORM,KETTLE等)。
2、上海宝钢大数据部分负责人,擅长基于Hadoop的海量数据平台的搭建,PB级数据的处理和基于Hadoop的开发和集群的维护。对hadoop、hive、storm、spark等大数据开源框架有深入的研究,能深入框架源码讲解其原理。通过大数据来监控生产的安全,质检等。主要使用技术(HADOOP,HBASE,HIVE,KAFKA,STORM,KETTLE,SPARK,SQOOP,FLUME等)。
3、日本OKI产品视频发布系统:客户录制各种产品介绍或者产品用法视频,通过一套高清视频处理系统,变成p2p流媒体视频。此项目数据量比较大,所以在各个用户浏览量比较大的页面进行页面的缓存处理。使用的技术:(LINUX/J2EE/ORACLE/WEBLOGIC/JSP/AJAX/SERVLET)。
4、日本千叶县票务系统(Linux/WebLogic/Oracle/jsp/servlet):
该项目是目前日本的票务系统。由多家软件公司合作开发包括有日本的方正株式会社,并且自己开发了一套框架。
5、日本E-MARKETING搜索引擎:
该项目是为各大企业提供的一套DIY的搜索引擎,客户可以根据自己的需要,搜索该客户内部的所有信息。由于客户比较多,所有一共用到了5台linux系统的服务器集群。使用的技术:(Linux/J2EE/MYSQL/apache/tomcat/Hibernate/Struts/Spring/ANT/AWT/lucene/nutch)。
6、北京气象局气象信息实时发布系统(Linux/J2EE/WebLogic/sturts2/spring/ibatis)
目前北京气象局正在使用的信息发布系统,本项目难点,信息量比较大,信息格式非常多,所以需要为所有的信息格式定制一个解析模板。
7、新世界教育信息搜索引擎(Linux/J2EE/DB2/Struts/lucene/wget)
-ETAD-OA综合办公系统(STRUTS/ITABIS/SPRING/DWR2/WEBLOGIC/DB2):本系统是高效率、低成本、跨区域管理的办公自动化解决方案,融合了最新KM思想的第三代办公自动化系统软件,有效提高企业的内部管理和工作效率,降低了整体经营成本。包括档案管理、信息中心、会议管理、财务管理、客户管理、工作流、公文管理等子系统。