教育背景
某某某大学(研究生)
某某某大学(本科)
工作经历
某某某公司
- 负责JavaWeb后台核心模块开发
- 负责JavaWeb后台部分模块数据库表设计,解决后台SQL执行效率低等问题
- 负责JavaWeb后台部分模块重构,提高系统的稳定性和可维护性
某某某公司
- 抓取京东全球购、天猫国际、唯品国际大型电商商品列表及价格60 多万条
- 针对价格反爬虫策略,增加头信息,模拟浏览器抓取JS 网页,decode json 数据获得价格
- 针对程序长时间挂起和中断重启后重复抓取情况,用文件保存爬虫状态信息,重启程序读取状态信息继续抓取数据
- 针对程序终止后需手动重启情况,编写Shell 脚本,加入Linux 任务监测,使程序无间断执行,提高爬虫效率
- 设计数据库,存入商品信息的json 码,解决不同平台之间商品类别无法统一和商品检索无法有效进行的问题
- php 并发编程爬取数据,解决高并发量与数据库交互问题,极大提高爬虫效率
开发技能
- 有扎实的JAVA SE 基础,熟悉JAVA 的底层实现、JAVA 类集、IO 和并发及Java 设计模式
- 数据结构和算法基础扎实,能根据具体问题设计并调优算法解决问题
- 熟悉机器学习的相关算法和OR(运筹学) 优化算法
- 熟练使用Google 搜索和技术论坛解决大部分技术问题
- 熟练阅读英文技术文档,平时阅读计算机英文原著书籍来学习新技术
自我评价
- 学习能力强
- 容易上手新技术
- 团队协作与抗压能力好
- 勤奋;有毅力