李在明
,
Experience
3 Year
Job Type
On the job
Educational
College
Location
杭州市
Chat
Personal Advantage
一、专业技能 1. 编程开发 - 主语言:Python(主攻爬虫方向) - 核心技术: 精通 Requests、Selenium 框架及反反爬策略 掌握异步并行算法(asyncio/aiohttp)、报头模拟、JS 逆向 熟悉 IP 代理机制、验证码处理 擅长抓包解包(Charles/Fiddler)、小程序逆向 前端逆向:HTML 结构解析、JavaScript 动态逻辑分析 2. 前端技术 - 掌握 HTML/CSS/JavaScript 基础语法 - 能独立分析前端加密逻辑(如参数加密、接口签名) 3. 数据分析 - 精通 PowerBI 数据可视化(DAX 建模/仪表盘开发) - 掌握 Python 数据分析栈(Pandas/NumPy/Matplotlib)
Job Preference
爬虫工程师
7-14K
Unlimited
7-14K
China
杭州市
Experience
爬虫工程师
2024-09 - 2025-05
杭州大坝科技有限公司 技术部门
python
Content
O2O本地生活服务平台"来咯乐卟"项目 担任角色 | 数据爬虫开发工程师 核心技术工作: 本地生活数据采集系统开发 基于Python搭建自动化爬取框架,结合Selenium处理动态渲染页面,Requests处理API接口数据抓取 使用Chrome开发者工具逆向解析关键加密参数,通过请求头(User-Agent/Cookie)模拟规避基础反爬机制 采用AsyncIO异步协程技术提升采集效率,设计合理的延时策略保证系统稳定运行 维护包含3万+商家的基础数据库,覆盖餐饮、娱乐等本地生活核心品类 运营数据自动化处理系统 通过Fiddler抓包分析小程序管理后台通信协议,还原数据上传接口逻辑 开发Python自动化脚本批量处理商家图文资料,使用Requests模拟表单提交,将人工上传效率提升5倍 设计异常重试机制处理网络波动,通过日志系统监控脚本执行状态 商业数据决策支持 运用PowerBI搭建数据看板,设计商家质量评估体系(客流量、评分、品类热度等维度) 开发数据清洗规则处理原始数据中的重复、错误信息,提升分析结果可信度 定期输出TOP100优质商家名单,为运营部门的地推计划提供数据支持 • 具备微博广告投放实战经验,熟悉信息流广告/搜索广告/开屏广告等主流投放渠道 • 熟练使用Python爬虫技术(Selenium+Scrapy),可快速抓取微博热搜关联素材及竞品广告创意,日均处理数据量2000+
Education
大数据技术 · College
2021-09-18 - 2024-06-28
浙江邮电职业技术学院
Popular members