Sonyfe25cp的玩具

home

Everyday In Bosszp

22 Jun 2016

##2016


0622开始 — 炸弹卡 一周 置顶卡 两周 相关推荐 两周 JDspam 两周 bossup 一周 chatspam 两周 0820 spark,hadoop,xxx 一周,0827 把bossup的问题解决 一周,0903 杂七杂八的需求搞了一周,0909 整理基本特征 一周 0918 出基本的分类模型用于f1 一周 0924 上线新f1,解决问题 一周 0930

###待做 准备encoder和decoder的实验数据 分析用户聊天行为数据和聊天内容,找出潜在的广告狗和坏用户 对不同action找出每个正常用户的平均值,对超标用户进行分析 完成tf视频,encoder,decoder的实验 分析被封禁用户的聊天内容 把docker-compose搞定,拿小项目做实验

###20170210 fix搜索问题

###20170209 上午修置顶卡购买判断valid的bug 下午整理一段式boss搜索热门词的需求

###20170208 上午搞定suggest -下午部署cv-extract到线上服务器appsearch05,06

###20170207 上午给lz导相应的数据 完成搜索改版需求 重构exp_prediction代码

###20170206 处理F1转发器中请求置顶卡的bug 修正prediction表的问题, 应用到现有F1上

###20170204 修bug,整理简历抽取的代码

###20170203 实现5.34需求–自动补全

###20170124 清理代码尾巴,完善注释

###20170123 完成cv解析与server端对接 搞定cengine的训练和使用

###20170122 整理cv相关语料

###20170113 处理工作经历不限相关 实现533运营需求 二月TODO,变更牛人边界,看索引时间

##2017

###1215 查普搜的情况,把搜职位时的学校放上去 看看fluent的工作方式 整理消息过滤的代码,共享其数据库,便于JD审核使用

###1214 完成趋势的js图 增加个已炸牛人列表 x

###1213 上线道具,测试炸弹代码

###1212 超级炸弹

###1209 调整c端道具的虚假数据 完成b端统计功能

###1208 重构c端道具代码 ###1207 继续完善c端道具卡 实现炸弹卡扩桶 ###1206 继续完善c端道具卡 ###1205 修普搜的bug 继续完善c端道具卡

###1203 解决高搜分段中关键词错误等问题

###1202 普搜切换上线,修各种bug

###1201 置顶卡扩桶上线 炸弹卡增加学历要求上线 网页版切词问题上线

###1130 调整jobwelcome,降低地产,虑重 完成brandjob facet

###1129 调整网页版jobwelcome接口

###1128 面试俩人,录用一个 调整jobsearch和jobwelcome接口

###1125 实现桶文件解析,预备好数据准备置顶卡扩桶上线 实现置顶卡价格文件解析,便于日常查看,

###1121-1124 实现普搜基本功能,测试,调优,上线失败(缺自动完成功能) 实现商业组的炸弹工具

###1117 上午面试 下午开会,完成高搜web版本

###1116 分析已经购买商业道具的用户的情况,聊天数等内容

###1115 面试俩人 把普搜的接口拿到,实现基本接口

###1114 实现5.20需求 对比两份扩桶策略的数据,交给商业组评估

###1111 实现业务中对搜索公司的需求,增加过滤器

#

#1109,1110 查各种业务上反馈回来的bug 完成thrift-test-framework – 实现了基本类型的支持,map/list/枚举类型还没搞定

###1108 处理bombb的数据 增加测试代码

###1107 处理志山的尾巴工作

###1102 03 04 05 请假

###1101 处理商业工具的日期问题 对F1中提出的bug进行修复并上线 处理Flume的插件 – 学习代码,测试,部署线下

###1031 完成商业组用的置顶卡工具 – 已上线 清理msgfilter的符号过滤问题 – 已上线

###0627 上午:面试,后台权限申请 下午:梳理boss直聘中用户的浏览行为数据库及查看方式; 晚上:约建光面谈算法

###0628 上午:实现炸弹卡的日期筛选并测试; 下午:找峰哥review下代码,梳理与其他数据库的关系;

###0629 上午:请假回校 下午:修改炸弹卡bug并部署

###0630 上午:请假回校 下午:系统的回顾推荐系统的知识,整理成脑图;教基本MVC给飞,实现基础浏览轨迹web项目

###0701 上午:完善用户浏览轨迹web;梳理现有牛人的资料内容和职位资料内容 下午:完成用户轨迹web项目;思考如何作推荐

###0704 上午:测试lstm on address;理置顶卡的需求; 下午:整理word embedding的信息,完善review中张老师的建议;看一下slim论文;

###0705 上午:安装1080驱动 下午:学习单建国组的算法,考虑如何针对流量进行处理;拿数据,要特征

###0706 上午:了解置顶卡 下午:对接置顶卡需求

###0708 上午:查bug 下午:查索引中查不到某些人名的问题

###0709 上午:写置顶卡的日志文件处理程序 下午:写置顶卡的线上逻辑处理;新需求,屏蔽公司时需要注意全称和简称

###0712 上午:完成对置顶卡日志文件处理 下午:优化日志处理程序效率;收尾线上逻辑部分程序

###0713 上午:处理置顶卡线上逻辑 下午:完成置顶卡线上逻辑测试

###0714 一天都在被坑,找bg_list_action的处理程序的bug

###0715 解决置顶卡计算问题,测试完成,准备上线

###0718 上午:解决屏蔽公司需求(全称/简称 只要匹配就都屏蔽);完成置顶卡自动化脚本 下午:找吴桑要评价标准/整理JD非法数据/

###0719 处理完置顶卡事情。 完成屏蔽公司的需求/梳理JD数据

###0720 上午:调整屏蔽公司需求 下午:处理垃圾boss(发布超多职位)事情;预备职位相似度事情

###0721 上午:处理bdc请求超时问题;查炸弹卡有炸到已经聊过的牛人;查置顶卡脚本的运行情况 下午:处理部分JD质量问题,整理逻辑;参加3号会

###0722 上午:跟踪bdc超时,并完结 下午:梳理JD质量,写脚本,整理公司数据/职位数据/技能数据

###0723 上午:完善JD处理脚本流程 下午:与飞一起串脚本,完善JD处理

###0725 上午:写相关推荐测试接口;搞定部署router 下午:增加牛人隐藏简历的索引,继续完善接口

###0727 上午:分析JD处理情况 下午:完成每天bg_action行为统计,并分析数据

###0728 上午:计算出每天牛人和boss的繁忙情况 下午:出基本的相关推荐,并上测试环境

###0801 全天都在改jd_spam的问题,晚上上线之

###0802 上午:处理相关推荐bug 中午写个页面给人工审核的妹子看数据 下午:完善相关推荐的热度推荐 晚上:搞定相关推荐

###0803 上午:搞定相关推荐python部分, 修改java部分代码 下午:上线 晚上:调整代码结构,准备bossup

###0804 上午:搞定F1的bug 下午:实现bossup的f1接口 晚上:部署bossup f1

###00805 上午: 梳理jd_spam的模型训练,整理代码;梳理职位相似度代码计算 下午: 梳理consul和docker部署,确定方案:k8s或者swarm, 新买机器,hdfs+spark

###0806 完成bossup的功能需求 晚上:测试docker 环境和compose

###0808 上午:测试compose,重做java镜像 下午:更改一键求简历的功能;增加职位相似度数据到补量策略; 晚上:查相关批量安装linux的方案

###0809 上午:查filter的bug

###0810 弄机器,弄系统,弄聊天spam的东西

###0811 上午:完成部分过滤聊天的功能,把页面搞定 下午:配置集群环境,搞spark等 晚上:讨论rnn

###0815 上午:处理chatspam的逻辑 下午:fix 炸弹bug;导入chat spam规则入库 晚上:测试swarm

###0816 部署线上chatspam和数据库相关

###0817 处理chatspam,上线

###0818 增加chatspam的白名单等功能,调整日志,上线 查filter的bug

###0819 部署B端C端用户画像报告项目 增加zp的测试,便于查询job和geek的索引情况

###0820 完成chat-spam 完成静态画像

###0822 搞定hive,spark-sql等配置的东西 修bossup的bug ###0823 在bossup上测试日志工具elk和fluent

###0824 测试bossup 部署服务到aws机器

###0825 修复炸弹的条件约束 =.= 炸了服务器两次,以后要注意sql

###0826 增加bossup脚本,supervisord 增加msgfilter脚本 下午请假

###0829 上午修filter的bug(工资过滤,经验过滤和学历过滤暂时没动,存在补量的问题) 下午,修bossup的bug,开会讨论职位相似度的东西

###0830 上午:修bossup的bug,完成相似度计算和打分部分 下午:完成bossup的补量问题,对JD审核增加敏感词

###0831 上午:继续修bossup遗留bug 下午:更改jobwelcome页面的多样性问题(并没上线)

###0901 上午:1. 确定collector中number的作用;看6.2.0collector的正确使用方法,加入scorer或者weight 下午:完成JD审核中的敏感词的过滤;

###0902 上线jobwelcome中城市部分 增加spam中敏感词和空格符号的处理

###0903 请假回临沂

###0905 确认4.9.5的需求中未完成的部分,action-check over 修bug 继续修msgfilter超时问题…..

###0906 看6.2.0的源码,主要是collector spark-sql的使用 ok msgfilter新需求(大小写,繁体简体ok)

###0907 观察jd_audit部分结果 导出上传简历数据,找出邮箱—找出相关代码,廖科搞定

###0908 改了一天msgFilter的性能,然并卵,F1重启时cpu峰值无法避免,依然会报警

###0909 完成置顶卡新增一堆相关职位的需求(跟4.9.5一起上线,因为并不是单独server,依赖f1服务) 找出boss和geek都活跃的用户,分析原因(还真就是两边都活跃,也是醉了)

###0912 梳理特征数据 查服务停掉的原因,整理msgfilter

###0913 再特么折腾一上午msgfilter 实现置顶卡新需求,炸弹卡新需求

###0918 部署线上服务,上线action——check 准备牛人用户特征数据,新开个项目

###0919 确定一个月周期,定方案

###0920 出数据

###0921 测试svm模型

###0922 确认svm_java部分的接口与实现

###0923 完成svm_java输出 分成offline计算和online输出,打通流程

###0926 测试offline流程 做置顶卡需求

###1008 修改消息过滤,增加严重关键词 测试其他几个相似度函数,皮尔逊系数不适合(数值不具有物理意义,仅为标示) 提测5.0 处理相似度的事情

###1009 测试kafka的事情,bomb要增加事件(sever端) 测试topcard发短信的事情,(server端需要上线短信功能和短信内链接打开app的功能) 准备个测试环境吧

###1010 全天都再准备5.0上线的东西,还有改各种需求和bug

###1011 上午:上线5.0,临时改了个brandlist的需求

###1012 1013 准备F1各种 置顶卡召回策略 – 商业组

###1014 炸弹卡b策略 – 商业组

###1017 补全用户公司属性信息 – 商业组 230w 炸弹卡增加补量信息 – 商业组 5.01金秋卡需求 – 商业组

###1018 商业卡 增加补量的代码 完成金秋卡的需求 写完过滤公司ID的代码,查作弊

###1019 测短信,测炸弹b, 上支持wap的接口 ###1020 测金秋卡,上线金秋卡

###1021 增加filter多参数的实现 — wap版本

###1022 完成各种需求,还有各种金秋卡 重构filter部分

###1024 重构topcard,部署到appsearch-06,05 核实5.01的需求实现情况

###1025–1028 天天都在F1到底做不做的纠结中度过 改了少量需求 梳理思路