缘由 买公路车一个月了，只骑过一次，第一次去了故宫，来回70公里并不觉得特别累，想挑战下妙峰山，就约朋友上路了。 出发 从住的地方到妙峰山单程57公里，但妙峰山路段本身单程21公里，主要是离得太远了。 9.30出发，在公司碰头出发，骑20公里的时候遇到了爬坡，曾一度以为我们已经在上山了，因为那个路段的坡太像爬山了，爬的途中差点中暑，眼前的东西一片模糊，已经看不太清楚了，还产生了掉头回去的想法...

在公司专心工作，面对27寸大屏一顿操作，突然觉得做的事情似曾相识，以前做过类似的事情，但又实在想不起来了，脑子中突然蹦出了黑客帝国电影，如果我们都是机器人，那我此时此刻就是发生了内存泄露类的错误，赶紧记忆下来，防止这段记忆消失。以后会不会有一天，以人类的能力也能创造出类似地球似的一个生态，生态里的”人类”再不断进步、成长，创造出新的地球生态……。 那么，我们所在的世界，可能真的是一个别人普通...

介绍 特征交互是要衡量两组特征之间的相关性，即在特征1 和特征2 分别取某个值时，对模型结果是否有特殊的影响。 基本假设：当两个特征完全独立，即没有任何相关性时，我们认为$PD_{jk}(j,k)=PD_j(j) + PD_k(k)$，特征有一定相关性时，等号不成立。那么就可以用等号前后的两个函数的差异，衡量特征之间的相关性。 那么就可以用一下公式来衡量两个特征的相关性： \(H_{j,...

1. 数据清洗 缺失值处理：1）缺失。2）填充0、均值、中位数 无效值：1）只有一个取值。2）无区分度。 2. 特征构建 2.1 单特征处理 分类特征：label encoder，oneHot encoder，target encoder 特征衍生：绝对值、平方、对数。对树模型作用不大。 特征分箱：等频、等距、卡方 时间：年、月、日、时、分； 2.2 特征组合 统计特征：计数、...

从PDP优化 M-plots PDP 把当前特征值代入所有样本中，会出现部分样本在实际情况中不可能存在的问题，于是就有 M-plots，计算当前特征值对应的预测期望时，只考虑数据集合中存在的样本。 ALE ALE 取同一区间内，预测值的变化作为特征的影响，不同区间累计，构建特征和预测值之间的关系。与 M-plots 不同的是，ALE取预测值的变化作为特征影响，而不是取预测值的均值。 影响：...

介绍 理想定义 PDP(Partial Dependence Plot) 局部依赖图，定义单特征和目标之间的关系，即函数 $\hat{f}X(x_S)$ \(\hat{f}_S(x_S)=E_{X_C}[\hat{f}(x_S,X_C)]=\int{\hat{f}(x_S,X_C)dP(X_C)}\) $x_S$ 标识当前特征 $S$ 的特征值，$X_C$ 表示出了 $S$ 以外的其他特征...

概览 模型解释性作为整个系统的最上层，从模型中提取信息，供人来理解。 解释性的作用 业务需要，保证结果可归因。 提升模型效果。 利于达成AGI（通用/强人工智能） 总得来说，解释性的作用还是为了提升最终的效果。 参考 模型解释性：https://christophm.github.io/interpretable-ml-book/ 神经网络解释性：http://cola...

背景 web1: 网民只能从网络上读内容 web2: 网民可以在网络上写内容 web3: 网民将拥有内容所有权，类似版权。 比特币的兴起引发了 web3 的热潮。 特点 信任 利用签名 + 区块链的方式，保证网民的操作是可信的，比如交易场景，可以用程序来替代可信任的第三方公司。 去中心化 网民创造的内容不再由巨头（平台）拥有，网民有所有权，可以自由创作、修改、删除，获得全部的收益...

整体 月度OKR完成 32% 健身：4次 博客：1篇 ACM：1场 电影：4个 早睡早起：10/26=38% 早睡早起没有执行好，白天看手机比较多，主要还是手机的问题。 想法 为什么人喜欢晚睡晚起？ 睡觉代表一天的结束，我们都喜欢在结束之前尽量再做些事情，抓住一天结束的尾巴。这种心理源自我们对时间规划的不准确，如果要规划这一天，又好像生活比较机械化，失去了未知的快乐。但”客观”来讲，人做的...

起因 工作中做一个 query 相似度任务时，偶然看到孪生网络的一片经典论文，《Learning Text Similarity with Siamese Recurrent Networks》，用来做同类文本预料的相似度任务是极好的。 介绍 这篇文论主介绍孪生网络的基本思想，对于 query 相似度任务（同类型实体的相似度任务，比如图片、语音），可以设计一个网络结构 net，将两个 qu...