tensorflow如何实现embedding_column？

Question

这几天在学习 tensorflow 的 wide_n_deep_tutorial，对 tf.contrib.layers.embedding_column 有点困惑。我想知道tensorflow是如何实现embedding列的？

例如，假设我有一个维度为 1000 的稀疏输入，我想将其嵌入到维度为 10 的密集特征中。它是否拥有一个具有 1000*10 参数的全连接网络并使用 BP 进行训练以更新参数？或者它是否使用了其他一些技术，例如 FM，将 1000 暗向量映射到 10 暗向量？

Answer 1

embedding_column 函数中有 3 个组合器：

“sum”：不归一化 "mean": 做 l1 归一化 “sqrtn”：做 l2 归一化。查看更多 tf.embedding_lookup_sparse

没有使用FM来调制/变换维度。