查看: 1277| 回复: 4
跳转到指定楼层
上一主题 下一主题
收起左侧

[其他] 统计上用什么metric评估两个随机向量最大值的相关性?

全局:

注册一亩三分地论坛,查看更多干货!

您需要 登录 才可以下载或查看附件。没有帐号?注册账号

x
我正在处理一些数据,两组数据A和B,每一个数据点是一个4维向量,最终我想实现的是找出A的第几维最可能是B的第几维。评估标准是最大值,比如如果再相同条件下,A的第一维总是和B的第一维同时是向量的最大值,我们大概可以判断A的第一维其实和B的第一维性质相同。目前我做了如下实验,语言用的是python:
  1. import numpy as np
  2. a = [0.9, 0.001, 0.001, 0.098]. ----
  3. b = [0.8, 0.001, 0.001, 0.198]
  4. z = np.vstack([a,b])
  5. print(np.cov(z.T))
复制代码
. check 1point3acres for more.
正如以上代码,我起初的想法是协方差矩阵,但是得到的结果为:
  1. [[ 0.005  0.     0.    -0.005]
  2. [ 0.     0.     0.     0.   ]. check 1point3acres for more.
  3. [ 0.     0.     0.     0.   ]
  4. [-0.005  0.     0.     0.005]]
复制代码

也就是A[0]与B[0]的相关性为0.005,而A[3]与B[3]的相关性也为0.005。。。
而我的需求是,因为0.9和0.8分别是a,b的最大值,我希望A[0]和B[0]的相关度很大,而A[3]与B[3]的相关度应该小得多。
请问统计方法里,如何才能实现以上得想法呢?



上一篇:新鲜热乎的SAS Base (01-27-21) · 990过经+考题回忆
下一篇:01/29/2021 SAS Adv 低分飘过 分享 +新题
全局:
可以求a0在a里的rank,以及b0的rank,然后计算rank的correlation

评分

参与人数 1大米 +1 收起 理由
ttxs2016 + 1 给你点个赞!

查看全部评分

回复

使用道具 举报

🔗
 楼主| ttxs2016 2021-1-30 13:48:52 | 只看该作者
全局:
mwang011 发表于 2021-1-30 13:25
可以求a0在a里的rank,以及b0的rank,然后计算rank的correlation

多谢大侠回复。请问物理意义是什么呢?

其实我的数据里不一定a0或b0永远是最大的那一个。
如果从另一个角度说,A 和B是两个机器学习模型的预测值吧,每个模型预测4个class但是顺序不同,比如:
A分类器的输出预测向量对应 “Class1,Class2,Class3, Class4”而B的输出预测“Class1, Class 4, Class 2, Class 3”。
我打算把10000个随机sample同时发给给A和B,如果发现a0经常与b0同时最大则下结论A的第一个Class对应B的第一个Class,而如果发现a1与b2经常同时最大,则下结论A的第二个Class对应B的第三个Class 。。。.google  и

从工程考虑,我觉得以上实现方法大概合理,但是感觉缺少统计理论支撑,比如如何正确地从统计角度建模这个问题来指导我的工程实现呢?
回复

使用道具 举报

🔗
 楼主| ttxs2016 2021-1-31 06:24:54 | 只看该作者
全局:
我之前说的东西太误导了, 可是没有办法删掉...

回到您说的"可以求a0在a里的rank,以及b0的rank,然后计算rank的correlation" 是不是指的就是 Spearman秩相关系数
(我不是这个专业的, 所以很多东西还不太懂)
回复

使用道具 举报

🔗
justicesuker 2021-2-2 11:38:20 | 只看该作者
全局:
我觉得不如穷举。把b向量重新排序看什么顺序的时候和a向量内积最大。

评分

参与人数 1大米 +1 收起 理由
ttxs2016 + 1 给你点个赞!

查看全部评分

回复

使用道具 举报

您需要登录后才可以回帖 登录 | 注册账号
隐私提醒:
  • ☑ 禁止发布广告,拉群,贴个人联系方式:找人请去🔗同学同事飞友,拉群请去🔗拉群结伴,广告请去🔗跳蚤市场,和 🔗租房广告|找室友
  • ☑ 论坛内容在发帖 30 分钟内可以编辑,过后则不能删帖。为防止被骚扰甚至人肉,不要公开留微信等联系方式,如有需求请以论坛私信方式发送。
  • ☑ 干货版块可免费使用 🔗超级匿名:面经(美国面经、中国面经、数科面经、PM面经),抖包袱(美国、中国)和录取汇报、定位选校版
  • ☑ 查阅全站 🔗各种匿名方法

本版积分规则

>
快速回复 返回顶部 返回列表