设为首页收藏本站

爱吱声

 找回密码
 注册
搜索
查看: 11419|回复: 112
打印 上一主题 下一主题

[科研心得] 问题:如何从数据里估算普瓦松分布的均值?

[复制链接]

该用户从未签到

跳转到指定楼层
楼主
 楼主| 发表于 2019-2-4 11:38:35 | 只看该作者 |只看大图 回帖奖励 |倒序浏览 |阅读模式
本帖最后由 晨枫 于 2019-2-3 22:42 编辑 + _' F2 Z% W# d! J3 s

0 ]. [. k4 \/ Z, L4 A一般估算均值是简单的算术平均,但我的问题比较特别,其实都不是统计问题。
  J# F3 J! S' i
: l6 M" t1 l: R是这样的,我有一个吸收塔,从塔顶到塔底有一个温度分布,形状大体像普瓦松分布:% |9 Q0 o) j" t0 [1 Z  w! \+ T

( |2 @9 `" \: `, B; g) |1 y- y; ?- ~& ~( B4 Y

8 }+ w1 e& u& s# l- S- u( g我要估算峰值出现在哪块塔板,所以想到用统计的办法。实际上,统计里这是概率密度,曲线高低代表在这一点的采样“数量”,但我在每一个点只有一个数据点。说到底,我就是要拟合一个“钟形曲线”,然后找峰值所在点。相当于上图中红线(或者lambda=2)里横轴1-2之间的位置。
4 H& Q/ i' J7 ?1 W' r: p
/ J9 T) ?/ P/ ~正态分布有现成的计算办法,但这样的“扭曲正态分布”或者普瓦松分布有什么简单办法吗?我需要能在DCS上实现,所以不能用太复杂的离线算法。
# a% @: e$ ^8 m5 u: x1 [8 r' o- p! i2 t! E: T. W
爱坛里博士多如狗,教授满地走,想象起来,或许有谁在工作中碰到过类似的问题?

该用户从未签到

沙发
 楼主| 发表于 2019-2-4 12:30:40 | 只看该作者
没人理我?都在忙着吃年夜饭?
) |- i: G( u: M" W7 q% r( F  n. a- W9 h5 l. u# `) W# m% j/ q
@煮酒正熟 @holycow @tanis @关中农民 @老马丁 @Dracula
回复 支持 反对

使用道具 举报

  • TA的每日心情
    奋斗
    2 小时前
  • 签到天数: 2052 天

    [LV.Master]无

    板凳
    发表于 2019-2-4 12:43:06 | 只看该作者
    泊松分布?我还是没理解你釆样拿到了哪些数据点
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    慵懒
    11 小时前
  • 签到天数: 2150 天

    [LV.Master]无

    地板
    发表于 2019-2-4 12:45:32 | 只看该作者
    没怎么看明白题目,您是说已知y值,要求对应正态分布?
    回复 支持 反对

    使用道具 举报

    该用户从未签到

    5#
     楼主| 发表于 2019-2-4 12:46:13 | 只看该作者
    holycow 发表于 2019-2-3 22:434 F4 l5 T" |, e/ `! Q' g5 q0 y
    泊松分布?我还是没理解你釆样拿到了哪些数据点
    ! _/ A9 ^9 a5 _( L* }3 i, ]9 v0 {
    是我描述得不好。再来一遍。' b* y' a1 f7 n6 s  X' Z
    ) M1 p% @; r* @
    我有一条样子像泊松分布的温度分布曲线,但只有几个稀疏的点,想用类似泊松分布的曲线内插,然后计算峰值所在的横坐标点。$ ~7 V  I7 x8 Z& g- e0 b

    / d7 O9 q- b# S; b  w这要用于在线计算,不能搞非线性最小二乘之类的复杂算法。
    4 p! W  a, A! l, T
    5 b' k: \5 f! U3 [: ~7 s怎么弄?
    回复 支持 反对

    使用道具 举报

    该用户从未签到

    6#
     楼主| 发表于 2019-2-4 12:47:08 | 只看该作者
    本帖最后由 晨枫 于 2019-2-3 22:48 编辑 ( v9 w9 }$ m: d; j5 u2 \
    松叶牡丹 发表于 2019-2-3 22:45
    2 Q0 C+ j+ q" H' \+ e0 H没怎么看明白题目,您是说已知y值,要求对应正态分布?
    1 d( }" `$ @+ C4 h" `1 x
    2 @1 d5 b8 B% A: E+ p# o* N  H
    抱歉抱歉,差不多就是这个意思,不过不是传统的对称正态分布,而是歪向一边的skewed normal distribution,请见5楼,不知道是否描述清楚一点?
    回复 支持 反对

    使用道具 举报

    该用户从未签到

    7#
     楼主| 发表于 2019-2-4 12:50:27 | 只看该作者
    松叶牡丹 发表于 2019-2-3 22:45. j1 X( l" G  Y9 d. E- d0 ]
    没怎么看明白题目,您是说已知y值,要求对应正态分布?
    7 H$ C" l3 |- D: B  m
    如果太麻烦,最后可能也就用对称的正态分布近似了。反正都是近似……
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    慵懒
    11 小时前
  • 签到天数: 2150 天

    [LV.Master]无

    8#
    发表于 2019-2-4 12:52:09 | 只看该作者
    晨枫 发表于 2019-2-4 12:50& ?/ e5 S% e* q4 e# U' k$ A/ W
    如果太麻烦,最后可能也就用对称的正态分布近似了。反正都是近似…… ...
    9 U- G# B' H$ Z! f8 [
    如果精度不要求很高的话,不知道查表法的精度能不能达到要求。那个倒是最快。
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    郁闷
    2022-6-19 00:00
  • 签到天数: 2264 天

    [LV.Master]无

    9#
    发表于 2019-2-4 12:58:52 | 只看该作者
    统计学我只明白最最基本的,泊松分布也理解不深。问几个傻问题吧:一共多少块塔板?为什么每块塔板只能取到一个data point? 我猜是取样也有成本问题?那样儿的话,您知不知道每块板上的随机取样,与这块板的温度峰值是不是最接近、比其他板的随机取样更接近本板的峰值?
    回复 支持 反对

    使用道具 举报

    该用户从未签到

    10#
     楼主| 发表于 2019-2-4 12:59:41 | 只看该作者
    松叶牡丹 发表于 2019-2-3 22:52' R; u& t6 k- `2 L  i- ?
    如果精度不要求很高的话,不知道查表法的精度能不能达到要求。那个倒是最快。 ...

    1 c( c6 i: P+ l8 K' w% j6 B
    % R6 l" l: ~* b+ y) Q8 e1 I$ t/ R. d查表再内插,这要做成在线计算还是有点麻烦了?
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    开心
    2023-4-1 00:01
  • 签到天数: 627 天

    [LV.9]渡劫

    11#
    发表于 2019-2-4 13:00:28 | 只看该作者
    晨枫 发表于 2019-2-4 12:468 k, w+ }2 L' t! `( O
    是我描述得不好。再来一遍。* E2 Z# l6 e* e; Z$ @+ H+ i! m

    1 J2 h, u4 V/ n8 u. Z我有一条样子像泊松分布的温度分布曲线,但只有几个稀疏的点,想用类似泊松 ...
    3 f4 s7 ~+ d# T2 D% L' a
    原来是泊松分布。。。 惭愧,连最小二乘法都属于复杂算法了。。。还真不知道有什么其他的简便方法。这一块早已经还给老师。。。 现在计算能力强大,集成性高,一般直接一个pasfit之类的函数就解决问题了。。。哈哈哈
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    慵懒
    11 小时前
  • 签到天数: 2150 天

    [LV.Master]无

    12#
    发表于 2019-2-4 13:00:30 | 只看该作者
    本帖最后由 松叶牡丹 于 2019-2-4 13:06 编辑 8 P5 m7 F* Q; [% M. J  P

    $ @& c. [5 p8 O. I5 d做成在线计算器,那就不能查表了,反而太麻烦。坐等观摩高手们过招。
    回复 支持 反对

    使用道具 举报

    该用户从未签到

    13#
     楼主| 发表于 2019-2-4 13:03:39 | 只看该作者
    煮酒正熟 发表于 2019-2-3 22:588 M. T1 X& L) R; Y9 @7 x' ]' y
    统计学我只明白最最基本的,泊松分布也理解不深。问几个傻问题吧:一共多少块塔板?为什么每块塔板只能取到 ...
    , H- ~  W0 x( I3 w/ `
    咳咳,这个其实不是统计问题,是从有限的温度测量估计温度分布曲线的问题。吸收塔一共20块塔板,每块塔板只有一个温度测量点,连续测量(每15秒采样一次)。+ C: Y  v0 ?/ j# g$ V! l
      W( Z# ~9 w" k! x7 L; E( y) }/ N7 g
    这温度分布随工艺条件而变,所以这个峰值和凸起一直在动来动去。目视很容易看出峰值在那里,但要用数值办法实时确定,反而犯难了。
    回复 支持 反对

    使用道具 举报

    该用户从未签到

    14#
     楼主| 发表于 2019-2-4 13:06:04 | 只看该作者
    tanis 发表于 2019-2-3 23:009 b! B0 R. u! x# O4 i* t/ L
    原来是泊松分布。。。 惭愧,连最小二乘法都属于复杂算法了。。。还真不知道有什么其他的简便方法。这一 ...
    ; n. V3 {  P9 z" W
    切,我有那东西,还费这个事吗?Matlab、Maple,什么不能上啊!问题是我需要在线计算,而且只有FORTRAN一级的语言从头现编,还不能太耗费CPU时间,耽误了实时控制就偷鸡不成蚀把米了。
    回复 支持 反对

    使用道具 举报

    该用户从未签到

    15#
     楼主| 发表于 2019-2-4 13:06:44 | 只看该作者
    松叶牡丹 发表于 2019-2-3 23:00
    : c: ^/ g5 o: k# g! Z做成在线计算器,那就不能查表了,反而太麻烦。坐等观摩高手们过招。
    / L! O2 r: M/ A' L' h$ n- y+ p3 i
    估计吃完年夜饭,就该忙着数红包了。

    点评

    这坛里的,绝大多数是发红包的  发表于 2019-2-4 14:34
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    开心
    2023-4-1 00:01
  • 签到天数: 627 天

    [LV.9]渡劫

    16#
    发表于 2019-2-4 13:09:41 | 只看该作者
    晨枫 发表于 2019-2-4 13:03  m, B( B# I+ s) F% R
    咳咳,这个其实不是统计问题,是从有限的温度测量估计温度分布曲线的问题。吸收塔一共20块塔板,每块塔板 ...
    9 A  v. F9 Z  Y1 O1 h
    目视是指看数据点脑补么? 所以一共20个数据点(塔板),然后最高温度可能在点之间? 15s一次,速度很慢啊,为啥不能离线算? 系统太古老了?
    2 [+ X. h. Q/ M4 B
    3 h5 r  _0 c' ~- b' Q如果是系统太老无法整合还有个鬼畜方法。。。 既然肉眼能看到每个点在哪里,可以用电脑拍照把图截下来,然后从图像里把点的值拿到,接着在电脑里拟合。
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    开心
    2023-4-1 00:01
  • 签到天数: 627 天

    [LV.9]渡劫

    17#
    发表于 2019-2-4 13:12:21 | 只看该作者
    晨枫 发表于 2019-2-4 13:06
    $ N, S5 U! E/ I( X切,我有那东西,还费这个事吗?Matlab、Maple,什么不能上啊!问题是我需要在线计算,而且只有FORTRAN一 ...

    + g5 u. R) S8 t; g找温度第二,第三高的两个点,拟合个直线,取中间的那个位置
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    慵懒
    11 小时前
  • 签到天数: 2150 天

    [LV.Master]无

    18#
    发表于 2019-2-4 13:12:42 | 只看该作者
    晨枫 发表于 2019-2-4 13:06
    5 U" x  C( O5 @! M  U8 h; h切,我有那东西,还费这个事吗?Matlab、Maple,什么不能上啊!问题是我需要在线计算,而且只有FORTRAN一 ...
    0 m' u9 B& V& b: z
    您是说每块塔板都是15秒测量一次,所以每15秒要同时给出20个塔板的20个正态分布式子?
    回复 支持 反对

    使用道具 举报

    该用户从未签到

    19#
     楼主| 发表于 2019-2-4 13:18:45 | 只看该作者
    tanis 发表于 2019-2-3 23:092 r& q% U( d% o# \6 m' c! D
    目视是指看数据点脑补么? 所以一共20个数据点(塔板),然后最高温度可能在点之间? 15s一次,速度很慢 ...
    0 s; Q6 {; M3 d1 L7 i- |/ O( K6 _' X
    正是:看数据点然后脑补。人工就是这么干的。但操作工要照管的事情太多,一会儿不看,可能就错过了,就可能坏事。
    2 X5 W& w! t2 i! ?" o; u
    $ @+ b+ c* f2 V% p& M; U$ i! G# {化工上DCS的采样分基本回路和先进回路,前者一般每秒一次,甚至1/4秒一次,后者每15、30、60秒一次就够了。过程时间常数动辄几十分钟,太快的采样没必要。另一方面,CPU的速度(还是Morotola 68040)和网络带宽(4 megabits 烹per second)有限,不宜太快,还要扫描几百、几千个回路,不宜太快。安全连锁回路更快,在毫秒级,但那不用作连续控制,两回事。
    4 [8 C& u& ?2 W0 V. b7 N, z7 R! ~' e. O4 _7 m# x7 o1 Q" c! a6 R
    工控级的CPU和网络都用特别成熟(翻译:特别古老)的技术,和实验室、离线是两回事。) G7 a* E8 T% W
    " L3 m: h9 \( M1 Q1 C4 Y# \  H
    在线计算是因为我要把这个峰值点用到控制回路里。拍照、图像识别、离线拟合,这绕的弯子太大,中间节点太多,可靠性根本靠不住,哪里打一个嗝,就可能造成process upset,就是几十万、上百万的损失,那就划不来了。
    回复 支持 反对

    使用道具 举报

    该用户从未签到

    20#
     楼主| 发表于 2019-2-4 13:21:24 | 只看该作者
    松叶牡丹 发表于 2019-2-3 23:12
    ' j. k  B* Z1 P, U$ v( D9 y您是说每块塔板都是15秒测量一次,所以每15秒要同时给出20个塔板的20个正态分布式子? ...
    ' T, x) u% c: O3 R" o* G' n0 J
    每15秒要对20块塔板的温度拟合一条样子像正态分布的曲线。15秒只是计算间隔,每次实际计算其实只有毫秒级的窗口,因为同一个CPU还要分时管好多别的事呢。
    回复 支持 反对

    使用道具 举报

    手机版|小黑屋|Archiver|网站错误报告|爱吱声   

    GMT+8, 2024-11-16 13:32 , Processed in 0.040968 second(s), 19 queries , Gzip On.

    Powered by Discuz! X3.2

    © 2001-2013 Comsenz Inc.

    快速回复 返回顶部 返回列表