[TL][技术]操作系统相关的小题目供大家参考:-)

114 views
Skip to first unread message

jinhu wang

unread,
Jun 11, 2012, 8:57:14 PM6/11/12
to TopLanguage

系统上有两个任务(可以认为是线程),高优先级任务P1,低优先级任务P2P1被定时器T1每毫秒的超时事件激活一次工作,每次工作必须在1毫秒之内完成。现在有条发给P1的消息在P1上创建一个对象,创建对象共耗时2ms,从而挤占了两个超时事件,导致P1有段时间工作不稳定。

问题:为了解决上面的问题,能否将对象的创建过程交给P2完成,然后将创建好的对象指针交给P1

raof01

unread,
Jun 11, 2012, 9:29:51 PM6/11/12
to pon...@googlegroups.com
如何不稳定?1ms是系统强制的还是p1自身的限制?从现有的信息看,p2可以作为工作线程,给p1打工。

Josh zhao

unread,
Jun 11, 2012, 9:30:52 PM6/11/12
to pon...@googlegroups.com
应该会死锁吧。


在 2012年6月12日 上午8:57,jinhu wang <wangji...@gmail.com>写道:

系统上有两个任务(可以认为是线程),高优先级任务P1,低优先级任务P2P1被定时器T1每毫秒的超时事件激活一次工作,每次工作必须在1毫秒之内完成。现在有条发给P1的消息在P1上创建一个对象,创建对象共耗时2ms,从而挤占了两个超时事件,导致P1有段时间工作不稳定。

问题:为了解决上面的问题,能否将对象的创建过程交给P2完成,然后将创建好的对象指针交给P1




--
Best regards!

Josh Zhao

jinhu wang

unread,
Jun 11, 2012, 9:34:35 PM6/11/12
to pon...@googlegroups.com
下面这个条件是强制的。
“P1被定时器T1每毫秒的超时事件激活一次工作,每次工作必须在1毫秒之内完成 ”

Quinn Lu (Qian Lv)

unread,
Jun 11, 2012, 10:03:55 PM6/11/12
to pon...@googlegroups.com

P1被定时器T1每毫秒的超时事件激活一次工作,每次工作必须在1毫秒之内完成。
Is the "超时事件" FIQ?

现在有条发给P1的消息在P1上创建一个对象,创建对象共耗时2ms,从而挤占了两个超时事件,导致P1有段时间工作不稳定。 

Is "P2P1的消息在P1上创建一个对象" triggered by IRQ? 

Which one has the higher priority?

2012/6/11 jinhu wang <wangji...@gmail.com>

jinhu wang

unread,
Jun 11, 2012, 10:07:54 PM6/11/12
to pon...@googlegroups.com
创建对象的消息来自外部系统。

Josh zhao

unread,
Jun 11, 2012, 10:16:18 PM6/11/12
to pon...@googlegroups.com
不知楼主想法是不是找个解决方法,我的想法是: 只是这个创建过程可中断,P1 中建一个working queue,创建对像入queue,应该可以解决你的需求。

jinhu wang

unread,
Jun 11, 2012, 10:29:04 PM6/11/12
to pon...@googlegroups.com
P1和P2 的会话通道都是现成的,不需要考虑。问题的关键在于创建对象的过程交给另一个任务完成是否能解放P1。

Shuo Chen

unread,
Jun 11, 2012, 11:02:51 PM6/11/12
to pon...@googlegroups.com
>  问题的关键在于创建对象的过程交给另一个任务完成是否能解放P1。 

假设只有一个单核 CPU,而且创建对象的2ms耗时都是密集CPU计算。
如果P1和P2是抢占式多任务,没有共享数据会导致优先级反转,
那么放到 P2 去创建是可行的。

必要的话,把对象创建分成4步,每步 0.5ms,每步完成之后主动交出控制权,
或许运行起来更加平稳。


On Tuesday, June 12, 2012 10:29:04 AM UTC+8, wangji...@gmail.com wrote:
P1和P2 的会话通道都是现成的,不需要考虑。问题的关键在于创建对象的过程交给另一个任务完成是否能解放P1。

jinhu wang

unread,
Jun 12, 2012, 12:39:04 AM6/12/12
to pon...@googlegroups.com
这里涉及到两个关键问题:
定时器是外部中断timer还是操作系统级的CPU tick timer。
如果是用的tick timer,tick的间隔设置就会影响P1和P2的切换。

raof01

unread,
Jun 12, 2012, 12:40:53 AM6/12/12
to pon...@googlegroups.com
解放是不可能的吧?主要是让系统稳定点。


On Tuesday, June 12, 2012 10:29:04 AM UTC+8, wangji...@gmail.com wrote:

jinhu wang

unread,
Jun 16, 2012, 6:24:35 AM6/16/12
to pon...@googlegroups.com

把这段时间的一些讨论心得整理成下面的小短文享给大家。


给大家分享一下基站实时软件的特点---(原创)

首先看下面场景:

系统上有两个任务:高优先级任务P1,低优先级任务P2,资源可共享(可以理解为线程)。有毫秒定时器T1,每毫秒发消息给P1P1干活, P1必须在1毫秒之内把活完成。

现在有条从外部发给P1的消息,使P1创建一个对象,创建对象共耗时2ms,从而挤占了两个超时事件,导致P1有段时间工作不稳定。

问:为了解决上面的问题,能否将对象的创建过程交给P2完成,然后P2将创建好的对象指针交给P1

在解答以上问题前,我们必须知道操作系统的调度是基于tick中断的。Tick中断是操作系统的脉搏。任务切换的条件是发生了tick中断,其他中断,系统调用等。

Tick的精度的设置决定了操作系统的实时性高低,Tick周期设置的越短,实时性越好,但是操作系统的任务切换开销在整个系统中占得比重就越大,从而造成了CPU资源的浪费。例如vxworksTick设置一般缺省设置是1/60s,在通信设备上一般设置成1/1000s以适应对一些毫秒级定时器的需求。

再回到上面的题目,如果“对象创建过程”不包含除tick中断以外的任务切换条件,那么这个过程不管放在哪个任务里,都会持续的消耗CPU资源,直到发生tick中断或者任务执行完后主动释放CPU。如果把T1考虑进来,如果T1是绕开操作系统的一套定时器,这个移植方案也是行的。在FSPT1正是这样的一套定时器。

说到实时系统里的定时器,往往有重造轮子之嫌。

上层软件开发有丰富的定时器API可供选择:sleepalarmsignalsettimer甚至select

但是在实时系统上,上面的这些操作系统提供的API并不总能满足需求。

首先是数量级的需求,只要是开发协议栈就避不开定时器,一个协议栈运转起来可能会创建成百上千个定时器,如果把这些定时器完全交给操作系统去管理,这对操作系统的性能影响是相当可观的。为了避免这些影响,我们往往会基于这些底层API写一套上层的定时器应用框架,把对系统的影响程度降到最低。

对于一些毫秒级精度的协议,我们也会考虑用系统级的定时器。如果精度再高一点,例如微秒级,我们就得绕开操作系统定制一套定时中断API了。LTEPS就是基于这样的一套API运转的。

PS对时间很敏感。原因是LTE调度周期只有1ms。每一毫秒我们都要有数据及控制信息进出。这些进出都是基于软件的计算。软件的计算围绕着一个个业务模型。

这里我们先不谈具体的业务场景,先看下面这个小故事:

奇怪的卖花人

有个奇怪的卖花人,他有8个花瓶,依次编号01234567。每个花瓶最多插1朵花。

他有个习惯,每天只往一个花瓶插花卖花,例如第一天往花瓶0里插1朵花,然后只卖花瓶0里的花,第二天就往1里插,卖1的,以此类推。等到第九天他再回来检查0号花瓶,如果0号花瓶花还在,他这一天就没有插花的任务,只有卖花的任务。一朵花如果被卖了28次还没有被卖出去,卖花者就会把这朵花丢掉。

他还有个习惯,他一旦卖了某朵花,比这朵花更早插到其他花瓶的花会被贴上打折标签。

现在卖花人觉得贴标签太麻烦,请你为卖花人设计一套软件算法,帮助卖花人在卖花时知道该花是否要打折。

上面这个故事是PS里某个小需求的抽象版,具体到真实环境上,卖花人数量变成了800个,每个瓶子可插4朵带编号的花,还有其他七七八八的上下文,从而交织出一个复杂的业务场景。软件场景的分析设计过程可能会很复杂,但是真正去实现,代码量往往可能仅仅几十行。接下来不可避免的工作就是优化。

上层开发很少会谈及优化。就像下面这个短文里论述的:优化:你最大的敌人“Optimization: Your Worst Enemyhttp://www.flounder.com/optimization.htm

但是具体到我们的产品里:1ms1GhzCPU1,000,000 clock cycle。 假设你有一个大循环遍历从1~1000,为了让系统正常工作,我们预留出20%cpu资源做buffer。这样留给这个大循环的单次循环的clock cycle就是800(实际环境远比这个假设复杂)。

800clock cycle!你增加的任何一行代码抢去的CPU资源都是奢侈的。为了利用好这仅有的800clock cycle,产生的代码也是奇特的。

假设一条if语句,if(x||y||z)最好情况是只判断x得到true,最坏情况是判断了xyz得到truefalse。在DSP上的u-plane代码里有时候你会看到这个判断会被写成if(x|y|z),貌似永远用最坏情况来取结果。事实上因为DSP上有多路运算单元,很多操作可以并行执行,所以上面的语句会比前面那个语句的最坏情况要好。而当这条if语句放在一个大循环里,前者的最坏情况可能会是一条错误。

下面的代码是针对上面提的“卖花”需求在真实环境下一个小接口updateFlag的四个不同实现版本的实现。你更倾向于用哪套代码?你认为哪套实现的效率最高?

Enum
{
 SUM_OF_AGES = 8,
 SUM_OF_FLAGS = 4
};
//___________________________________________________________A1____________________
class A1
{
public:

void updateFlag(int index, int flagid)
{
    assert(index<SUM_OF_AGES);
    u8 &age = m_age[index];
    u8 flag = 0;
    for(int i=0; i<SUM_OF_AGES; ++i)
    {
        if(age<m_age[i])
        {
            flag  |= ( 1 << i );
        }
    }
    m_flag[flagid] = flag;
}
///////////
u8 m_age[SUM_OF_AGES];
u8 m_flag[SUM_OF_FLAGS];
};
//________________________________________A2__________________________

 

class A2
{
    public:

    void updateFlag(int index, int flagid)
    {
        assert(index<SUM_OF_AGES);
        u8 &age = m_age[index];
        m_flag[flagid] =(age<(m_age[0]))?(u8)(0x1):(u8)0;
        u8 tmpflag1 =(age<(m_age[1]))?(u8)(0x2):(u8)0;
        u8 tmpflag2 =(age<(m_age[2]))?(u8)(0x4):(u8)0;
        u8 tmpflag3 =(age<(m_age[3]))?(u8)(0x8):(u8)0;
        m_flag[flagid] +=(age<(m_age[4]))?(u8)(0x10):(u8)0;
        tmpflag1 +=(age<(m_age[5]))?(u8)(0x20):(u8)0;
        tmpflag2 |=(age<(m_age[6]))?(u8)(0x40):(u8)0;
        tmpflag3 |=(age<(m_age[7]))?(u8)(0x80):(u8)0;
    }
    ///////////
    u8 m_age[SUM_OF_AGES];
    u8 m_flag[SUM_OF_FLAGS];
};
//___________________________________A3__________________________

 

//this is the current version on svn
class A3
{
    public:

    void updateFlag(int index, int flagid)
    {
        assert(index<SUM_OF_AGES);
        u8 &age = m_age[index];
        u8 flag[SUM_OF_AGES];

m_flag[flagid] = 0;
        for(int i=0; i<SUM_OF_AGES; ++i)
        {
            flag[i] = (age<m_age[i])?( 1 << i ):0;
        }
        for(int i=0; i<SUM_OF_AGES; ++i)
        {
            m_flag[flagid] |= flag[i];
        }   

 

    }
    ///////////
    u8 m_age[SUM_OF_AGES];
    u8 m_flag[SUM_OF_FLAGS];
};

//________________________________________________A4__________________________

 

class A4
{
    public:

    void updateFlag(int index, int flagid)
    {
        u32 dwtmp = (m_age[index] << 8) | m_age[index];
        dwtmp= _pack2(dwtmp,dwtmp);
        u64 AgeArrayTmp1 = _mem8((void*)m_age);

         m_flag[flagid] = (_cmpgtu4(_hill(AgeArrayTmp1), dwtmp) << 4) |_cmpgtu4(_loll(AgeArrayTmp1), dwtmp);

 


    }
    ///////////
    u8 m_age[SUM_OF_AGES];
    u8 m_flag[SUM_OF_FLAGS];
};

看汇编结果:

A1120 cycles

A232 cycles

A37 cycles

A414cycles

你能猜对吗?

再看下面两个版本的查询代码,其中A也是经常惹争议的,如果对照右边的汇编结果,可能会令你对它重做评价。

    enum {SIZEFORTEST = 20};

  T1* findA(const T1& value)// Total cycle 

    {

        T1* p=NULL;

        for(int i =0; i<SIZEFORTEST; ++i)

        {

            if(value == m_pArray[i] )

            {

                p=m_pArray[i];

            }

        }

        return p;

    }

Total cycles :6+min_trip_cnt*1 = 26

    T1* findB(const T1& value)

    {

        for(int i =0; i<SIZEFORTEST; ++i)

        {

            if(value == m_pArray[i] )

            {

                return &m_pArray[i];

            }

        }

        return NULL;

    }

Total cycles :9+min_trip_cnt*9= Between 18 and 189


但是到这里并不算完,在真实的环境上我们还要考虑三级内存架构。

数据从external memory读到L2 cache大约要耗费100cycle,从L2 cache读到L1 cache大约是10cycle,从L1CPU1cycle。栈放在哪里,对象放在哪里,代码段放在哪里都会影响你的程序性能。

在实时系统里我们经常封装一层内存管理模块,是什么原因?

正如“Optimization: Your Worst Enemy”提到的----为了避免内存碎片。还记得当年流行的“磁盘碎片整理”的功能吧,那是内存碎片的“硬盘版模型”。到了我们的PS,我们对内存的管理更是精细,要考虑3级内存,要考虑cache line,我们的调优工程师不停的测量和调优,这个过程犹如名剑师在打磨一把宝剑。

除了要避免内存碎片,我们还要重视另一个碎片:时间碎片。

我们的大部分程序跑在一个单进程的上下文里,这个进程被各种消息激活。消息的优先级,消息到来的时间,处理这条消息占得时间片大小都可能会对整个系统的调度产生影响。如果低优先级的消息穿插分布在整个时域上,很有可能会挤占高优先的消息。这是一种优先级翻转。

例如MSG_H1优先级最高,MSG_H2优先级居中,MSG_L是优先级最低,MSG_H1MSG_H2有依赖,如果MSG_L先到,在处理MSG_L的过程中,MSG_H2MSG_H1都到了,当MSG_L处理完毕后,如果没有特殊的调整,我们可能会先处理MSG_H1,从而得不到正确的输出。为了使系统能正常工作,我们提高MSG_H2的优先级。如果MSG_H1是个定时器消息,这就意味着超时消息被MSG_LMSG_H2往后挤,影响了定时精度。

更合理的解决方案应该是,通过调整MSG_L的到来时机或者内部调整把它的处理时间挂到划分好的低优先级处理时序中,让出更多的完整时间来处理高优先级的消息。

在遇到将多个小消息合并成大消息,或者要添加一些低优先级消息等场景的时候,一定要把这些内容考虑进去。

Reply all
Reply to author
Forward
0 new messages