Scheduler/Scheduler.cc

   1 // $Id$
   2 //
   3 // Copyright (C) 2006
   4 // Fraunhofer Institut fuer offene Kommunikationssysteme (FOKUS)
   5 // Kompetenzzentrum fuer Satelitenkommunikation (SatCom)
   6 //     Stefan Bund <stefan.bund@fokus.fraunhofer.de>
   7 //
   8 // This program is free software; you can redistribute it and/or modify
   9 // it under the terms of the GNU General Public License as published by
  10 // the Free Software Foundation; either version 2 of the License, or
  11 // (at your option) any later version.
  12 //
  13 // This program is distributed in the hope that it will be useful,
  14 // but WITHOUT ANY WARRANTY; without even the implied warranty of
  15 // MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  16 // GNU General Public License for more details.
  17 //
  18 // You should have received a copy of the GNU General Public License
  19 // along with this program; if not, write to the
  20 // Free Software Foundation, Inc.,
  21 // 59 Temple Place - Suite 330, Boston, MA  02111-1307, USA.
  22
  23 /** \file
  24     \brief Scheduler non-inline non-template implementation
  25
  26     \idea Implement signal handling (See source for more discussion
  27     about this)
  28
  29     \idea Multithreading support: To support multithreading, the
  30     static member Scheduler::instance() must return a thread-local
  31     value (that is Scheduler::instance() must allocate one Scheduler
  32     instance per thread). Another possibility would be to distribute
  33     the async load unto several threads (one scheduler for multiple
  34     threads)
  35  */
  36
  37 // Here a basic concept of how to add signal support to the scheduler:
  38 //
  39 // Every signal to be reported by the scheduler will be asigned a
  40 // generic signal handler by the scheduler. This signal handler will
  41 // use longjmp (juck) to report this signal back to the scheduler
  42 // main-loop.
  43 //
  44 // To make this safe, the main-loop will look something like:
  45 //
  46 //     int signal = setjmp(jmpBuffer_);
  47 //     if (signal == 0) {
  48 //         // unblock all signals which are registered with the
  49 //         // scheduler
  50 //         // call epoll
  51 //         // block all relevant signals again
  52 //     }
  53 //
  54 //     // now handle the event
  55 //
  56 // The signal handler is then simply defined as
  57 //
  58 //     static void Scheduler::sigHandler(int signal)
  59 //     {
  60 //         // make sure to restore the signal handler here if
  61 //         // necessary
  62 //         longjmp(Scheduler::instance().jmpBuffer_,signal);
  63 //     }
  64 //
  65 // You should use sigaction to register the signal handlers and define
  66 // a sa_mask so all Scheduler-registered signals are automatically
  67 // *blocked* whenever one of the signals is called (including the
  68 // called signal!) (This also means, we will have to re-register all
  69 // signals if we change the registration of some signal since the
  70 // sa_mask changes). This ensures, that no two signals can be
  71 // delivered on top of each other. And of course any signal registered
  72 // with the scheduler must be blocked as soon as it is registered with
  73 // the scheduler.
  74
  75 #include "Scheduler.hh"
  76 //#include "Scheduler.ih"
  77
  78 // Custom includes
  79 #include <errno.h>
  80 #include <sys/epoll.h>
  81 #include "Utils/Exception.hh"
  82
  83 static const int EPollInitialSize = 16;
  84
  85 #define prefix_
  86 ///////////////////////////////cc.p////////////////////////////////////////
  87
  88 prefix_ senf::Scheduler::Scheduler & senf::Scheduler::instance()
  89 {
  90     static Scheduler instance;
  91     return instance;
  92 }
  93
  94 prefix_ void senf::Scheduler::timeout(ClockService::clock_type timeout, TimerCallback const & cb)
  95 {
  96     timerQueue_.push(TimerSpec(ClockService::now()+timeout,cb));
  97 }
  98
  99 prefix_ senf::Scheduler::Scheduler()
 100     : epollFd_ (epoll_create(EPollInitialSize))
 101 {
 102     if (epollFd_<0)
 103         throw SystemException(errno);
 104 }
 105
 106 prefix_ void senf::Scheduler::do_add(int fd, SimpleCallback const & cb, int eventMask)
 107 {
 108     FdTable::iterator i (fdTable_.find(fd));
 109     int action (EPOLL_CTL_MOD);
 110     if (i == fdTable_.end()) {
 111         action = EPOLL_CTL_ADD;
 112         i = fdTable_.insert(std::make_pair(fd, EventSpec())).first;
 113     }
 114
 115     if (eventMask & EV_READ)  i->second.cb_read = cb;
 116     if (eventMask & EV_PRIO)  i->second.cb_prio = cb;
 117     if (eventMask & EV_WRITE) i->second.cb_write = cb;
 118
 119     epoll_event ev;
 120     memset(&ev,0,sizeof(ev));
 121     ev.events = i->second.epollMask();
 122     ev.data.fd = fd;
 123
 124     if (epoll_ctl(epollFd_, action, fd, &ev)<0)
 125         throw SystemException(errno);
 126 }
 127
 128 prefix_ void senf::Scheduler::do_remove(int fd, int eventMask)
 129 {
 130     FdTable::iterator i (fdTable_.find(fd));
 131     if (i == fdTable_.end())
 132         return;
 133
 134     if (eventMask & EV_READ)  i->second.cb_read = 0;
 135     if (eventMask & EV_PRIO)  i->second.cb_prio = 0;
 136     if (eventMask & EV_WRITE) i->second.cb_write = 0;
 137
 138     epoll_event ev;
 139     memset(&ev,0,sizeof(ev));
 140     ev.events = i->second.epollMask();
 141     ev.data.fd = fd;
 142
 143     int action (EPOLL_CTL_MOD);
 144     if (ev.events==0) {
 145         action = EPOLL_CTL_DEL;
 146         fdTable_.erase(i);
 147     }
 148
 149     if (epoll_ctl(epollFd_, action, fd, &ev)<0)
 150         throw SystemException(errno);
 151 }
 152
 153
 154 prefix_ int senf::Scheduler::EventSpec::epollMask()
 155     const
 156 {
 157     int mask (0);
 158     if (cb_read)  mask |= EPOLLIN;
 159     if (cb_prio)  mask |= EPOLLPRI;
 160     if (cb_write) mask |= EPOLLOUT;
 161     return mask;
 162 }
 163
 164 prefix_ void senf::Scheduler::process()
 165 {
 166     terminate_ = false;
 167     while (! terminate_) {
 168         ClockService::clock_type timeNow = ClockService::now();
 169
 170         while ( ! timerQueue_.empty() && timerQueue_.top().timeout <= timeNow ) {
 171             timerQueue_.top().cb();
 172             timerQueue_.pop();
 173         }
 174
 175         if (terminate_)
 176             return;
 177
 178         int timeout (MinTimeout);
 179         if (! timerQueue_.empty()) {
 180             ClockService::clock_type delta ((timerQueue_.top().timeout - timeNow)/1000000UL);
 181             if (delta<MinTimeout)
 182                 timeout = int(delta);
 183         }
 184
 185         struct epoll_event ev;
 186         int events = epoll_wait(epollFd_, &ev, 1, timeout);
 187         if (events<0)
 188             // 'man epoll' says, epoll will not return with EINTR.
 189             throw SystemException(errno);
 190         if (events==0)
 191             // Timeout .. the handler will be run when going back to the loop top
 192             continue;
 193
 194         FdTable::iterator i = fdTable_.find(ev.data.fd);
 195         BOOST_ASSERT (i != fdTable_.end() );
 196         EventSpec spec (i->second);
 197
 198         unsigned extraFlags (0);
 199         if (ev.events & EPOLLHUP) extraFlags |= EV_HUP;
 200         if (ev.events & EPOLLERR) extraFlags |= EV_ERR;
 201
 202         if (ev.events & EPOLLIN) {
 203             BOOST_ASSERT(spec.cb_read);
 204             spec.cb_read(EventId(EV_READ | extraFlags));
 205         }
 206         else if (ev.events & EPOLLPRI) {
 207             BOOST_ASSERT(spec.cb_prio);
 208             spec.cb_prio(EventId(EV_PRIO | extraFlags));
 209         }
 210         else if (ev.events & EPOLLOUT) {
 211             BOOST_ASSERT(spec.cb_write);
 212             spec.cb_write(EventId(EV_WRITE | extraFlags));
 213         }
 214         else {
 215             // This branch is only taken, if HUP or ERR is signaled but none of IN/OUT/PRI.
 216             // In this case we will signal all registered callbacks. The callbacks must be
 217             // prepared to be called multiple times if they are registered to more than
 218             // one event.
 219             if (spec.cb_write)
 220                 spec.cb_write(EventId(extraFlags));
 221             if (spec.cb_prio)
 222                 spec.cb_prio(EventId(extraFlags));
 223             if (spec.cb_read)
 224                 spec.cb_read(EventId(extraFlags));
 225         }
 226     }
 227 }
 228
 229 ///////////////////////////////cc.e////////////////////////////////////////
 230 #undef prefix_
 231
 232 \f
 233 // Local Variables:
 234 // mode: c++
 235 // fill-column: 100
 236 // c-file-style: "senf"
 237 // indent-tabs-mode: nil
 238 // ispell-local-dictionary: "american"
 239 // compile-command: "scons -u test"
 240 // comment-column: 40
 241 // End: