【问题标题】:How would you implement your own reader/writer lock in C++11?您将如何在 C++11 中实现自己的读/写锁?
【发布时间】:2012-08-15 12:27:47
【问题描述】:

我有一组数据结构需要用读/写锁来保护。我知道 boost::shared_lock,但我想有一个使用 std::mutex、std::condition_variable 和/或 std::atomic 的自定义实现,以便我可以更好地理解它是如何工作的(稍后再调整它) .

每个数据结构(可移动,但不可复制)都将继承自一个名为 Commons 的类,该类封装了锁定。我希望公共界面看起来像这样:

class Commons {
public:
    void read_lock();
    bool try_read_lock();
    void read_unlock();

    void write_lock();
    bool try_write_lock();
    void write_unlock();
};

...这样它就可以被某些人公开继承:

class DataStructure : public Commons {};

我正在编写科学代码,通常可以避免数据竞争;这个锁主要是为了防止我以后可能会犯的错误。因此,我的优先级是低读取开销,因此我不会过多地妨碍正确运行的程序。每个线程可能会在自己的 CPU 内核上运行。

能否请您给我看(伪代码可以)读/写锁?我现在拥有的应该是防止作家饥饿的变体。到目前为止,我的主要问题是 read_lock 在检查读取是否安全与实际增加读取器计数之间存在差距,之后 write_lock 知道等待。

void Commons::write_lock() {
    write_mutex.lock();
    reading_mode.store(false);
    while(readers.load() > 0) {}
}

void Commons::try_read_lock() {
    if(reading_mode.load()) {
        //if another thread calls write_lock here, bad things can happen
        ++readers; 
        return true;
    } else return false;
}

我对多线程有点陌生,我真的很想了解它。提前感谢您的帮助!

【问题讨论】:

标签: c++ multithreading c++11 locking readwritelock


【解决方案1】:

这是使用互斥锁和条件变量的简单读/写锁的伪代码。互斥 API 应该是不言自明的。假设条件变量有一个成员wait(Mutex&),它(原子地!)删除互斥体并等待条件发出信号。条件由signal() 发出信号,唤醒一个 服务员,或signal_all() 唤醒所有服务员。

read_lock() {
  mutex.lock();
  while (writer)
    unlocked.wait(mutex);
  readers++;
  mutex.unlock();
}

read_unlock() {
  mutex.lock();
  readers--;
  if (readers == 0)
    unlocked.signal_all();
  mutex.unlock();
}

write_lock() {
  mutex.lock();
  while (writer || (readers > 0))
    unlocked.wait(mutex);
  writer = true;
  mutex.unlock();
}

write_unlock() {
  mutex.lock();
  writer = false;
  unlocked.signal_all();
  mutex.unlock();
}

不过,这种实现有很多缺点。

当锁可用时唤醒所有服务员

如果大多数等待者都在等待写锁,这是浪费 - 毕竟大多数等待者将无法获取锁,并继续等待。简单地使用signal() 是行不通的,因为您确实想唤醒所有等待读取锁解锁的人。因此,要解决这个问题,您需要单独的条件变量来实现可读性和可写性。

不公平。读者饿死作者

您可以通过跟踪挂起的读写锁的数量来解决这个问题,或者在出现挂起的写锁时停止获取读锁(尽管这样您会饿死读者!),或者随机唤醒所有读者或一个writer(假设您使用单独的条件变量,请参阅上面的部分)。

锁没有按照请求的顺序处理

为了保证这一点,您需要一个真正的等待队列。你可以例如为每个等待者创建一个条件变量,并在释放锁后向队列头部的所有读取器或单个写入器发出信号。

即使是纯读取工作负载也会因互斥锁而引起争用

这个很难修复。一种方法是使用原子指令来获取读或写锁(通常是比较和交换)。如果由于锁定而导致获取失败,您将不得不退回到互斥锁。但是,正确地做到这一点非常困难。此外,仍然存在争用 - 原子指令远非免费,尤其是在具有大量内核的机器上。

结论

正确实现同步原语困难。实现高效且公平的同步原语甚至 更难。它几乎没有回报。 Linux 上的 pthreads,例如包含一个读写器锁,它使用 futexes 和原子指令的组合,因此它的性能可能优于你在几天的工作中所能想到的任何东西。

【讨论】:

  • 你提到的最后一个缺点——读者之间的争论——是我真正想要解决的问题。我最终得到了一个在我运行它的每个特定测试用例中都有效的实现,但随机锁定序列失败了。那时我放弃了,只是使用了 boost::shared_lock。 :(
【解决方案2】:

Check this class:

//
// Multi-reader Single-writer concurrency base class for Win32
//
// (c) 1999-2003 by Glenn Slayden (glenn@glennslayden.com)
//
//


#include "windows.h"

class MultiReaderSingleWriter
{
private:
    CRITICAL_SECTION m_csWrite;
    CRITICAL_SECTION m_csReaderCount;
    long m_cReaders;
    HANDLE m_hevReadersCleared;

public:
    MultiReaderSingleWriter()
    {
        m_cReaders = 0;
        InitializeCriticalSection(&m_csWrite);
        InitializeCriticalSection(&m_csReaderCount);
        m_hevReadersCleared = CreateEvent(NULL,TRUE,TRUE,NULL);
    }

    ~MultiReaderSingleWriter()
    {
        WaitForSingleObject(m_hevReadersCleared,INFINITE);
        CloseHandle(m_hevReadersCleared);
        DeleteCriticalSection(&m_csWrite);
        DeleteCriticalSection(&m_csReaderCount);
    }


    void EnterReader(void)
    {
        EnterCriticalSection(&m_csWrite);
        EnterCriticalSection(&m_csReaderCount);
        if (++m_cReaders == 1)
            ResetEvent(m_hevReadersCleared);
        LeaveCriticalSection(&m_csReaderCount);
        LeaveCriticalSection(&m_csWrite);
    }

    void LeaveReader(void)
    {
        EnterCriticalSection(&m_csReaderCount);
        if (--m_cReaders == 0)
            SetEvent(m_hevReadersCleared);
        LeaveCriticalSection(&m_csReaderCount);
    }

    void EnterWriter(void)
    {
        EnterCriticalSection(&m_csWrite);
        WaitForSingleObject(m_hevReadersCleared,INFINITE);
    }

    void LeaveWriter(void)
    {
        LeaveCriticalSection(&m_csWrite);
    }
};

我没有机会尝试,但代码看起来不错。

【讨论】:

  • 谢谢,这似乎很好。它包括一种将读者提升为作家的简单方法,这通常是一个很好的功能
  • 虽然这只是Windows,一般不是C++11
【解决方案3】:

您可以按照来自here(我写的)的确切维基百科算法实现一个读者-作家锁:

#include <iostream>
#include <thread>
#include <mutex>
#include <condition_variable>

int g_sharedData = 0;
int g_readersWaiting = 0;
std::mutex mu;
bool g_writerWaiting = false;
std::condition_variable cond;

void reader(int i)
{
    std::unique_lock<std::mutex> lg{mu};
    while(g_writerWaiting)
        cond.wait(lg);
    ++g_readersWaiting;
    // reading
    std::cout << "\n reader #" << i << " is reading data = " << g_sharedData << '\n';
    // end reading
    --g_readersWaiting;
    while(g_readersWaiting > 0)
        cond.wait(lg);
    cond.notify_one();
}

void writer(int i)
{
    std::unique_lock<std::mutex> lg{mu};
    while(g_writerWaiting)
        cond.wait(lg);
    // writing
    std::cout << "\n writer #" << i << " is writing\n";
    g_sharedData += i * 10;
    // end writing
    g_writerWaiting = true;
    while(g_readersWaiting > 0)
        cond.wait(lg);
    g_writerWaiting = false;
    cond.notify_all();
}//lg.unlock()


int main()
{
    std::thread reader1{reader, 1};
    std::thread reader2{reader, 2};
    std::thread reader3{reader, 3};
    std::thread reader4{reader, 4};
    std::thread writer1{writer, 1};
    std::thread writer2{writer, 2};
    std::thread writer3{writer, 3};
    std::thread writer4{reader, 4};

    reader1.join();
    reader2.join(); 
    reader3.join();
    reader4.join();
    writer1.join();
    writer2.join();
    writer3.join();
    writer4.join();

    return(0);
}

【讨论】:

  • 您优先考虑读者?通常我们做相反的事情:优先写入写入者,因此数据会尽快更新给读取者。此外,您的读者通常比作者多。
【解决方案4】:

我相信这就是您正在寻找的:

class Commons {
    std::mutex write_m_;
    std::atomic<unsigned int> readers_;

public:
    Commons() : readers_(0) {
    }

    void read_lock() {
        write_m_.lock();
        ++readers_;
        write_m_.unlock();
    }

    bool try_read_lock() {
        if (write_m_.try_lock()) {
            ++readers_;
            write_m_.unlock();
            return true;
        }
        return false;
    }

    // Note: unlock without holding a lock is Undefined Behavior!
    void read_unlock() {
        --readers_;
    }

    // Note: This implementation uses a busy wait to make other functions more efficient.
    //       Consider using try_write_lock instead! and note that the number of readers can be accessed using readers()
    void write_lock() {
        while (readers_) {}
        if (!write_m_.try_lock())
            write_lock();
    }

    bool try_write_lock() {
        if (!readers_)
            return write_m_.try_lock();
        return false;
    }

    // Note: unlock without holding a lock is Undefined Behavior!
    void write_unlock() {
        write_m_.unlock(); 
    }

    int readers() { 
        return readers_; 
    }
};

对于 C++17 以来的记录,我们有 std::shared_mutex,请参阅:https://en.cppreference.com/w/cpp/thread/shared_mutex

【讨论】:

    猜你喜欢
    • 2015-10-15
    • 2016-06-05
    • 1970-01-01
    • 2020-09-02
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多