从（char *，size_t）创建C++内存流的简单方法，无需复制数据？

Question

我找不到任何现成的，所以我想出了：

class membuf : public basic_streambuf<char> 
{ 
public: 
    membuf(char* p, size_t n) { 
    setg(p, p, p + n); 
    setp(p, p + n); 
    } 
} 

用法：

char *mybuffer; 
size_t length; 
// ... allocate "mybuffer", put data into it, set "length" 

membuf mb(mybuffer, length); 
istream reader(&mb); 
// use "reader" 

我知道stringstream，但它似乎并没有能够工作与给定长度的二进制数据。

我在这里发明了自己的车轮吗？

编辑

• 它不得复制输入数据，刚刚创造的东西，会遍历数据。
• 它必须是可移植的 - 至少它应该同时在gcc和MSVC下工作。

Answer 1

我假设你的输入数据是二进制（不是文本），并且你想从中提取二进制数据块。所有这些都不需要复制输入数据。

您可以结合boost::iostreams::basic_array_source和boost::iostreams::stream_buffer（从Boost.Iostreams）与boost::archive::binary_iarchive（从Boost.Serialization），以能够使用便捷的提取>>运营商读取二进制数据块。

#include <stdint.h> 
#include <iostream> 
#include <boost/iostreams/device/array.hpp> 
#include <boost/iostreams/stream.hpp> 
#include <boost/archive/binary_iarchive.hpp> 

int main() 
{ 
    uint16_t data[] = {1234, 5678}; 
    char* dataPtr = (char*)&data; 

    typedef boost::iostreams::basic_array_source<char> Device; 
    boost::iostreams::stream_buffer<Device> buffer(dataPtr, sizeof(data)); 
    boost::archive::binary_iarchive archive(buffer, boost::archive::no_header); 

    uint16_t word1, word2; 
    archive >> word1 >> word2; 
    std::cout << word1 << "," << word2 << std::endl; 
    return 0; 
} 

随着AMD64 GCC 4.4.1，它输出：

1234,5678

Boost.Serialization是非常强大的，并且知道如何连载所有的基本类型，字符串，甚至STL容器。你可以很容易地让你的类型可序列化。请参阅文档。隐藏在Boost.Serialization源代码中的某个地方是一个便携式二进制归档文件的例子，它知道如何为您的机器的字节顺序执行适当的交换。这对你也可能有用。

如果您不需要Boost.Serialization的装饰性，并很高兴在FREAD读取二进制数据（） - 时尚型，你可以在一个更简单的方式使用basic_array_source：

#include <stdint.h> 
#include <iostream> 
#include <boost/iostreams/device/array.hpp> 
#include <boost/iostreams/stream.hpp> 

int main() 
{ 
    uint16_t data[] = {1234, 5678}; 
    char* dataPtr = (char*)&data; 

    typedef boost::iostreams::basic_array_source<char> Device; 
    boost::iostreams::stream<Device> stream(dataPtr, sizeof(data)); 

    uint16_t word1, word2; 
    stream.read((char*)&word1, sizeof(word1)); 
    stream.read((char*)&word2, sizeof(word2)); 
    std::cout << word1 << "," << word2 << std::endl; 

    return 0; 
} 

我用这个程序得到相同的输出。

Answer 2

我不确定你需要什么，但是这样做你想做什么？

char *mybuffer; 
size_t length; 
// allocate, fill, set length, as before 

std::string data(mybuffer, length); 
std::istringstream mb(data); 
//use mb 

Answer 3

标准流缓冲区具有此功能。
创建一个流。获取缓冲区然后覆盖它。

#include <sstream> 
#include <iostream> 
#include <algorithm> 
#include <iterator> 

int main() 
{ 
    // Your imaginary buffer 
    char buffer[] = "A large buffer we don't want to copy but use in a stream"; 

    // An ordinary stream. 
    std::stringstream str; 

    // Get the streams buffer object. Reset the actual buffer being used. 
    str.rdbuf()->pubsetbuf(buffer,sizeof(buffer)); 

    std::copy(std::istreambuf_iterator<char>(str), 
       std::istreambuf_iterator<char>(), 
       std::ostream_iterator<char>(std::cout) 
      ); 
} 

Answer 4

提问者想要一些不复制数据，他的解决方案正常工作。我的贡献是稍微清理一下，所以你可以创建一个单一的对象，这个对象是内存中数据的输入流。我已经测试过它，它的工作原理。

class MemoryInputStream: public std::istream 
    { 
    public: 
    MemoryInputStream(const uint8_t* aData,size_t aLength): 
     std::istream(&m_buffer), 
     m_buffer(aData,aLength) 
     { 
     rdbuf(&m_buffer); // reset the buffer after it has been properly constructed 
     } 

    private: 
    class MemoryBuffer: public std::basic_streambuf<char> 
     { 
     public: 
     MemoryBuffer(const uint8_t* aData,size_t aLength) 
      { 
      setg((char*)aData,(char*)aData,(char*)aData + aLength); 
      } 
     }; 

    MemoryBuffer m_buffer; 
    };