Как получить глубину в пикселях x, y после постобработки с помощью RealSense?

#c #realsense

# #c #realsense

Вопрос:

Учитывая следующий код :

 // Declare pointcloud object, for calculating pointclouds and texture mappings
rs2::pointcloud pc;
// We want the points object to be persistent so we can display the last cloud when a frame drops
rs2::points points;

// Declare RealSense pipeline, encapsulating the actual device and sensors
rs2::pipeline pipe;

// Start streaming with default recommended configuration
pipe.start();

// Declare filters
rs2::decimation_filter dec_filter;  // Decimation - reduces depth frame density
rs2::threshold_filter thr_filter;   // Threshold  - removes values outside recommended range
rs2::spatial_filter spat_filter;    // Spatial    - edge-preserving spatial smoothing
rs2::temporal_filter temp_filter;   // Temporal   - reduces temporal noise
rs2::disparity_transform depth_to_disparity(true);
rs2::disparity_transform disparity_to_depth(false);

// Initialize a vector that holds filters and their options
std::vector<rs2::filter*> filters;
    
// The following order of emplacement will dictate the orders in which filters are applied
filters.emplace_back(amp;dec_filter);
filters.emplace_back(amp;thr_filter);
filters.emplace_back(amp;depth_to_disparity);
filters.emplace_back(amp;spat_filter);
filters.emplace_back(amp;temp_filter);
filters.emplace_back(amp;disparity_to_depth);


while (app) // Application still alive?
{
    // Wait for the next set of frames from the camera
    auto frames = pipe.wait_for_frames();

    rs2::video_frame color = frames.get_color_frame();

    // For cameras that don't have RGB sensor, we'll map the pointcloud to infrared instead of color
    if (!color)
        color = frames.get_infrared_frame();

    rs2::depth_frame depth = frames.get_depth_frame();

    int centerX = depth.get_width() / 2;
    int centerY = depth.get_height() / 2;


    // A: Pre-filtered
    float prefiltered_distance = depth.get_distance(centerX, centerY);

    
    // B: Filter frames
    for (auto filter : filters)
    {
        depth = (*filter).process(depth);
    }
    
    
    // C: Post-filtered (fails)
    float postfiltered_distance = depth.get_distance(centerX, centerY);


    // Tell pointcloud object to map to this color frame
    pc.map_to(color);
    // Generate the pointcloud and texture mappings
    points = pc.calculate(depth);
    
    // ...

}
 

Почему вызов depth.get_distance(centerX, centerY); перед фильтрацией кадра работает нормально, но вызов той же функции после сбоя фильтрации с помощью a out of range value for argument "y" ?

Короче говоря, как мне получить отфильтрованное расстояние ( z ) пикселя в x,y ?

Ответ №1:

Фильтр прореживания уменьшает разрешение изображения, поэтому вам следует еще раз проверить разрешение после запуска фильтров и обновить centerX centerY переменные и, чтобы они больше не выходили за рамки.