С# - потоковая передача экрана RTP

Существуют ли готовые к использованию бесплатные RTP-библиотеки с открытым исходным кодом?

• live555 — я использовал его, и он превосходен, но C++, поэтому вам придется взаимодействовать.
• gstreamer — также встроенный, требующий взаимодействия.
• управляемое агрегирование мультимедиа я не использовал, но оно полностью управляемо.

Как бы я передал прямую трансляцию из настольного приложения в веб-приложение, поскольку оно исходит со стороны клиента, у которого нет открытого порта? Я думал о другом настольном приложении, которое будет работать на сервере (размещая веб-приложение), а затем снова будет передавать тот же контент, а затем веб-приложение может просто отображать контент, подключаясь к локальному IP-адресу с портом RTP, но это не решает загадку передачи прямой трансляции с клиента на сервер?

Это было бы непросто. Все вышеперечисленные библиотеки следуют строгой спецификации RTSP/RTP, которая требует открытия порта прослушивания на стороне вашего хоста, который, несомненно, будет находиться за адресом nat. Я бы придерживался того, чтобы каждый конец был клиентом и доходил до вашего веб-сервиса. Вам также необходимо гарантировать доставку ваших кадров (поскольку вы доставляете инкрементные дельты), поэтому RTP (который традиционно используется вместо UDP) будет затруднительным.

Некоторые мысли

В конце концов, RTP — это просто стандартизированный 12-байтовый заголовок и правила пакетирования для сжатых носителей. Это не поможет с задержкой. Настоящим преимуществом будет возможность подключения к конечной точке в соответствии со стандартами, например, с помощью клиента VLC. .

Вы можете настроить свои сокеты, и это немного поможет, но, честно говоря, я бы сосредоточился на эффективности сжатия и захвата экрана. Какое сжатие изображения вы используете? VNC традиционно использовал zlib и некоторые другие файлы с потерями, такие как jpeg. Чем меньше вы получите эти кадры, тем лучше.

Еще одна мысль, которая может помочь: у Microsoft есть API для получения «грязных областей экрана». Он называется API дублирования рабочего стола и работает невероятно быстро. Однако это Win8 и выше.

Всего наилучшего в вашем начинании!