返回列表 发布新帖
楼主: zelefans

[10.15]Thru3D媒体服务器(原VR视频透视服务器)V1.5.2版(支持字幕、离线鱼眼转透视)

 火..

672

金钱

800

回帖

415

积分

Lv6 渐入佳境

积分
415
 楼主| 发表于 2026-5-17 01:58:52 | 显示全部楼层
今天日间可以发beta1版本了,实时模式大提速,去掉了跳帧,拖影问题解决
睡前用skybox测了半小时很稳定流畅

2万

金钱

172

回帖

924

积分

Lv7 炉火纯青

积分
924
发表于 2026-5-17 02:31:17 来自手机 | 显示全部楼层
zelefans 发表于 2026-5-17 01:58
今天日间可以发beta1版本了,实时模式大提速,去掉了跳帧,拖影问题解决
睡前用skybox测了半小时很稳定流畅 ...

越来越强了,走的dlna,下片比较麻烦,要是走网盘本地挂载那就屌炸天了😜

672

金钱

800

回帖

415

积分

Lv6 渐入佳境

积分
415
 楼主| 发表于 2026-5-17 14:37:26 | 显示全部楼层
0.1.0 beta1更新
大幅提高实时服务器性能
增加原始视频自动关联字幕
FPS和显存实时显示
各种小修改

672

金钱

800

回帖

415

积分

Lv6 渐入佳境

积分
415
 楼主| 发表于 2026-5-17 14:50:18 | 显示全部楼层
pwzdby 发表于 2026-5-17 02:31
越来越强了,走的dlna,下片比较麻烦,要是走网盘本地挂载那就屌炸天了😜 ...

网盘本地挂载估计很难,而且FPS感觉跟不上,要过两层

215

金钱

67

回帖

56

积分

Lv4 初窥堂奥

积分
56
发表于 2026-5-17 17:12:41 | 显示全部楼层
更新完beta反而离线报错了,另外大佬可以考虑下加入2d视频转3d再加透视的功能,看那种主播跳舞结合透视也挺带感的
[PYI-44076:ERROR] Failed to execute script 'main' due to unhandled exception!
[offline] run: E:\VR_Video_Passthrough_Server\pt_core.exe tool offline_alpha_passthrough E:\VR_Video_Passthrough_Server\videos\1.mp4 --engine rvm --out E:\VR_Video_Passthrough_Server\videos\1_rvm1_S000000_ALL_FISHEYE180_alpha.mp4 --audio copy --model E:\VR_Video_Passthrough_Server\models\rvm_mobilenetv3_fp32.onnx --alpha-stride 1 --input-size 1024 --sbs-batch --bitrate live --preset P1 --cq -1
[offline] env: decoder=simple batch=1 buffer=2 preset=P1 model=
[offline-alpha] decoder=simple batch=1 buffer=2 owned_copy=False
[matting] CuPy 14.0.1 detected, GPU composite enabled.
[matting] options: input_size=1024 square=False split_sbs=True sbs_batch=True alpha_stride=1 alpha_mode=reuse alpha_cutoff=0.0 alpha_hard_edge=False alpha_contrast=1.0
2026-05-17 17:06:47.2638962 [Wnnxruntime:, transformer_memcpy.cc:111 onnxruntime::MemcpyTransformer::ApplyImpl] 1 Memcpy nodes are added to the graph torch-jit-export for CUDAExecutionProvider. It might have negative impact on performance (including unable to run CUDA graph). Set session_options.log_severity_level=1 to see the detail logs before this message.
[matting] model kind=rvm input=src shape=['batch_size', 3, 'height', 'width'] type=tensor(float) batch2=True model_batch2=True rvm_iobinding=True providers=['CUDAExecutionProvider', 'CPUExecutionProvider'] inputs=['src', 'r1i', 'r2i', 'r3i', 'r4i', 'downsample_ratio'] outputs=['fgr', 'pha', 'r1o', 'r2o', 'r3o', 'r4o']
[offline-alpha] src=E:\VR_Video_Passthrough_Server\videos\1.mp4 out=E:\VR_Video_Passthrough_Server\videos\1_rvm1_S000000_ALL_FISHEYE180_alpha.mp4 engine=rvm 4096x2048 source_fps=59.938000 output_fps=59.938000 target=20289 audio=copy bitrate=50000000 maxbitrate=60000000 vbvbufsize=100000000 rc=vbr cq=-1 preset=P1
[offline-alpha] projection=sbs half-equirect 180 -> fisheye sbs radius_scale=1
[offline-alpha] packing=DeoVR-style red-channel alpha blocks scale=0.4 layout=alpha-packer-6block
[offline] mux=.\ffmpeg.EXE -hide_banner -loglevel warning -y -fflags +genpts -f hevc -framerate 59.938000 -i - -map 0:v:0 -c:v copy -an -movflags +faststart -f mp4 E:\VR_Video_Passthrough_Server\videos\1_rvm1_S000000_ALL_FISHEYE180_alpha._video_only.mp4
Traceback (most recent call last):
  File "main.py", line 313, in <module>
  File "main.py", line 126, in main
  File "main.py", line 61, in _run_legacy_tool
  File "tools\offline_alpha_passthrough.py", line 1753, in main
  File "pipeline\pynv_io.py", line 267, in frame_at
  File "yNvVideoCodec\decoders\SimpleDecoder.py", line 86, in __getitem__
_PyNvVideoCodec.PyNvVCExceptionUnsupported: NvDecoder::HandleVideoSequence :
Error code : 801
Error Type : MBCount not supported on this GPU
MBCount             : 32768
Max Supported mbcnt : 8192
at G:\build\sw\devrel\PyNvVideoCodec\rel_2_1\src\VideoCodecSDKUtils\helper_classes\NvCodec\NvDecoder\NvDecoder.cpp:275

[PYI-30496:ERROR] Failed to execute script 'main' due to unhandled exception!

215

金钱

67

回帖

56

积分

Lv4 初窥堂奥

积分
56
发表于 2026-5-17 17:26:36 | 显示全部楼层
还有一个问题,pico4上用4xvr卡的非常厉害,Alpha版本我是点开视频就一直转圈始终没图像,用deovr却没问题速度还挺快的,beta版本刚试了4xvr能打开看到图像了但是播放1-2秒又卡死一直转圈了

672

金钱

800

回帖

415

积分

Lv6 渐入佳境

积分
415
 楼主| 发表于 2026-5-17 17:47:09 | 显示全部楼层
本帖最后由 zelefans 于 2026-5-17 18:01 编辑
5x5x5x4n 发表于 2026-5-17 17:12
更新完beta反而离线报错了,另外大佬可以考虑下加入2d视频转3d再加透视的功能,看那种主播跳舞结合透视也挺 ...

你显卡是什么。这个错误是显卡不支持这个解析度的解码。视频原始是多大尺寸。也可以给样本。
从错误信息来说,当前显卡的 NVIDIA 硬件解码器不支持该视频分辨率。视频为 4096x2048,需要 MBCount 32768,但显卡最大只支持 8192,就是1080p。
离线这块这个版本按理说应该改动不大的.....你可以试试用老本跑一遍,贴个正常的日志。。。

看你 历史 回帖 ,显卡是4070,这很不正常 。我马上加点日志,给个小的exe覆盖了多点日志看原因 。很像是调用到其他不支持的GPU了 。

672

金钱

800

回帖

415

积分

Lv6 渐入佳境

积分
415
 楼主| 发表于 2026-5-17 17:51:42 | 显示全部楼层
本帖最后由 zelefans 于 2026-5-17 17:54 编辑
5x5x5x4n 发表于 2026-5-17 17:26
还有一个问题,pico4上用4xvr卡的非常厉害,Alpha版本我是点开视频就一直转圈始终没图像,用deovr却没问题 ...

beta版本底下会显示FPS和显存,可以播放时看一下。也可以开启debug,抓一下详细点日志。然后去debug_output把最近一次日志server.log压缩一下发到帖子里。回帖高级模式也可以贴附件

672

金钱

800

回帖

415

积分

Lv6 渐入佳境

积分
415
 楼主| 发表于 2026-5-17 18:19:27 | 显示全部楼层
5x5x5x4n 发表于 2026-5-17 17:12
更新完beta反而离线报错了,另外大佬可以考虑下加入2d视频转3d再加透视的功能,看那种主播跳舞结合透视也挺 ...

我在百度网盘和夸克都加上了”补丁(调试用)“目录,里面的beta1_patch1_离线增加日志判断.7z你覆盖两个exe看一下。
离线的第二第三行会多出视频的判断和当前显卡的信息,比如我的:

[offline-alpha] input codec=hevc profile=Main pix_fmt=yuv420p bit_depth=8 size=8192x4096
[offline-alpha] cuda gpu_id=0 name=NVIDIA GeForce RTX 5060 Ti cc=12.0 vram=15.9GB free=14.7GB driver=13000 runtime=12090

有信息后贴给我,谢谢哈

672

金钱

800

回帖

415

积分

Lv6 渐入佳境

积分
415
 楼主| 发表于 2026-5-17 18:27:34 | 显示全部楼层
5x5x5x4n 发表于 2026-5-17 17:12
更新完beta反而离线报错了,另外大佬可以考虑下加入2d视频转3d再加透视的功能,看那种主播跳舞结合透视也挺 ...

另外,2D视频,技术上现在绿幕模式是透视的,不会强制转VR。实时和离线你都可以试一下。
2D视频暂时没有办法用alpha来看,因为技术上alpha直通的技术方案必须是VR鱼眼,然后四个角多出黑色部分放透视的蒙版。但我打这些字的时候想到,对于跳舞类居中人物视频,其实是可以近似处理的,平面转鱼眼。我再考虑考虑,最好给我一些类似的2D视频资源下载地址,我做测试。
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

Copyright © 2026 4ktwo.com All Rights Reserved.
关灯 快速发帖返回顶部
快速回复 返回顶部 返回列表