Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

MOFA-Video-Traj graio demo出错 #30

Open
Amo5 opened this issue Jul 1, 2024 · 8 comments
Open

MOFA-Video-Traj graio demo出错 #30

Amo5 opened this issue Jul 1, 2024 · 8 comments

Comments

@Amo5
Copy link

Amo5 commented Jul 1, 2024

作者好,已经把所有模型下载完毕,但是启动gradio的时候,出现 missing keys的问题:
image
另外,当我上传图片后,开始选择轨迹起点时候,会报错:
image

@MyNiuuu
Copy link
Owner

MyNiuuu commented Jul 1, 2024

作者好,已经把所有模型下载完毕,但是启动gradio的时候,出现 missing keys的问题

这个warning不用管,不会影响模型的推理结果

另外,当我上传图片后,开始选择轨迹起点时候,会报错

你使用的gradio版本是多少?要使用4.5.0版本,其他版本的Gradio会导致一些报错。

@TomSuen
Copy link

TomSuen commented Jul 1, 2024

作者好,已经把所有模型下载完毕,但是启动gradio的时候,出现 missing keys的问题: image 另外,当我上传图片后,开始选择轨迹起点时候,会报错: image

你要点最左边的upload_image按钮上传,而不能点中间的图片位置的”上传按钮“

@Amo5
Copy link
Author

Amo5 commented Jul 2, 2024

作者好,已经把所有模型下载完毕,但是启动gradio的时候,出现 missing keys的问题

这个warning不用管,不会影响模型的推理结果

另外,当我上传图片后,开始选择轨迹起点时候,会报错

你使用的gradio版本是多少?要使用4.5.0版本,其他版本的Gradio会导致一些报错。

我严格按照requirement文件中安装的环境。。仍然我发正常使用gradio。
作者方便提供一个inference代码吗

@Amo5
Copy link
Author

Amo5 commented Jul 2, 2024

作者好,已经把所有模型下载完毕,但是启动gradio的时候,出现 missing keys的问题: image 另外,当我上传图片后,开始选择轨迹起点时候,会报错: image

你要点最左边的upload_image按钮上传,而不能点中间的图片位置的”上传按钮“

都不行。。你成功运行了吗?我甚至在huggingface上的demo都无法正常运行

@MyNiuuu
Copy link
Owner

MyNiuuu commented Jul 2, 2024

作者好,已经把所有模型下载完毕,但是启动gradio的时候,出现 missing keys的问题: image 另外,当我上传图片后,开始选择轨迹起点时候,会报错: image

你要点最左边的upload_image按钮上传,而不能点中间的图片位置的”上传按钮“

都不行。。你成功运行了吗?我甚至在huggingface上的demo都无法正常运行

你说的是这个demo吗:https://huggingface.co/spaces/dkrajews/MOFA-demo
这个huggingface的demo不是我上传的official的,我现在还在配huggingface demo的环境,他那个demo我试过确实一直报错。

@MyNiuuu
Copy link
Owner

MyNiuuu commented Jul 2, 2024

作者好,已经把所有模型下载完毕,但是启动gradio的时候,出现 missing keys的问题

这个warning不用管,不会影响模型的推理结果

另外,当我上传图片后,开始选择轨迹起点时候,会报错

你使用的gradio版本是多少?要使用4.5.0版本,其他版本的Gradio会导致一些报错。

我严格按照requirement文件中安装的环境。。仍然我发正常使用gradio。 作者方便提供一个inference代码吗

inference代码就是https://github.com/MyNiuuu/MOFA-Video/blob/main/MOFA-Video-Traj/run_gradio.py 这个python文件。顺便你conda的环境list我能看一下吗?在终端运行pip list

@TomSuen
Copy link

TomSuen commented Jul 2, 2024

作者好,已经把所有模型下载完毕,但是启动gradio的时候,出现 missing keys的问题: image 另外,当我上传图片后,开始选择轨迹起点时候,会报错: image

你要点最左边的upload_image按钮上传,而不能点中间的图片位置的”上传按钮“

都不行。。你成功运行了吗?我甚至在huggingface上的demo都无法正常运行

我可以顺利运行run_gradio.py,你这个报错我只是从UI中间位置那里上传图片才会遇到,并且出现这个错误之前,你的motion brush窗口那边不会出现图片

@Amo5
Copy link
Author

Amo5 commented Jul 3, 2024

作者好,已经把所有模型下载完毕,但是启动gradio的时候,出现 missing keys的问题

这个warning不用管,不会影响模型的推理结果

另外,当我上传图片后,开始选择轨迹起点时候,会报错

你使用的gradio版本是多少?要使用4.5.0版本,其他版本的Gradio会导致一些报错。

我严格按照requirement文件中安装的环境。。仍然我发正常使用gradio。 作者方便提供一个inference代码吗

inference代码就是https://github.com/MyNiuuu/MOFA-Video/blob/main/MOFA-Video-Traj/run_gradio.py 这个python文件。顺便你conda的环境list我能看一下吗?在终端运行pip list

Package Version


accelerate 0.30.1
aiofiles 23.2.1
altair 5.3.0
annotated-types 0.7.0
anyio 4.4.0
attrs 23.2.0
av 12.2.0
blessed 1.20.0
certifi 2024.6.2
charset-normalizer 3.3.2
click 8.1.7
cmake 3.29.6
colorlog 6.8.2
contourpy 1.2.1
cupy-cuda117 10.6.0
cycler 0.12.1
diffusers 0.24.0
dnspython 2.6.1
einops 0.8.0
email_validator 2.2.0
exceptiongroup 1.2.1
fastapi 0.111.0
fastapi-cli 0.0.4
fastrlock 0.8.2
ffmpy 0.3.2
filelock 3.15.4
fonttools 4.53.0
fsspec 2024.6.1
fvcore 0.1.5.post20221221
gpustat 1.1.1
gradio 4.5.0
gradio_client 0.7.0
h11 0.14.0
httpcore 1.0.5
httptools 0.6.1
httpx 0.27.0
huggingface-hub 0.23.4
idna 3.7
imageio 2.34.2
importlib_metadata 8.0.0
importlib_resources 6.4.0
inquirerpy 0.3.4
iopath 0.1.10
Jinja2 3.1.4
jsonschema 4.22.0
jsonschema-specifications 2023.12.1
kiwisolver 1.4.5
lazy_loader 0.4
lit 18.1.8
markdown-it-py 3.0.0
MarkupSafe 2.1.5
matplotlib 3.9.0
mdurl 0.1.2
mpmath 1.3.0
networkx 3.3
numpy 1.24.4
nvidia-cublas-cu11 11.10.3.66
nvidia-cuda-cupti-cu11 11.7.101
nvidia-cuda-nvrtc-cu11 11.7.99
nvidia-cuda-runtime-cu11 11.7.99
nvidia-cudnn-cu11 8.5.0.96
nvidia-cufft-cu11 10.9.0.58
nvidia-curand-cu11 10.2.10.91
nvidia-cusolver-cu11 11.4.0.1
nvidia-cusparse-cu11 11.7.4.91
nvidia-ml-py 12.555.43
nvidia-nccl-cu11 2.14.3
nvidia-nvtx-cu11 11.7.91
opencv-python 4.10.0.84
opencv-python-headless 4.10.0.84
orjson 3.10.5
packaging 24.1
pandas 2.2.2
pfzy 0.3.4
pillow 10.3.0
pip 24.0
portalocker 2.10.0
prompt_toolkit 3.0.47
psutil 6.0.0
pydantic 2.7.4
pydantic_core 2.18.4
pydub 0.25.1
Pygments 2.18.0
pyparsing 3.1.2
python-dateutil 2.9.0.post0
python-dotenv 1.0.1
python-multipart 0.0.9
pytorch3d 0.7.7
pytz 2024.1
PyYAML 6.0.1
referencing 0.35.1
regex 2024.5.15
requests 2.32.3
rich 13.7.1
rpds-py 0.18.1
safetensors 0.4.3
scikit-image 0.24.0
scipy 1.14.0
semantic-version 2.10.0
setuptools 69.5.1
shellingham 1.5.4
six 1.16.0
sniffio 1.3.1
starlette 0.37.2
sympy 1.12.1
tabulate 0.9.0
termcolor 2.4.0
tifffile 2024.6.18
tokenizers 0.19.1
tomlkit 0.12.0
toolz 0.12.1
torch 2.0.1
torchvision 0.15.2
tqdm 4.66.4
transformers 4.41.1
triton 2.0.0
typer 0.12.3
typing_extensions 4.12.2
tzdata 2024.1
ujson 5.10.0
urllib3 2.2.2
uvicorn 0.30.1
uvloop 0.19.0
watchfiles 0.22.0
wcwidth 0.2.13
websockets 11.0.3
wheel 0.43.0
yacs 0.1.8
zipp 3.19.2

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Labels
None yet
Projects
None yet
Development

No branches or pull requests

3 participants