当 xrepo 存在低版本包时，无法使用高版本的系统包 #6141

q962 · 2025-02-08T13:31:38Z

q962
Feb 8, 2025

xmake v2.9.7+20241220

这令我很困惑。

xrepo 的版本是 4.13.3
system(pkgconfig) 的版本是 4.16.7

当 add_requires("gtk4 >=4.16") or add_requires("gtk4 >=4.16", system=true)
则提示 package(gtk4): version(>=4.16.7) not found!

寻找到的相关代码

xmake/xmake/modules/private/action/require/impl/package.lua

Line 930 in 4ebeeb4

function _load_package(packagename, requireinfo, opt)

得到以下的搜索顺序

_load_package_from_project
_load_package_from_repository
_load_package_from_system

当 2 满足时则不会继续尝试 3

所以要满足条件则必须使用 pkgconfig:: 前缀。

没有特殊要求时，并不需要限制包的来源。

符合我想法的是：

  if _load_package_from_project(version) != faile
       return
  if  _load_package_from_repository(version) != faile
       return
  if  _load_package_from_system(version) != faile
       return

依次对版本号进行尝试。

waruqi · 2025-02-08T16:55:31Z

waruqi
Feb 8, 2025
Maintainer

xrepo 的版本是 4.13.3
system(pkgconfig) 的版本是 4.16.7
当 add_requires("gtk4 >=4.16") or add_requires("gtk4 >=4.16", system=true)
则提示 package(gtk4): version(>=4.16.7) not found!

设置 system = true 会强制走系统库查找，但前提能成功提取到 pkgconfig 文件里面的版本号，否则不会匹配成功版本。具体是否提取到对应版本，你可以自己调下。。

https://github.com/xmake-io/xmake-repo/blob/e96fbd32d7b5defd1efa665b6b804b7d8bff95a3/packages/g/gtk4/xmake.lua#L18

xmake/xmake/modules/package/manager/find_package.lua

Line 199 in 4ebeeb4

    
           if opt.require_version and opt.require_version:find('.', 1, true) and result then

xmake/xmake/modules/package/manager/pkgconfig/find_package.lua

Line 68 in 4ebeeb4

result.version = libinfo.version

而 add_requires("gtk4 >=4.16") 既然仓库中没高版本，当然匹配不到。

得到以下的搜索顺序
_load_package_from_project
_load_package_from_repository
_load_package_from_system
当 2 满足时则不会继续尝试 3
所以要满足条件则必须使用 pkgconfig:: 前缀。
没有特殊要求时，并不需要限制包的来源。

这里你理解不对，_load_package_from_system 跟 {system = true} 没有任何关系，_load_package_from_project/_load_package_from_repository 加载的包，才会支持 {system = true}，并且默认就会自动从 system 中查找。。不要瞎改。

0 replies

q962 · 2025-02-09T11:52:05Z

q962
Feb 9, 2025
Author

设置 system = true 会强制走系统库查找，但前提能成功提取到 pkgconfig 文件里面的版本号，否则不会匹配成功版本。具体是否提取到对应版本，你可以自己调下。。

我之前就尝试了。提示未找到

add_requires("gtk4 >=4.16", {system = true})

stack traceback:
    [C]: in function 'error'
    [@programdir\core\base\os.lua:1004]:
    [@programdir\modules\private\action\require\impl\package.lua:495]: in function '_select_package_version'
    [@programdir\modules\private\action\require\impl\package.lua:1034]: in function '_load_package'
    [@programdir\modules\private\action\require\impl\package.lua:1147]: in function '_load_packages'
    [@programdir\modules\private\action\require\impl\package.lua:1678]: in function 'load_packages'
    [...modules\private\action\require\impl\install_packages.lua:689]: in function '_install_packages'
    [...modules\private\action\require\impl\install_packages.lua:852]:
    [@programdir\modules\private\action\require\install.lua:85]:

上面的代码会先执行。之后才是 xmake/modules/package/manager/find_package.lua

所以 system 选项不会起到作用。

而 add_requires("gtk4 >=4.16") 既然仓库中没高版本，当然匹配不到。

但是系统中存在，所以不应该继续尝试吗？

现在问题是就出在 _load_package 函数。该函数最先被执行。
它不是从不同的来源判断版本是否存在。而是找到来源后，只在该源中判断版本是否存在。

2 replies

waruqi Feb 11, 2025
Maintainer

所以 system 选项不会起到作用。

这个问题我改进了下，可以试试 dev

我之前就尝试了。提示未找到

找不到的问题，可以自己调下上面我贴的几个地方，看下为啥没取到 pkgconfig 中的版本

q962 Feb 11, 2025
Author

你的改动是 022c671 这个吗？

新增的 is_system ~= true 会导致没有版本号继续返回，后面获取版本号时报错。

stack


error: @programdir\core\main.lua:329: @programdir\core\sandbox\modules\import\core\base\task.lua:65: 
@programdir\core\package\package.lua:863: attempt to index a nil value (local 'version_str')
stack traceback:
    [@programdir\core\package\package.lua:863]: in function 'cachedir'
    [@programdir\modules\private\action\require\impl\package.lua:1079]: in function '_load_package'
    [@programdir\modules\private\action\require\impl\package.lua:1156]: in function '_load_packages'
    [@programdir\modules\private\action\require\impl\package.lua:1695]: in function 'load_packages'
    [...modules\private\action\require\impl\install_packages.lua:689]: in function '_install_packages'
    [...modules\private\action\require\impl\install_packages.lua:852]:
    [@programdir\modules\private\action\require\install.lua:85]:

你可以在本地测试，测试文件只需一行代码

add_requires("gtk4 >=4.16")

找不到的问题，可以自己调下上面我贴的几个地方，看下为啥没取到 pkgconfig 中的版本

我的意思是 xmake 提示找不到。我的系统上可以通过 pkgconfig 获取到 4.16.7 的版本

我提出的改进建议不可取吗？

伪代码


function _load_package(packagename, requireinfo, opt)
local package
local version, source
do

	package = _load_package_from_project(packagename)
	
	version, source = _select_package_version(package, requireinfo, locked_requireinfo)
	if version ~= nil then
		break
	end
	
	
	package = _load_package_from_repository(packagename)
	
	version, source = _select_package_version(package, requireinfo, locked_requireinfo)
	if version ~= nil then
		break
	end

	if system == false then
		break
	end

	package = _load_package_from_system(packagename)
	
	version, source = _select_package_version(package, requireinfo, locked_requireinfo)
	if version ~= nil then
		break
	end
	
	
end

if not version then
	raise("package(%s): version(%s) not found!", package:name(), require_version)
end

end

waruqi · 2025-02-11T14:01:17Z

waruqi
Feb 11, 2025
Maintainer

新增的 is_system ~= true 会导致没有版本号继续返回，后面获取版本号时报错。

没遇到你说的问题，我这边一切正常。。我这里安装的是 gtk 4.14 也是高于 xmake-repo 中的版本

一切正常，能正常找到对应版本的系统 gtk4

add_requires("gtk4 >=4.14", {system = true})

target("test")
    set_kind("binary")
    add_files("src/*.cpp")
    add_packages("gtk4")

checking for pkgconfig::gtk4 ... gtk4 4.14.2
checking for xmake-repo::gtk4 ... gtk4 4.14.2
configure
{
    clean = true
    plat = linux
    buildir = build
    arch = x86_64
    ndk_stdcxx = true
    kind = static
    host = linux
    ccache = true
    mode = release
}
ruki@c9f0fd23ebba:/tmp/test$ xmake -rv
checking for gcc ... /usr/bin/gcc
checking for the c++ compiler (cxx) ... gcc
checking for flags (-fPIC) ... ok
checking for flags (-fvisibility-inlines-hidden) ... ok
checking for flags (-O3) ... ok
checking for flags (-mfpmath=sse) ... ok
checking for flags (-msse) ... ok
checking for flags (-msse2) ... ok
checking for flags (-pthread) ... ok
checking for flags (-DNDEBUG) ... ok
[ 50%]: cache compiling.release src/main.cpp
/usr/bin/gcc -c -m64 -fvisibility=hidden -fvisibility-inlines-hidden -O3 -isystem /usr/include/gtk-4.0 -isystem /usr/include/pango-1.0 -isystem /usr/include/glib-2.0 -isystem /usr/lib/x86_64-linux-gnu/glib-2.0/include -isystem /usr/include/harfbuzz -isystem /usr/include/freetype2 -isystem /usr/include/libpng16 -isystem /usr/include/libmount -isystem /usr/include/blkid -isystem /usr/include/fribidi -isystem /usr/include/cairo -isystem /usr/include/pixman-1 -isystem /usr/include/gdk-pixbuf-2.0 -isystem /usr/include/x86_64-linux-gnu -isystem /usr/include/webp -isystem /usr/include/graphene-1.0 -isystem /usr/lib/x86_64-linux-gnu/graphene-1.0/include -isystem /home/ruki/.xmake/packages/l/libffi/3.4.6/fe364041468445adabace9ccc642d997/include -isystem /home/ruki/.xmake/packages/z/zlib/v1.3.1/994fafa590ed48ac9f71516cc846d155/include -isystem /home/ruki/.xmake/packages/l/libx11/1.8.7/380a1842db954612a3e602b04bf6d53b/include -isystem /home/ruki/.xmake/packages/x/xtrans/1.4.0/269ba1f23faf46f3aafe004620bb0298/include -isystem /home/ruki/.xmake/packages/l/libxcb/1.16/181975c075a447b882a80a2500bab765/include -isystem /home/ruki/.xmake/packages/l/libxau/1.0.11/aafb5d682970499891e46ca51c4d9476/include -isystem /home/ruki/.xmake/packages/l/libxdmcp/1.1.4/f0bc220dc4b74f18989972e6fbdd1201/include -isystem /home/ruki/.xmake/packages/x/xorgproto/2023.2/3a1682704c034fbf87583b32455dde94/include -mfpmath=sse -msse -msse2 -pthread -DNDEBUG -o build/.objs/test/linux/x86_64/release/src/main.cpp.o src/main.cpp
checking for flags (-MMD -MF) ... ok
checking for flags (-fdiagnostics-color=always) ... ok
checking for flags (-Wno-gnu-line-marker -Werror) ... ok
checking for the linker (ld) ... g++
[ 75%]: linking.release test
/usr/bin/g++ -o build/linux/x86_64/release/test build/.objs/test/linux/x86_64/release/src/main.cpp.o -m64 -L/home/ruki/.xmake/packages/l/libffi/3.4.6/fe364041468445adabace9ccc642d997/lib -L/home/ruki/.xmake/packages/z/zlib/v1.3.1/994fafa590ed48ac9f71516cc846d155/lib -L/home/ruki/.xmake/packages/l/libx11/1.8.7/380a1842db954612a3e602b04bf6d53b/lib -L/home/ruki/.xmake/packages/l/libxcb/1.16/181975c075a447b882a80a2500bab765/lib -L/home/ruki/.xmake/packages/l/libxau/1.0.11/aafb5d682970499891e46ca51c4d9476/lib -L/home/ruki/.xmake/packages/l/libxdmcp/1.1.4/f0bc220dc4b74f18989972e6fbdd1201/lib -s -lgtk-4 -lpangocairo-1.0 -lpango-1.0 -lharfbuzz -lgdk_pixbuf-2.0 -lcairo-gobject -lcairo -lvulkan -lgraphene-1.0 -lgio-2.0 -lgobject-2.0 -lglib-2.0 -lthai -lepoxy -lfribidi -lpng16 -lfontconfig -lfreetype -lexpat -lgthread-2.0 -lgmodule-2.0 -lffi -lz -lXrandr -lXi -lXcursor -lXrender -lX11 -lXdamage -lXfixes -lXinerama -lXext -lX11-xcb -lxcb -lxcb-composite -lxcb-damage -lxcb-dbe -lxcb-dpms -lxcb-dri2 -lxcb-dri3 -lxcb-present -lxcb-glx -lxcb-randr -lxcb-record -lxcb-render -lxcb-res -lxcb-screensaver -lxcb-shape -lxcb-shm -lxcb-sync -lxcb-xevie -lxcb-xf86dri -lxcb-xfixes -lxcb-xinerama -lxcb-xinput -lxcb-xkb -lxcb-xtest -lxcb-xv -lxcb-xvmc -lxcb-ge -lXau -lXdmcp -ldl
[100%]: build ok, spent 0.55s

你可以在本地测试，测试文件只需一行代码
add_requires("gtk4 >=4.16")

在没设置 system = true 的情况下，需要从 xmake-repo 加载配置，所以 xmake-repo 内的 gtk4 定义，必须有对应的匹配版本。

我这正常报 version(>=4.14) not found! 也完全在预期范围内，没遇到你的问题，无法复现。

add_requires("gtk4 >=4.14")

target("test")
    set_kind("binary")
    add_files("src/*.cpp")
    add_packages("gtk4")

error: @programdir/core/main.lua:329: @programdir/modules/private/action/require/impl/package.lua:497: package(gtk4): version(>=4.14) not found!
stack traceback:
    [C]: in function 'error'
    [@programdir/core/base/os.lua:1075]:
    [@programdir/modules/private/action/require/impl/package.lua:497]: in function '_select_package_version'
    [@programdir/modules/private/action/require/impl/package.lua:1042]: in function '_load_package'
    [@programdir/modules/private/action/require/impl/package.lua:1155]: in function '_load_packages'
    [@programdir/modules/private/action/require/impl/package.lua:1694]: in function 'load_packages'
    [...modules/private/action/require/impl/install_packages.lua:689]: in function '_install_packages'

找不到的问题，可以自己调下上面我贴的几个地方，看下为啥没取到 pkgconfig 中的版本
我的意思是 xmake 提示找不到。我的系统上可以通过 pkgconfig 获取到 4.16.7 的版本

你还是没明白我说的啥，我的意思，就是 pkgconfig 能取到版本，但是 xmake 找不到的情况，让你自己调下我上面贴的基础代码路径，看下为啥没匹配到，因为我没时间调。

但我刚已经安装 gtk4 模拟你这情况调了，没法复现，这边正常能找到系统库，如果你这还是不行，就按我上面贴的 find_package 的位置自己调试

我提出的改进建议不可取吗？

不可取，完全是瞎改，会各种 break

0 replies

waruqi · 2025-02-11T14:05:06Z

waruqi
Feb 11, 2025
Maintainer

@programdir\core\package\package.lua:863: attempt to index a nil value (local 'version_str')

你遇到的这个错误，应该是你这是 windows host 导致，我没对应环境，只能在 linux 上测试。目前这个 error 我 dev 处理过了，可以再试试

但不保证还有其他遗漏的 case

0 replies

q962 · 2025-02-11T14:43:10Z

q962
Feb 11, 2025
Author

在没设置 system = true 的情况下，需要从 xmake-repo 加载配置，所以 xmake-repo 内的 gtk4 定义，必须有对应的匹配版本。

这是个重要信息。这就是我的疑问来源。这属于 xmake 的设计理念。或许需要写明。

那解决方案应该修改

xmake/xmake/modules/private/action/require/impl/package.lua

Line 998 in 5ac4306

if not package and (system ~= false or packagename:find("::", 1, true)) then

当 system 为真时，无论 package 是否存在都应该调用 _load_package_from_system 。因为用户要求从 system 获取。

3 replies

waruqi Feb 11, 2025
Maintainer

这是个重要信息。这就是我的疑问来源。这属于 xmake 的设计理念。或许需要写明。

目前就是这么设计的

当 system 为真时，无论 package 是否存在都应该调用 _load_package_from_system 。因为用户要求从 system 获取。

这个我之前已经说过了。。system = true 和 _load_package_from_system 没有必然关系，是否从 system 获取，不是 _load_package_from_system 里面决定的。即使把 _load_package_from_system 这个调用删了，也不影响 system = true 从系统获取包

q962 Feb 11, 2025
Author

但是问题是 package = _load_package_from_repository(gtk) 获取到了4.13.3

而 local version, source = _select_package_version(package, requireinfo, locked_requireinfo) 从该源中判断 4.13.3 小于要求的 4.16.7 ，而报错。

~~不是删除那个调用而是删除上面的 if 里的 not package~~

删除也不对。删除那就全是 system 的了

waruqi Feb 11, 2025
Maintainer

但是问题是 package = _load_package_from_repository(gtk) 获取到了4.13.3

而 local version, source = _select_package_version(package, requireinfo, locked_requireinfo) 从该源中判断 4.13.3 小于要求的 4.16.7 ，而报错。

我不知道你现在到底怎么配置的，以及报什么错，反正刚你贴的的几个错误，我 dev 都已经修了。。另外我这完全 ok ，没法复现你的问题

@programdir\core\package\package.lua:863: attempt to index a nil value (local 'version_str')

已修

system = true + package(gtk4): version(>=4.14) not found

已修

system = true + gtk >= 4.16

我这测试正常

not system + gtk >= 4.16
version(>=4.16) not found

设计就是如此，我这测试也正常，暂时不会去改

我不知道你这还有啥问题

q962 · 2025-02-11T15:08:40Z

q962
Feb 11, 2025
Author

'version_str' 报错解决了。

0 replies

q962 · 2025-02-11T15:32:47Z

q962
Feb 11, 2025
Author

关于报错的提示信息是否可以改进一下。

目前就是这么设计的

鉴于这个设计。那么当 xrepo or project 来源不存在对应的版本时，是否应当明确哪个来源不存在指定版本？

在不知道这个设计的时候。我看到 error: package(gtk4): version(>=4.16) not found! 感到很无语。
明明系统存在高版本，为什么就是提示找不到。

现在，我以了然。指定的来源不存在对应的版本，需要使用 system=true。

所以在使用 add_requires 的时候，还需要参考 xrepo 中存在的包是否有对应的版本，看需求是否添加 system=true

0 replies

Uh oh!

当 xrepo 存在低版本包时，无法使用高版本的系统包 #6141

Uh oh!

q962 Feb 8, 2025

Replies: 7 comments · 5 replies

Uh oh!

Uh oh!

waruqi Feb 8, 2025 Maintainer

Uh oh!

q962 Feb 9, 2025 Author

Uh oh!

waruqi Feb 11, 2025 Maintainer

Uh oh!

q962 Feb 11, 2025 Author

Uh oh!

waruqi Feb 11, 2025 Maintainer

Uh oh!

waruqi Feb 11, 2025 Maintainer

Uh oh!

q962 Feb 11, 2025 Author

Uh oh!

waruqi Feb 11, 2025 Maintainer

Uh oh!

Uh oh!

q962 Feb 11, 2025 Author

Uh oh!

Uh oh!

waruqi Feb 11, 2025 Maintainer

Uh oh!

q962 Feb 11, 2025 Author

Uh oh!

q962 Feb 11, 2025 Author

q962
Feb 8, 2025

Replies: 7 comments 5 replies

waruqi
Feb 8, 2025
Maintainer

q962
Feb 9, 2025
Author

waruqi Feb 11, 2025
Maintainer

q962 Feb 11, 2025
Author

waruqi
Feb 11, 2025
Maintainer

waruqi
Feb 11, 2025
Maintainer

q962
Feb 11, 2025
Author

waruqi Feb 11, 2025
Maintainer

q962 Feb 11, 2025
Author

waruqi Feb 11, 2025
Maintainer

q962
Feb 11, 2025
Author

q962
Feb 11, 2025
Author