git.oblomov.eu Git - git/blob - t/lib-submodule-update.sh

   1 # Create a submodule layout used for all tests below.
   2 #
   3 # The following use cases are covered:
   4 # - New submodule (no_submodule => add_sub1)
   5 # - Removed submodule (add_sub1 => remove_sub1)
   6 # - Updated submodule (add_sub1 => modify_sub1)
   7 # - Updated submodule recursively (add_nested_sub => modify_sub1_recursively)
   8 # - Submodule updated to invalid commit (add_sub1 => invalid_sub1)
   9 # - Submodule updated from invalid commit (invalid_sub1 => valid_sub1)
  10 # - Submodule replaced by tracked files in directory (add_sub1 =>
  11 #   replace_sub1_with_directory)
  12 # - Directory containing tracked files replaced by submodule
  13 #   (replace_sub1_with_directory => replace_directory_with_sub1)
  14 # - Submodule replaced by tracked file with the same name (add_sub1 =>
  15 #   replace_sub1_with_file)
  16 # - Tracked file replaced by submodule (replace_sub1_with_file =>
  17 #   replace_file_with_sub1)
  18 #
  19 #                     ----O
  20 #                    /    ^
  21 #                   /     remove_sub1
  22 #                  /
  23 #       add_sub1  /-------O---------O--------O  modify_sub1_recursively
  24 #             |  /        ^         add_nested_sub
  25 #             | /         modify_sub1
  26 #             v/
  27 #      O------O-----------O---------O
  28 #      ^       \          ^         replace_directory_with_sub1
  29 #      |        \         replace_sub1_with_directory
  30 # no_submodule   \
  31 #                 --------O---------O
  32 #                  \      ^         replace_file_with_sub1
  33 #                   \     replace_sub1_with_file
  34 #                    \
  35 #                     ----O---------O
  36 #                         ^         valid_sub1
  37 #                         invalid_sub1
  38 #
  39
  40 create_lib_submodule_repo () {
  41         git init submodule_update_sub1 &&
  42         (
  43                 cd submodule_update_sub1 &&
  44                 echo "expect" >>.gitignore &&
  45                 echo "actual" >>.gitignore &&
  46                 echo "x" >file1 &&
  47                 echo "y" >file2 &&
  48                 git add .gitignore file1 file2 &&
  49                 git commit -m "Base inside first submodule" &&
  50                 git branch "no_submodule"
  51         ) &&
  52         git init submodule_update_sub2 &&
  53         (
  54                 cd submodule_update_sub2
  55                 echo "expect" >>.gitignore &&
  56                 echo "actual" >>.gitignore &&
  57                 echo "x" >file1 &&
  58                 echo "y" >file2 &&
  59                 git add .gitignore file1 file2 &&
  60                 git commit -m "nested submodule base" &&
  61                 git branch "no_submodule"
  62         ) &&
  63         git init submodule_update_repo &&
  64         (
  65                 cd submodule_update_repo &&
  66                 echo "expect" >>.gitignore &&
  67                 echo "actual" >>.gitignore &&
  68                 echo "x" >file1 &&
  69                 echo "y" >file2 &&
  70                 git add .gitignore file1 file2 &&
  71                 git commit -m "Base" &&
  72                 git branch "no_submodule" &&
  73
  74                 git checkout -b "add_sub1" &&
  75                 git submodule add ../submodule_update_sub1 sub1 &&
  76                 git submodule add ../submodule_update_sub1 uninitialized_sub &&
  77                 git config -f .gitmodules submodule.sub1.ignore all &&
  78                 git config submodule.sub1.ignore all &&
  79                 git add .gitmodules &&
  80                 git commit -m "Add sub1" &&
  81
  82                 git checkout -b remove_sub1 add_sub1 &&
  83                 git revert HEAD &&
  84
  85                 git checkout -b modify_sub1 add_sub1 &&
  86                 git submodule update &&
  87                 (
  88                         cd sub1 &&
  89                         git fetch &&
  90                         git checkout -b "modifications" &&
  91                         echo "z" >file2 &&
  92                         echo "x" >file3 &&
  93                         git add file2 file3 &&
  94                         git commit -m "modified file2 and added file3" &&
  95                         git push origin modifications
  96                 ) &&
  97                 git add sub1 &&
  98                 git commit -m "Modify sub1" &&
  99
 100                 git checkout -b add_nested_sub modify_sub1 &&
 101                 git -C sub1 checkout -b "add_nested_sub" &&
 102                 git -C sub1 submodule add --branch no_submodule ../submodule_update_sub2 sub2 &&
 103                 git -C sub1 commit -a -m "add a nested submodule" &&
 104                 git add sub1 &&
 105                 git commit -a -m "update submodule, that updates a nested submodule" &&
 106                 git checkout -b modify_sub1_recursively &&
 107                 git -C sub1 checkout -b modify_sub1_recursively &&
 108                 git -C sub1/sub2 checkout -b modify_sub1_recursively &&
 109                 echo change >sub1/sub2/file3 &&
 110                 git -C sub1/sub2 add file3 &&
 111                 git -C sub1/sub2 commit -m "make a change in nested sub" &&
 112                 git -C sub1 add sub2 &&
 113                 git -C sub1 commit -m "update nested sub" &&
 114                 git add sub1 &&
 115                 git commit -m "update sub1, that updates nested sub" &&
 116                 git -C sub1 push origin modify_sub1_recursively &&
 117                 git -C sub1/sub2 push origin modify_sub1_recursively &&
 118                 git -C sub1 submodule deinit -f --all &&
 119
 120                 git checkout -b replace_sub1_with_directory add_sub1 &&
 121                 git submodule update &&
 122                 git -C sub1 checkout modifications &&
 123                 git rm --cached sub1 &&
 124                 rm sub1/.git* &&
 125                 git config -f .gitmodules --remove-section "submodule.sub1" &&
 126                 git add .gitmodules sub1/* &&
 127                 git commit -m "Replace sub1 with directory" &&
 128
 129                 git checkout -b replace_directory_with_sub1 &&
 130                 git revert HEAD &&
 131
 132                 git checkout -b replace_sub1_with_file add_sub1 &&
 133                 git rm sub1 &&
 134                 echo "content" >sub1 &&
 135                 git add sub1 &&
 136                 git commit -m "Replace sub1 with file" &&
 137
 138                 git checkout -b replace_file_with_sub1 &&
 139                 git revert HEAD &&
 140
 141                 git checkout -b invalid_sub1 add_sub1 &&
 142                 git update-index --cacheinfo 160000 $(test_oid numeric) sub1 &&
 143                 git commit -m "Invalid sub1 commit" &&
 144                 git checkout -b valid_sub1 &&
 145                 git revert HEAD &&
 146
 147                 git checkout master
 148         )
 149 }
 150
 151 # Helper function to replace gitfile with .git directory
 152 replace_gitfile_with_git_dir () {
 153         (
 154                 cd "$1" &&
 155                 git_dir="$(git rev-parse --git-dir)" &&
 156                 rm -f .git &&
 157                 cp -R "$git_dir" .git &&
 158                 GIT_WORK_TREE=. git config --unset core.worktree
 159         )
 160 }
 161
 162 # Test that the .git directory in the submodule is unchanged (except for the
 163 # core.worktree setting, which appears only in $GIT_DIR/modules/$1/config).
 164 # Call this function before test_submodule_content as the latter might
 165 # write the index file leading to false positive index differences.
 166 #
 167 # Note that this only supports submodules at the root level of the
 168 # superproject, with the default name, i.e. same as its path.
 169 test_git_directory_is_unchanged () {
 170         (
 171                 cd ".git/modules/$1" &&
 172                 # does core.worktree point at the right place?
 173                 test "$(git config core.worktree)" = "../../../$1" &&
 174                 # remove it temporarily before comparing, as
 175                 # "$1/.git/config" lacks it...
 176                 git config --unset core.worktree
 177         ) &&
 178         diff -r ".git/modules/$1" "$1/.git" &&
 179         (
 180                 # ... and then restore.
 181                 cd ".git/modules/$1" &&
 182                 git config core.worktree "../../../$1"
 183         )
 184 }
 185
 186 test_git_directory_exists() {
 187         test -e ".git/modules/$1" &&
 188         if test -f sub1/.git
 189         then
 190                 # does core.worktree point at the right place?
 191                 test "$(git -C .git/modules/$1 config core.worktree)" = "../../../$1"
 192         fi
 193 }
 194
 195 # Helper function to be executed at the start of every test below, it sets up
 196 # the submodule repo if it doesn't exist and configures the most problematic
 197 # settings for diff.ignoreSubmodules.
 198 prolog () {
 199         test_oid_init &&
 200         (test -d submodule_update_repo || create_lib_submodule_repo) &&
 201         test_config_global diff.ignoreSubmodules all &&
 202         test_config diff.ignoreSubmodules all
 203 }
 204
 205 # Helper function to bring work tree back into the state given by the
 206 # commit. This includes trying to populate sub1 accordingly if it exists and
 207 # should be updated to an existing commit.
 208 reset_work_tree_to () {
 209         rm -rf submodule_update &&
 210         git clone submodule_update_repo submodule_update &&
 211         (
 212                 cd submodule_update &&
 213                 rm -rf sub1 &&
 214                 git checkout -f "$1" &&
 215                 git status -u -s >actual &&
 216                 test_must_be_empty actual &&
 217                 hash=$(git rev-parse --revs-only HEAD:sub1) &&
 218                 if test -n "$hash" &&
 219                    test $(cd "../submodule_update_sub1" && git rev-parse --verify "$hash^{commit}")
 220                 then
 221                         git submodule update --init --recursive "sub1"
 222                 fi
 223         )
 224 }
 225
 226 reset_work_tree_to_interested () {
 227         reset_work_tree_to $1 &&
 228         # make the submodule git dirs available
 229         if ! test -d submodule_update/.git/modules/sub1
 230         then
 231                 mkdir -p submodule_update/.git/modules &&
 232                 cp -r submodule_update_repo/.git/modules/sub1 submodule_update/.git/modules/sub1
 233                 GIT_WORK_TREE=. git -C submodule_update/.git/modules/sub1 config --unset core.worktree
 234         fi &&
 235         if ! test -d submodule_update/.git/modules/sub1/modules/sub2
 236         then
 237                 mkdir -p submodule_update/.git/modules/sub1/modules &&
 238                 cp -r submodule_update_repo/.git/modules/sub1/modules/sub2 submodule_update/.git/modules/sub1/modules/sub2
 239                 # core.worktree is unset for sub2 as it is not checked out
 240         fi &&
 241         # indicate we are interested in the submodule:
 242         git -C submodule_update config submodule.sub1.url "bogus" &&
 243         # sub1 might not be checked out, so use the git dir
 244         git -C submodule_update/.git/modules/sub1 config submodule.sub2.url "bogus"
 245 }
 246
 247 # Test that the superproject contains the content according to commit "$1"
 248 # (the work tree must match the index for everything but submodules but the
 249 # index must exactly match the given commit including any submodule SHA-1s).
 250 test_superproject_content () {
 251         git diff-index --cached "$1" >actual &&
 252         test_must_be_empty actual &&
 253         git diff-files --ignore-submodules >actual &&
 254         test_must_be_empty actual
 255 }
 256
 257 # Test that the given submodule at path "$1" contains the content according
 258 # to the submodule commit recorded in the superproject's commit "$2"
 259 test_submodule_content () {
 260         if test x"$1" = "x-C"
 261         then
 262                 cd "$2"
 263                 shift; shift;
 264         fi
 265         if test $# != 2
 266         then
 267                 echo "test_submodule_content needs two arguments"
 268                 return 1
 269         fi &&
 270         submodule="$1" &&
 271         commit="$2" &&
 272         test -d "$submodule"/ &&
 273         if ! test -f "$submodule"/.git && ! test -d "$submodule"/.git
 274         then
 275                 echo "Submodule $submodule is not populated"
 276                 return 1
 277         fi &&
 278         sha1=$(git rev-parse --verify "$commit:$submodule") &&
 279         if test -z "$sha1"
 280         then
 281                 echo "Couldn't retrieve SHA-1 of $submodule for $commit"
 282                 return 1
 283         fi &&
 284         (
 285                 cd "$submodule" &&
 286                 git status -u -s >actual &&
 287                 test_must_be_empty actual &&
 288                 git diff "$sha1" >actual &&
 289                 test_must_be_empty actual
 290         )
 291 }
 292
 293 # Test that the following transitions are correctly handled:
 294 # - Updated submodule
 295 # - New submodule
 296 # - Removed submodule
 297 # - Directory containing tracked files replaced by submodule
 298 # - Submodule replaced by tracked files in directory
 299 # - Submodule replaced by tracked file with the same name
 300 # - Tracked file replaced by submodule
 301 #
 302 # The default is that submodule contents aren't changed until "git submodule
 303 # update" is run. And even then that command doesn't delete the work tree of
 304 # a removed submodule.
 305 #
 306 # Removing a submodule containing a .git directory must fail even when forced
 307 # to protect the history!
 308 #
 309
 310 # Internal function; use test_submodule_switch() or
 311 # test_submodule_forced_switch() instead.
 312 test_submodule_switch_common() {
 313         command="$1"
 314         ######################### Appearing submodule #########################
 315         # Switching to a commit letting a submodule appear creates empty dir ...
 316         if test "$KNOWN_FAILURE_STASH_DOES_IGNORE_SUBMODULE_CHANGES" = 1
 317         then
 318                 # Restoring stash fails to restore submodule index entry
 319                 RESULT="failure"
 320         else
 321                 RESULT="success"
 322         fi
 323         test_expect_$RESULT "$command: added submodule creates empty directory" '
 324                 prolog &&
 325                 reset_work_tree_to no_submodule &&
 326                 (
 327                         cd submodule_update &&
 328                         git branch -t add_sub1 origin/add_sub1 &&
 329                         $command add_sub1 &&
 330                         test_superproject_content origin/add_sub1 &&
 331                         test_dir_is_empty sub1 &&
 332                         git submodule update --init --recursive &&
 333                         test_submodule_content sub1 origin/add_sub1
 334                 )
 335         '
 336         # ... and doesn't care if it already exists.
 337         test_expect_$RESULT "$command: added submodule leaves existing empty directory alone" '
 338                 prolog &&
 339                 reset_work_tree_to no_submodule &&
 340                 (
 341                         cd submodule_update &&
 342                         mkdir sub1 &&
 343                         git branch -t add_sub1 origin/add_sub1 &&
 344                         $command add_sub1 &&
 345                         test_superproject_content origin/add_sub1 &&
 346                         test_dir_is_empty sub1 &&
 347                         git submodule update --init --recursive &&
 348                         test_submodule_content sub1 origin/add_sub1
 349                 )
 350         '
 351         # Replacing a tracked file with a submodule produces an empty
 352         # directory ...
 353         test_expect_$RESULT "$command: replace tracked file with submodule creates empty directory" '
 354                 prolog &&
 355                 reset_work_tree_to replace_sub1_with_file &&
 356                 (
 357                         cd submodule_update &&
 358                         git branch -t replace_file_with_sub1 origin/replace_file_with_sub1 &&
 359                         $command replace_file_with_sub1 &&
 360                         test_superproject_content origin/replace_file_with_sub1 &&
 361                         test_dir_is_empty sub1 &&
 362                         git submodule update --init --recursive &&
 363                         test_submodule_content sub1 origin/replace_file_with_sub1
 364                 )
 365         '
 366         # ... as does removing a directory with tracked files with a
 367         # submodule.
 368         if test "$KNOWN_FAILURE_NOFF_MERGE_DOESNT_CREATE_EMPTY_SUBMODULE_DIR" = 1
 369         then
 370                 # Non fast-forward merges fail with "Directory sub1 doesn't
 371                 # exist. sub1" because the empty submodule directory is not
 372                 # created
 373                 RESULT="failure"
 374         else
 375                 RESULT="success"
 376         fi
 377         test_expect_$RESULT "$command: replace directory with submodule" '
 378                 prolog &&
 379                 reset_work_tree_to replace_sub1_with_directory &&
 380                 (
 381                         cd submodule_update &&
 382                         git branch -t replace_directory_with_sub1 origin/replace_directory_with_sub1 &&
 383                         $command replace_directory_with_sub1 &&
 384                         test_superproject_content origin/replace_directory_with_sub1 &&
 385                         test_dir_is_empty sub1 &&
 386                         git submodule update --init --recursive &&
 387                         test_submodule_content sub1 origin/replace_directory_with_sub1
 388                 )
 389         '
 390
 391         ######################## Disappearing submodule #######################
 392         # Removing a submodule doesn't remove its work tree ...
 393         if test "$KNOWN_FAILURE_STASH_DOES_IGNORE_SUBMODULE_CHANGES" = 1
 394         then
 395                 RESULT="failure"
 396         else
 397                 RESULT="success"
 398         fi
 399         test_expect_$RESULT "$command: removed submodule leaves submodule directory and its contents in place" '
 400                 prolog &&
 401                 reset_work_tree_to add_sub1 &&
 402                 (
 403                         cd submodule_update &&
 404                         git branch -t remove_sub1 origin/remove_sub1 &&
 405                         $command remove_sub1 &&
 406                         test_superproject_content origin/remove_sub1 &&
 407                         test_submodule_content sub1 origin/add_sub1
 408                 )
 409         '
 410         # ... especially when it contains a .git directory.
 411         test_expect_$RESULT "$command: removed submodule leaves submodule containing a .git directory alone" '
 412                 prolog &&
 413                 reset_work_tree_to add_sub1 &&
 414                 (
 415                         cd submodule_update &&
 416                         git branch -t remove_sub1 origin/remove_sub1 &&
 417                         replace_gitfile_with_git_dir sub1 &&
 418                         $command remove_sub1 &&
 419                         test_superproject_content origin/remove_sub1 &&
 420                         test_git_directory_is_unchanged sub1 &&
 421                         test_submodule_content sub1 origin/add_sub1
 422                 )
 423         '
 424         # Replacing a submodule with files in a directory must fail as the
 425         # submodule work tree isn't removed ...
 426         if test "$KNOWN_FAILURE_NOFF_MERGE_ATTEMPTS_TO_MERGE_REMOVED_SUBMODULE_FILES" = 1
 427         then
 428                 # Non fast-forward merges attempt to merge the former
 429                 # submodule files with the newly checked out ones in the
 430                 # directory of the same name while it shouldn't.
 431                 RESULT="failure"
 432         elif test "$KNOWN_FAILURE_FORCED_SWITCH_TESTS" = 1
 433         then
 434                 # All existing tests that use test_submodule_forced_switch()
 435                 # require this.
 436                 RESULT="failure"
 437         else
 438                 RESULT="success"
 439         fi
 440         test_expect_$RESULT "$command: replace submodule with a directory must fail" '
 441                 prolog &&
 442                 reset_work_tree_to add_sub1 &&
 443                 (
 444                         cd submodule_update &&
 445                         git branch -t replace_sub1_with_directory origin/replace_sub1_with_directory &&
 446                         test_must_fail $command replace_sub1_with_directory &&
 447                         test_superproject_content origin/add_sub1 &&
 448                         test_submodule_content sub1 origin/add_sub1
 449                 )
 450         '
 451         # ... especially when it contains a .git directory.
 452         test_expect_$RESULT "$command: replace submodule containing a .git directory with a directory must fail" '
 453                 prolog &&
 454                 reset_work_tree_to add_sub1 &&
 455                 (
 456                         cd submodule_update &&
 457                         git branch -t replace_sub1_with_directory origin/replace_sub1_with_directory &&
 458                         replace_gitfile_with_git_dir sub1 &&
 459                         test_must_fail $command replace_sub1_with_directory &&
 460                         test_superproject_content origin/add_sub1 &&
 461                         test_git_directory_is_unchanged sub1 &&
 462                         test_submodule_content sub1 origin/add_sub1
 463                 )
 464         '
 465         # Replacing it with a file must fail as it could throw away any local
 466         # work tree changes ...
 467         test_expect_failure "$command: replace submodule with a file must fail" '
 468                 prolog &&
 469                 reset_work_tree_to add_sub1 &&
 470                 (
 471                         cd submodule_update &&
 472                         git branch -t replace_sub1_with_file origin/replace_sub1_with_file &&
 473                         test_must_fail $command replace_sub1_with_file &&
 474                         test_superproject_content origin/add_sub1 &&
 475                         test_submodule_content sub1 origin/add_sub1
 476                 )
 477         '
 478         # ... or even destroy unpushed parts of submodule history if that
 479         # still uses a .git directory.
 480         test_expect_failure "$command: replace submodule containing a .git directory with a file must fail" '
 481                 prolog &&
 482                 reset_work_tree_to add_sub1 &&
 483                 (
 484                         cd submodule_update &&
 485                         git branch -t replace_sub1_with_file origin/replace_sub1_with_file &&
 486                         replace_gitfile_with_git_dir sub1 &&
 487                         test_must_fail $command replace_sub1_with_file &&
 488                         test_superproject_content origin/add_sub1 &&
 489                         test_git_directory_is_unchanged sub1 &&
 490                         test_submodule_content sub1 origin/add_sub1
 491                 )
 492         '
 493
 494         ########################## Modified submodule #########################
 495         # Updating a submodule sha1 doesn't update the submodule's work tree
 496         if test "$KNOWN_FAILURE_CHERRY_PICK_SEES_EMPTY_COMMIT" = 1
 497         then
 498                 # When cherry picking a SHA-1 update for an ignored submodule
 499                 # the commit incorrectly fails with "The previous cherry-pick
 500                 # is now empty, possibly due to conflict resolution."
 501                 RESULT="failure"
 502         else
 503                 RESULT="success"
 504         fi
 505         test_expect_$RESULT "$command: modified submodule does not update submodule work tree" '
 506                 prolog &&
 507                 reset_work_tree_to add_sub1 &&
 508                 (
 509                         cd submodule_update &&
 510                         git branch -t modify_sub1 origin/modify_sub1 &&
 511                         $command modify_sub1 &&
 512                         test_superproject_content origin/modify_sub1 &&
 513                         test_submodule_content sub1 origin/add_sub1 &&
 514                         git submodule update &&
 515                         test_submodule_content sub1 origin/modify_sub1
 516                 )
 517         '
 518         # Updating a submodule to an invalid sha1 doesn't update the
 519         # submodule's work tree, subsequent update will fail
 520         test_expect_$RESULT "$command: modified submodule does not update submodule work tree to invalid commit" '
 521                 prolog &&
 522                 reset_work_tree_to add_sub1 &&
 523                 (
 524                         cd submodule_update &&
 525                         git branch -t invalid_sub1 origin/invalid_sub1 &&
 526                         $command invalid_sub1 &&
 527                         test_superproject_content origin/invalid_sub1 &&
 528                         test_submodule_content sub1 origin/add_sub1 &&
 529                         test_must_fail git submodule update &&
 530                         test_submodule_content sub1 origin/add_sub1
 531                 )
 532         '
 533         # Updating a submodule from an invalid sha1 doesn't update the
 534         # submodule's work tree, subsequent update will succeed
 535         test_expect_$RESULT "$command: modified submodule does not update submodule work tree from invalid commit" '
 536                 prolog &&
 537                 reset_work_tree_to invalid_sub1 &&
 538                 (
 539                         cd submodule_update &&
 540                         git branch -t valid_sub1 origin/valid_sub1 &&
 541                         $command valid_sub1 &&
 542                         test_superproject_content origin/valid_sub1 &&
 543                         test_dir_is_empty sub1 &&
 544                         git submodule update --init --recursive &&
 545                         test_submodule_content sub1 origin/valid_sub1
 546                 )
 547         '
 548 }
 549
 550 # Declares and invokes several tests that, in various situations, checks that
 551 # the provided transition function:
 552 #  - succeeds in updating the worktree and index of a superproject to a target
 553 #    commit, or fails atomically (depending on the test situation)
 554 #  - if succeeds, the contents of submodule directories are unchanged
 555 #  - if succeeds, once "git submodule update" is invoked, the contents of
 556 #    submodule directories are updated
 557 #
 558 # If the command under test is known to not work with submodules in certain
 559 # conditions, set the appropriate KNOWN_FAILURE_* variable used in the tests
 560 # below to 1.
 561 #
 562 # Use as follows:
 563 #
 564 # my_func () {
 565 #   target=$1
 566 #   # Do something here that updates the worktree and index to match target,
 567 #   # but not any submodule directories.
 568 # }
 569 # test_submodule_switch "my_func"
 570 test_submodule_switch () {
 571         command="$1"
 572         test_submodule_switch_common "$command"
 573
 574         # An empty directory does not prevent the creation of a submodule of
 575         # the same name, but a file does.
 576         test_expect_success "$command: added submodule doesn't remove untracked unignored file with same name" '
 577                 prolog &&
 578                 reset_work_tree_to no_submodule &&
 579                 (
 580                         cd submodule_update &&
 581                         git branch -t add_sub1 origin/add_sub1 &&
 582                         >sub1 &&
 583                         test_must_fail $command add_sub1 &&
 584                         test_superproject_content origin/no_submodule &&
 585                         test_must_be_empty sub1
 586                 )
 587         '
 588 }
 589
 590 # Same as test_submodule_switch(), except that throwing away local changes in
 591 # the superproject is allowed.
 592 test_submodule_forced_switch () {
 593         command="$1"
 594         KNOWN_FAILURE_FORCED_SWITCH_TESTS=1
 595         test_submodule_switch_common "$command"
 596
 597         # When forced, a file in the superproject does not prevent creating a
 598         # submodule of the same name.
 599         test_expect_success "$command: added submodule does remove untracked unignored file with same name when forced" '
 600                 prolog &&
 601                 reset_work_tree_to no_submodule &&
 602                 (
 603                         cd submodule_update &&
 604                         git branch -t add_sub1 origin/add_sub1 &&
 605                         >sub1 &&
 606                         $command add_sub1 &&
 607                         test_superproject_content origin/add_sub1 &&
 608                         test_dir_is_empty sub1
 609                 )
 610         '
 611 }
 612
 613 # Test that submodule contents are correctly updated when switching
 614 # between commits that change a submodule.
 615 # Test that the following transitions are correctly handled:
 616 # (These tests are also above in the case where we expect no change
 617 #  in the submodule)
 618 # - Updated submodule
 619 # - New submodule
 620 # - Removed submodule
 621 # - Directory containing tracked files replaced by submodule
 622 # - Submodule replaced by tracked files in directory
 623 # - Submodule replaced by tracked file with the same name
 624 # - Tracked file replaced by submodule
 625 #
 626 # New test cases
 627 # - Removing a submodule with a git directory absorbs the submodules
 628 #   git directory first into the superproject.
 629 # - Switching from no submodule to nested submodules
 630 # - Switching from nested submodules to no submodule
 631
 632 # Internal function; use test_submodule_switch_recursing_with_args() or
 633 # test_submodule_forced_switch_recursing_with_args() instead.
 634 test_submodule_recursing_with_args_common() {
 635         command="$1"
 636
 637         ######################### Appearing submodule #########################
 638         # Switching to a commit letting a submodule appear checks it out ...
 639         test_expect_success "$command: added submodule is checked out" '
 640                 prolog &&
 641                 reset_work_tree_to_interested no_submodule &&
 642                 (
 643                         cd submodule_update &&
 644                         git branch -t add_sub1 origin/add_sub1 &&
 645                         $command add_sub1 &&
 646                         test_superproject_content origin/add_sub1 &&
 647                         test_submodule_content sub1 origin/add_sub1
 648                 )
 649         '
 650         # ... ignoring an empty existing directory.
 651         test_expect_success "$command: added submodule is checked out in empty dir" '
 652                 prolog &&
 653                 reset_work_tree_to_interested no_submodule &&
 654                 (
 655                         cd submodule_update &&
 656                         mkdir sub1 &&
 657                         git branch -t add_sub1 origin/add_sub1 &&
 658                         $command add_sub1 &&
 659                         test_superproject_content origin/add_sub1 &&
 660                         test_submodule_content sub1 origin/add_sub1
 661                 )
 662         '
 663
 664         # Replacing a tracked file with a submodule produces a checked out submodule
 665         test_expect_success "$command: replace tracked file with submodule checks out submodule" '
 666                 prolog &&
 667                 reset_work_tree_to_interested replace_sub1_with_file &&
 668                 (
 669                         cd submodule_update &&
 670                         git branch -t replace_file_with_sub1 origin/replace_file_with_sub1 &&
 671                         $command replace_file_with_sub1 &&
 672                         test_superproject_content origin/replace_file_with_sub1 &&
 673                         test_submodule_content sub1 origin/replace_file_with_sub1
 674                 )
 675         '
 676         # ... as does removing a directory with tracked files with a submodule.
 677         test_expect_success "$command: replace directory with submodule" '
 678                 prolog &&
 679                 reset_work_tree_to_interested replace_sub1_with_directory &&
 680                 (
 681                         cd submodule_update &&
 682                         git branch -t replace_directory_with_sub1 origin/replace_directory_with_sub1 &&
 683                         $command replace_directory_with_sub1 &&
 684                         test_superproject_content origin/replace_directory_with_sub1 &&
 685                         test_submodule_content sub1 origin/replace_directory_with_sub1
 686                 )
 687         '
 688         # Switching to a commit with nested submodules recursively checks them out
 689         test_expect_success "$command: nested submodules are checked out" '
 690                 prolog &&
 691                 reset_work_tree_to_interested no_submodule &&
 692                 (
 693                         cd submodule_update &&
 694                         git branch -t modify_sub1_recursively origin/modify_sub1_recursively &&
 695                         $command modify_sub1_recursively &&
 696                         test_superproject_content origin/modify_sub1_recursively &&
 697                         test_submodule_content sub1 origin/modify_sub1_recursively &&
 698                         test_submodule_content -C sub1 sub2 origin/modify_sub1_recursively
 699                 )
 700         '
 701
 702         ######################## Disappearing submodule #######################
 703         # Removing a submodule removes its work tree ...
 704         test_expect_success "$command: removed submodule removes submodules working tree" '
 705                 prolog &&
 706                 reset_work_tree_to_interested add_sub1 &&
 707                 (
 708                         cd submodule_update &&
 709                         git branch -t remove_sub1 origin/remove_sub1 &&
 710                         $command remove_sub1 &&
 711                         test_superproject_content origin/remove_sub1 &&
 712                         ! test -e sub1 &&
 713                         test_must_fail git config -f .git/modules/sub1/config core.worktree
 714                 )
 715         '
 716         # ... absorbing a .git directory along the way.
 717         test_expect_success "$command: removed submodule absorbs submodules .git directory" '
 718                 prolog &&
 719                 reset_work_tree_to_interested add_sub1 &&
 720                 (
 721                         cd submodule_update &&
 722                         git branch -t remove_sub1 origin/remove_sub1 &&
 723                         replace_gitfile_with_git_dir sub1 &&
 724                         rm -rf .git/modules &&
 725                         $command remove_sub1 &&
 726                         test_superproject_content origin/remove_sub1 &&
 727                         ! test -e sub1 &&
 728                         test_git_directory_exists sub1
 729                 )
 730         '
 731
 732         # Replacing it with a file ...
 733         test_expect_success "$command: replace submodule with a file" '
 734                 prolog &&
 735                 reset_work_tree_to_interested add_sub1 &&
 736                 (
 737                         cd submodule_update &&
 738                         git branch -t replace_sub1_with_file origin/replace_sub1_with_file &&
 739                         $command replace_sub1_with_file &&
 740                         test_superproject_content origin/replace_sub1_with_file &&
 741                         test -f sub1
 742                 )
 743         '
 744         RESULTDS=success
 745         if test "$KNOWN_FAILURE_DIRECTORY_SUBMODULE_CONFLICTS" = 1
 746         then
 747                 RESULTDS=failure
 748         fi
 749         # ... must check its local work tree for untracked files
 750         test_expect_$RESULTDS "$command: replace submodule with a file must fail with untracked files" '
 751                 prolog &&
 752                 reset_work_tree_to_interested add_sub1 &&
 753                 (
 754                         cd submodule_update &&
 755                         git branch -t replace_sub1_with_file origin/replace_sub1_with_file &&
 756                         : >sub1/untrackedfile &&
 757                         test_must_fail $command replace_sub1_with_file &&
 758                         test_superproject_content origin/add_sub1 &&
 759                         test_submodule_content sub1 origin/add_sub1 &&
 760                         test -f sub1/untracked_file
 761                 )
 762         '
 763
 764         # Switching to a commit without nested submodules removes their worktrees
 765         test_expect_success "$command: worktrees of nested submodules are removed" '
 766                 prolog &&
 767                 reset_work_tree_to_interested add_nested_sub &&
 768                 (
 769                         cd submodule_update &&
 770                         git branch -t no_submodule origin/no_submodule &&
 771                         $command no_submodule &&
 772                         test_superproject_content origin/no_submodule &&
 773                         ! test_path_is_dir sub1 &&
 774                         test_must_fail git config -f .git/modules/sub1/config core.worktree &&
 775                         test_must_fail git config -f .git/modules/sub1/modules/sub2/config core.worktree
 776                 )
 777         '
 778
 779         ########################## Modified submodule #########################
 780         # Updating a submodule sha1 updates the submodule's work tree
 781         test_expect_success "$command: modified submodule updates submodule work tree" '
 782                 prolog &&
 783                 reset_work_tree_to_interested add_sub1 &&
 784                 (
 785                         cd submodule_update &&
 786                         git branch -t modify_sub1 origin/modify_sub1 &&
 787                         $command modify_sub1 &&
 788                         test_superproject_content origin/modify_sub1 &&
 789                         test_submodule_content sub1 origin/modify_sub1
 790                 )
 791         '
 792         # Updating a submodule to an invalid sha1 doesn't update the
 793         # superproject nor the submodule's work tree.
 794         test_expect_success "$command: updating to a missing submodule commit fails" '
 795                 prolog &&
 796                 reset_work_tree_to_interested add_sub1 &&
 797                 (
 798                         cd submodule_update &&
 799                         git branch -t invalid_sub1 origin/invalid_sub1 &&
 800                         test_must_fail $command invalid_sub1 2>err &&
 801                         test_i18ngrep sub1 err &&
 802                         test_superproject_content origin/add_sub1 &&
 803                         test_submodule_content sub1 origin/add_sub1
 804                 )
 805         '
 806         # Updating a submodule does not touch the currently checked out branch in the submodule
 807         test_expect_success "$command: submodule branch is not changed, detach HEAD instead" '
 808                 prolog &&
 809                 reset_work_tree_to_interested add_sub1 &&
 810                 (
 811                         cd submodule_update &&
 812                         git -C sub1 checkout -b keep_branch &&
 813                         git -C sub1 rev-parse HEAD >expect &&
 814                         git branch -t modify_sub1 origin/modify_sub1 &&
 815                         $command modify_sub1 &&
 816                         test_superproject_content origin/modify_sub1 &&
 817                         test_submodule_content sub1 origin/modify_sub1 &&
 818                         git -C sub1 rev-parse keep_branch >actual &&
 819                         test_cmp expect actual &&
 820                         test_must_fail git -C sub1 symbolic-ref HEAD
 821                 )
 822         '
 823 }
 824
 825 # Declares and invokes several tests that, in various situations, checks that
 826 # the provided Git command, when invoked with --recurse-submodules:
 827 #  - succeeds in updating the worktree and index of a superproject to a target
 828 #    commit, or fails atomically (depending on the test situation)
 829 #  - if succeeds, the contents of submodule directories are updated
 830 #
 831 # Specify the Git command so that "git $GIT_COMMAND --recurse-submodules"
 832 # works.
 833 #
 834 # If the command under test is known to not work with submodules in certain
 835 # conditions, set the appropriate KNOWN_FAILURE_* variable used in the tests
 836 # below to 1.
 837 #
 838 # Use as follows:
 839 #
 840 # test_submodule_switch_recursing_with_args "$GIT_COMMAND"
 841 test_submodule_switch_recursing_with_args () {
 842         cmd_args="$1"
 843         command="git $cmd_args --recurse-submodules"
 844         test_submodule_recursing_with_args_common "$command"
 845
 846         RESULTDS=success
 847         if test "$KNOWN_FAILURE_DIRECTORY_SUBMODULE_CONFLICTS" = 1
 848         then
 849                 RESULTDS=failure
 850         fi
 851         RESULTOI=success
 852         if test "$KNOWN_FAILURE_SUBMODULE_OVERWRITE_IGNORED_UNTRACKED" = 1
 853         then
 854                 RESULTOI=failure
 855         fi
 856         # Switching to a commit letting a submodule appear cannot override an
 857         # untracked file.
 858         test_expect_success "$command: added submodule doesn't remove untracked file with same name" '
 859                 prolog &&
 860                 reset_work_tree_to_interested no_submodule &&
 861                 (
 862                         cd submodule_update &&
 863                         git branch -t add_sub1 origin/add_sub1 &&
 864                         : >sub1 &&
 865                         test_must_fail $command add_sub1 &&
 866                         test_superproject_content origin/no_submodule &&
 867                         test_must_be_empty sub1
 868                 )
 869         '
 870         # ... but an ignored file is fine.
 871         test_expect_$RESULTOI "$command: added submodule removes an untracked ignored file" '
 872                 test_when_finished "rm submodule_update/.git/info/exclude" &&
 873                 prolog &&
 874                 reset_work_tree_to_interested no_submodule &&
 875                 (
 876                         cd submodule_update &&
 877                         git branch -t add_sub1 origin/add_sub1 &&
 878                         : >sub1 &&
 879                         echo sub1 >.git/info/exclude &&
 880                         $command add_sub1 &&
 881                         test_superproject_content origin/add_sub1 &&
 882                         test_submodule_content sub1 origin/add_sub1
 883                 )
 884         '
 885
 886         # Replacing a submodule with files in a directory must succeeds
 887         # when the submodule is clean
 888         test_expect_$RESULTDS "$command: replace submodule with a directory" '
 889                 prolog &&
 890                 reset_work_tree_to_interested add_sub1 &&
 891                 (
 892                         cd submodule_update &&
 893                         git branch -t replace_sub1_with_directory origin/replace_sub1_with_directory &&
 894                         $command replace_sub1_with_directory &&
 895                         test_superproject_content origin/replace_sub1_with_directory &&
 896                         test_submodule_content sub1 origin/replace_sub1_with_directory
 897                 )
 898         '
 899         # ... absorbing a .git directory.
 900         test_expect_$RESULTDS "$command: replace submodule containing a .git directory with a directory must absorb the git dir" '
 901                 prolog &&
 902                 reset_work_tree_to_interested add_sub1 &&
 903                 (
 904                         cd submodule_update &&
 905                         git branch -t replace_sub1_with_directory origin/replace_sub1_with_directory &&
 906                         replace_gitfile_with_git_dir sub1 &&
 907                         rm -rf .git/modules &&
 908                         $command replace_sub1_with_directory &&
 909                         test_superproject_content origin/replace_sub1_with_directory &&
 910                         test_git_directory_exists sub1
 911                 )
 912         '
 913
 914         # ... and ignored files are ignored
 915         test_expect_success "$command: replace submodule with a file works ignores ignored files in submodule" '
 916                 test_when_finished "rm submodule_update/.git/modules/sub1/info/exclude" &&
 917                 prolog &&
 918                 reset_work_tree_to_interested add_sub1 &&
 919                 (
 920                         cd submodule_update &&
 921                         git branch -t replace_sub1_with_file origin/replace_sub1_with_file &&
 922                         echo ignored >.git/modules/sub1/info/exclude &&
 923                         : >sub1/ignored &&
 924                         $command replace_sub1_with_file &&
 925                         test_superproject_content origin/replace_sub1_with_file &&
 926                         test -f sub1
 927                 )
 928         '
 929
 930         test_expect_success "git -c submodule.recurse=true $cmd_args: modified submodule updates submodule work tree" '
 931                 prolog &&
 932                 reset_work_tree_to_interested add_sub1 &&
 933                 (
 934                         cd submodule_update &&
 935                         git branch -t modify_sub1 origin/modify_sub1 &&
 936                         git -c submodule.recurse=true $cmd_args modify_sub1 &&
 937                         test_superproject_content origin/modify_sub1 &&
 938                         test_submodule_content sub1 origin/modify_sub1
 939                 )
 940         '
 941
 942         test_expect_success "$command: modified submodule updates submodule recursively" '
 943                 prolog &&
 944                 reset_work_tree_to_interested add_nested_sub &&
 945                 (
 946                         cd submodule_update &&
 947                         git branch -t modify_sub1_recursively origin/modify_sub1_recursively &&
 948                         $command modify_sub1_recursively &&
 949                         test_superproject_content origin/modify_sub1_recursively &&
 950                         test_submodule_content sub1 origin/modify_sub1_recursively &&
 951                         test_submodule_content -C sub1 sub2 origin/modify_sub1_recursively
 952                 )
 953         '
 954 }
 955
 956 # Same as test_submodule_switch_recursing_with_args(), except that throwing
 957 # away local changes in the superproject is allowed.
 958 test_submodule_forced_switch_recursing_with_args () {
 959         cmd_args="$1"
 960         command="git $cmd_args --recurse-submodules"
 961         test_submodule_recursing_with_args_common "$command"
 962
 963         RESULT=success
 964         if test "$KNOWN_FAILURE_DIRECTORY_SUBMODULE_CONFLICTS" = 1
 965         then
 966                 RESULT=failure
 967         fi
 968         # Switching to a commit letting a submodule appear does not care about
 969         # an untracked file.
 970         test_expect_success "$command: added submodule does remove untracked unignored file with same name when forced" '
 971                 prolog &&
 972                 reset_work_tree_to_interested no_submodule &&
 973                 (
 974                         cd submodule_update &&
 975                         git branch -t add_sub1 origin/add_sub1 &&
 976                         >sub1 &&
 977                         $command add_sub1 &&
 978                         test_superproject_content origin/add_sub1 &&
 979                         test_submodule_content sub1 origin/add_sub1
 980                 )
 981         '
 982
 983         # Replacing a submodule with files in a directory ...
 984         test_expect_success "$command: replace submodule with a directory" '
 985                 prolog &&
 986                 reset_work_tree_to_interested add_sub1 &&
 987                 (
 988                         cd submodule_update &&
 989                         git branch -t replace_sub1_with_directory origin/replace_sub1_with_directory &&
 990                         $command replace_sub1_with_directory &&
 991                         test_superproject_content origin/replace_sub1_with_directory
 992                 )
 993         '
 994         # ... absorbing a .git directory.
 995         test_expect_success "$command: replace submodule containing a .git directory with a directory must fail" '
 996                 prolog &&
 997                 reset_work_tree_to_interested add_sub1 &&
 998                 (
 999                         cd submodule_update &&
1000                         git branch -t replace_sub1_with_directory origin/replace_sub1_with_directory &&
1001                         replace_gitfile_with_git_dir sub1 &&
1002                         rm -rf .git/modules/sub1 &&
1003                         $command replace_sub1_with_directory &&
1004                         test_superproject_content origin/replace_sub1_with_directory &&
1005                         test_git_directory_exists sub1
1006                 )
1007         '
1008
1009         # ... even if the submodule contains ignored files
1010         test_expect_success "$command: replace submodule with a file ignoring ignored files" '
1011                 prolog &&
1012                 reset_work_tree_to_interested add_sub1 &&
1013                 (
1014                         cd submodule_update &&
1015                         git branch -t replace_sub1_with_file origin/replace_sub1_with_file &&
1016                         : >sub1/expect &&
1017                         $command replace_sub1_with_file &&
1018                         test_superproject_content origin/replace_sub1_with_file
1019                 )
1020         '
1021
1022         # Updating a submodule from an invalid sha1 updates
1023         test_expect_success "$command: modified submodule does update submodule work tree from invalid commit" '
1024                 prolog &&
1025                 reset_work_tree_to_interested invalid_sub1 &&
1026                 (
1027                         cd submodule_update &&
1028                         git branch -t valid_sub1 origin/valid_sub1 &&
1029                         $command valid_sub1 &&
1030                         test_superproject_content origin/valid_sub1 &&
1031                         test_submodule_content sub1 origin/valid_sub1
1032                 )
1033         '
1034
1035         # Old versions of Git were buggy writing the .git link file
1036         # (e.g. before f8eaa0ba98b and then moving the superproject repo
1037         # whose submodules contained absolute paths)
1038         test_expect_success "$command: updating submodules fixes .git links" '
1039                 prolog &&
1040                 reset_work_tree_to_interested add_sub1 &&
1041                 (
1042                         cd submodule_update &&
1043                         git branch -t modify_sub1 origin/modify_sub1 &&
1044                         echo "gitdir: bogus/path" >sub1/.git &&
1045                         $command modify_sub1 &&
1046                         test_superproject_content origin/modify_sub1 &&
1047                         test_submodule_content sub1 origin/modify_sub1
1048                 )
1049         '
1050
1051         test_expect_success "$command: changed submodule worktree is reset" '
1052                 prolog &&
1053                 reset_work_tree_to_interested add_sub1 &&
1054                 (
1055                         cd submodule_update &&
1056                         rm sub1/file1 &&
1057                         : >sub1/new_file &&
1058                         git -C sub1 add new_file &&
1059                         $command HEAD &&
1060                         test_path_is_file sub1/file1 &&
1061                         test_path_is_missing sub1/new_file
1062                 )
1063         '
1064 }