คำถามนี้อ้างอิงจากไดเร็กทอรีย่อยแยกออกเป็นที่เก็บ Git แยกต่างหาก

แทนที่จะแยกไดเรกทอรีย่อยเดียวฉันต้องการแยกสองรายการออก ตัวอย่างเช่นโครงสร้างไดเรกทอรีปัจจุบันของฉันมีลักษณะดังนี้:

/apps
  /AAA
  /BBB
  /CCC
/libs
  /XXX
  /YYY
  /ZZZ

และฉันต้องการสิ่งนี้แทน:

/apps
  /AAA
/libs
  /XXX

--subdirectory-filterอาร์กิวเมนต์git filter-branchจะไม่ทำงานเพราะจะได้รับการกำจัดของทุกอย่างยกเว้นไดเรกทอรีที่กำหนดครั้งแรกที่มันวิ่ง ฉันคิดว่าการใช้--index-filterอาร์กิวเมนต์สำหรับไฟล์ที่ไม่ต้องการทั้งหมดจะใช้งานได้ (แม้ว่าจะน่าเบื่อ) แต่ถ้าฉันลองเรียกใช้มากกว่าหนึ่งครั้งฉันจะได้รับข้อความต่อไปนี้:

Cannot create a new backup.
A previous backup already exists in refs/original/
Force overwriting the backup with -f

ความคิดใด ๆ ? TIA

แทนที่จะต้องจัดการกับ subshell และใช้ ext glob (ตามที่kynan แนะนำ ) ลองใช้วิธีที่ง่ายกว่านี้:

git filter-branch --index-filter 'git rm --cached -qr --ignore-unmatch -- . && git reset -q $GIT_COMMIT -- apps/AAA libs/XXX' --prune-empty -- --all

ตามที่กล่าวไว้ในความคิดเห็นของ void.pointerสิ่งนี้จะลบทุกอย่างยกเว้นapps/AAAและlibs/XXXจากที่เก็บปัจจุบัน

พรุนเปล่าผสานกระทำ

สิ่งนี้ทิ้งการผสานที่ว่างเปล่าจำนวนมาก สิ่งเหล่านี้สามารถลบออกได้ด้วยบัตรอื่นตามที่อธิบายโดยraphinesseในคำตอบของเขา:

git filter-branch --prune-empty --parent-filter \
'sed "s/-p //g" | xargs -r git show-branch --independent | sed "s/\</-p /g"'

⚠️คำเตือน : ผู้ต้องดังกล่าวข้างต้นรุ่นที่ใช้ GNU ของsedและxargsมิฉะนั้นก็จะเอากระทำทั้งหมดเป็นxargsล้มเหลว brew install gnu-sed findutilsจากนั้นใช้gsedและgxargs:

git filter-branch --prune-empty --parent-filter \
'gsed "s/-p //g" | gxargs git show-branch --independent | gsed "s/\</-p /g"' 

ขั้นตอนแบบแมนนวลพร้อมคำสั่งคอมไพล์ง่ายๆ

แผนคือการแยกแต่ละไดเรกทอรีออกเป็น repos ของตัวเองจากนั้นรวมเข้าด้วยกัน ขั้นตอนแบบแมนนวลต่อไปนี้ไม่ได้ใช้สคริปต์ที่ใช้งานเกินขนาด แต่เป็นคำสั่งที่เข้าใจง่ายและสามารถช่วยรวมโฟลเดอร์ย่อย N พิเศษลงในที่เก็บเดียวได้

หาร

สมมติว่า repo เดิมของคุณคือoriginal_repo

1 - แยกแอป:

git clone original_repo apps-repo
cd apps-repo
git filter-branch --prune-empty --subdirectory-filter apps master

2 - แยก libs

git clone original_repo libs-repo
cd libs-repo
git filter-branch --prune-empty --subdirectory-filter libs master

ดำเนินการต่อหากคุณมีมากกว่า 2 โฟลเดอร์ ตอนนี้คุณจะมีที่เก็บ git ใหม่และชั่วคราวสองที่

พิชิตโดยการรวมแอพและ libs

3 - เตรียม repo ใหม่ล่าสุด:

mkdir my-desired-repo
cd my-desired-repo
git init

และคุณจะต้องทำการคอมมิตอย่างน้อยหนึ่งครั้ง หากควรข้ามสามบรรทัดต่อไปนี้ repo แรกของคุณจะปรากฏทันทีภายใต้รูท repo ของคุณ:

touch a_file_and_make_a_commit # see user's feedback
git add a_file_and_make_a_commit
git commit -am "at least one commit is needed for it to work"

เมื่อคอมมิตไฟล์ชั่วคราวmergeคำสั่งในส่วนต่อมาจะหยุดตามที่คาดไว้

จากความคิดเห็นของผู้ใช้แทนที่จะเพิ่มไฟล์แบบสุ่มเช่นa_file_and_make_a_commitคุณสามารถเลือกที่จะเพิ่ม.gitignoreหรือREADME.mdอื่น ๆ

4 - รวมแอป repo ก่อน:

git remote add apps-repo ../apps-repo
git fetch apps-repo
git merge -s ours --no-commit apps-repo/master # see below note.
git read-tree --prefix=apps -u apps-repo/master
git commit -m "import apps"

ตอนนี้คุณควรเห็นไดเรกทอรีแอพในที่เก็บใหม่ของคุณ git logควรแสดงข้อความยืนยันในอดีตที่เกี่ยวข้องทั้งหมด

หมายเหตุ: ดังที่ Chris ระบุไว้ด้านล่างในความคิดเห็นสำหรับ git เวอร์ชันใหม่กว่า (> = 2.9) คุณต้องระบุ--allow-unrelated-historiesด้วยgit merge

5 - รวม libs repo ถัดไปในลักษณะเดียวกัน:

git remote add libs-repo ../libs-repo
git fetch libs-repo
git merge -s ours --no-commit libs-repo/master # see above note.
git read-tree --prefix=libs -u libs-repo/master
git commit -m "import libs"

ดำเนินการต่อหากคุณมีมากกว่า 2 repos ที่จะรวม

การอ้างอิง: ผสานไดเร็กทอรีย่อยของที่เก็บอื่นด้วย git

ทำไมคุณถึงต้องการวิ่งfilter-branchมากกว่าหนึ่งครั้ง? คุณสามารถทำได้ทั้งหมดในการกวาดครั้งเดียวดังนั้นไม่จำเป็นต้องบังคับ (โปรดทราบว่าคุณต้องextglobเปิดใช้งานในเชลล์ของคุณเพื่อให้สิ่งนี้ทำงานได้):

git filter-branch --index-filter "git rm -r -f --cached --ignore-unmatch $(ls -xd apps/!(AAA) libs/!(XXX))" --prune-empty -- --all

สิ่งนี้ควรกำจัดการเปลี่ยนแปลงทั้งหมดในไดเร็กทอรีย่อยที่ไม่ต้องการและเก็บสาขาและคอมมิตทั้งหมดของคุณไว้ (เว้นแต่จะมีผลกับไฟล์ในไดเร็กทอรีย่อยที่ถูกตัดออกเท่านั้น--prune-empty) - ไม่มีปัญหากับการคอมมิตซ้ำเป็นต้น

git statusหลังจากการดำเนินการนี้ไดเรกทอรีที่ไม่พึงประสงค์จะได้รับการระบุว่าเป็นที่ไม่ได้ติดตามโดย

$(ls ...)เป็นสิ่งที่จำเป็นเซนต์extglobได้รับการประเมินจากเปลือกของคุณแทนการกรองดัชนีที่ใช้shในตัวeval(ที่extglobไม่สามารถใช้ได้) ดูฉันจะเปิดใช้งานตัวเลือกเชลล์ใน git ได้อย่างไร สำหรับรายละเอียดเพิ่มเติมเกี่ยวกับเรื่องนั้น

ตอบคำถามของตัวเองที่นี่ ... หลังจากลองผิดลองถูกมาหลายครั้ง

ฉันจัดการได้โดยใช้การรวมกันของgit subtreeและgit-stitch-repo. คำแนะนำเหล่านี้อ้างอิงจาก:

• การแชร์โค้ดระหว่างโปรเจ็กต์กับทรีย่อย git - http://psionides.jogger.pl/2010/02/04/sharing-code-between-projects-with-git-subtree/
• เครื่องมือที่เหมาะสมสำหรับงาน: git-stitch-repo - http://ifup.org/2009/02/07/the-right-tool-for-the-job-git-stitch-repo/

ก่อนอื่นฉันดึงไดเร็กทอรีที่ต้องการเก็บไว้ในที่เก็บแยกต่างหาก:

cd origRepo
git subtree split -P apps/AAA -b aaa
git subtree split -P libs/XXX -b xxx

cd ..
mkdir aaaRepo
cd aaaRepo
git init
git fetch ../origRepo aaa
git checkout -b master FETCH_HEAD

cd ..
mkdir xxxRepo
cd xxxRepo
git init
git fetch ../origRepo xxx
git checkout -b master FETCH_HEAD

จากนั้นฉันก็สร้างที่เก็บว่างใหม่และนำเข้า / เย็บสองอันสุดท้ายเข้าไป:

cd ..
mkdir newRepo
cd newRepo
git init
git-stitch-repo ../aaaRepo:apps/AAA ../xxxRepo:libs/XXX | git fast-import

สิ่งนี้จะสร้างสองสาขาmaster-Aและmaster-Bแต่ละอันถือเนื้อหาของหนึ่งใน repos ที่เย็บไว้ ในการรวมเข้าด้วยกันและทำความสะอาด:

git checkout master-A
git pull . master-B
git checkout master
git branch -d master-A 
git branch -d master-B

ตอนนี้ฉันไม่ค่อยแน่ใจว่าสิ่งนี้เกิดขึ้นได้อย่างไร / เมื่อใด แต่หลังจากครั้งแรกcheckoutและครั้งแรกpullรหัสจะรวมเข้ากับสาขาหลักอย่างน่าอัศจรรย์ (ขอขอบคุณข้อมูลเชิงลึกเกี่ยวกับสิ่งที่เกิดขึ้นที่นี่!)

ทุกอย่างดูเหมือนจะได้ทำงานตามที่คาดไว้ยกเว้นว่าถ้าผมมองผ่านnewRepoประวัติศาสตร์กระทำมีซ้ำกันเมื่อแก้ไขได้รับผลกระทบทั้งในและapps/AAA libs/XXXหากมีวิธีลบรายการที่ซ้ำกันก็คงจะสมบูรณ์แบบ

วิธีง่ายๆ: git-filter-repo

ผมมีปัญหาที่คล้ายกันและหลังจากตรวจสอบวิธีการต่างๆที่ระบุไว้ที่นี่ที่ผมค้นพบGit-กรอง repo มันถูกแนะนำให้เป็นทางเลือกในการคอมไพล์กรองสาขาในเอกสารประกอบคอมไพล์อย่างเป็นทางการที่นี่

ในการสร้างที่เก็บใหม่จากชุดย่อยของไดเร็กทอรีในที่เก็บที่มีอยู่คุณสามารถใช้คำสั่ง:

git filter-repo --path <file_to_remove>

กรองไฟล์ / โฟลเดอร์หลาย ๆ ไฟล์โดยผูกมัด:

git filter-repo --path keepthisfile --path keepthisfolder/

ดังนั้นในการตอบคำถามเดิมด้วย git-filter-repo คุณจะต้องใช้คำสั่งต่อไปนี้:

git filter-repo --path apps/AAA/ --path libs/XXX/

ฉันเขียนตัวกรองคอมไพล์เพื่อแก้ปัญหานี้อย่างตรงจุด มีชื่อที่ยอดเยี่ยมของ git_filter และตั้งอยู่ที่ github ที่นี่:

https://github.com/slobobaby/git_filter

มันขึ้นอยู่กับ libgit2 ที่ยอดเยี่ยม

ฉันต้องการแยกที่เก็บขนาดใหญ่ที่มีการคอมมิตจำนวนมาก (~ 100000) และการแก้ปัญหาตาม git filter-branch ใช้เวลาหลายวันในการรัน git_filter ใช้เวลาหนึ่งนาทีในการทำสิ่งเดียวกัน

ใช้ส่วนขยายคอมไพล์ 'git splits'

git splitsเป็นสคริปต์ทุบตีที่เป็นเสื้อคลุมรอบgit branch-filterที่ฉันสร้างเป็นส่วนขยายของคอมไพล์ขึ้นอยู่กับวิธีการแก้ปัญหาของ jkeating

มันถูกสร้างขึ้นมาเพื่อสถานการณ์นี้ สำหรับข้อผิดพลาดของคุณให้ลองใช้git splits -fตัวเลือกเพื่อบังคับให้ลบข้อมูลสำรอง เนื่องจากgit splitsดำเนินการในสาขาใหม่จึงไม่เขียนสาขาปัจจุบันของคุณใหม่ดังนั้นการสำรองข้อมูลจึงไม่เกี่ยวข้อง ดูไฟล์ README สำหรับรายละเอียดเพิ่มเติมและให้แน่ใจว่าจะใช้ในการคัดลอก / โคลนของ repo ของคุณ (ในกรณี!)

1. git splitsติดตั้ง

2. แยกไดเรกทอรีออกเป็นสาขาท้องถิ่น #change into your repo's directory cd /path/to/repo #checkout the branch git checkout XYZ
#split multiple directories into new branch XYZ git splits -b XYZ apps/AAA libs/ZZZ

3. สร้าง repo ว่างที่ใดที่หนึ่ง เราจะถือว่าเราได้สร้าง repo ว่างที่เรียกว่าxyzGitHub ที่มีเส้นทาง:git@github.com:simpliwp/xyz.git

4. กดไปที่ repo ใหม่ #add a new remote origin for the empty repo so we can push to the empty repo on GitHub git remote add origin_xyz git@github.com:simpliwp/xyz.git #push the branch to the empty repo's master branch git push origin_xyz XYZ:master

5. โคลน repo ระยะไกลที่สร้างขึ้นใหม่ลงในไดเร็กทอรีโลคัลใหม่
   #change current directory out of the old repo cd /path/to/where/you/want/the/new/local/repo #clone the remote repo you just pushed to git clone git@github.com:simpliwp/xyz.git

git clone git@example.com:thing.git
cd thing
git fetch
for originBranch in `git branch -r | grep -v master`; do
    branch=${originBranch:7:${#originBranch}}
    git checkout $branch
done
git checkout master

git filter-branch --index-filter 'git rm --cached -qr --ignore-unmatch -- . && git reset -q $GIT_COMMIT -- dir1 dir2 .gitignore' --prune-empty -- --all

git remote set-url origin git@example.com:newthing.git
git push --all

ใช่. บังคับให้เขียนทับข้อมูลสำรองโดยใช้-fแฟล็กในการเรียกครั้งต่อ ๆ ไปfilter-branchเพื่อแทนที่คำเตือนนั้น :) มิฉะนั้นฉันคิดว่าคุณมีวิธีแก้ปัญหา (นั่นคือลบไดเร็กทอรีที่ไม่ต้องการในแต่ละครั้งด้วยfilter-branch)

ลบข้อมูลสำรองภายใต้ไดเร็กทอรี. git ใน refs / original ตามที่ข้อความแนะนำ ไดเรกทอรีถูกซ่อน