gitextract_cagnoq27/

├── .gitignore
├── .gitmodules
├── LICENSE
├── README.md
├── docs/
│   ├── Dockerfile
│   └── step-by-step-tutorial.md
├── examples/
│   └── gpt/
│       ├── gpt_piped.py
│       ├── initialize.py
│       ├── pretrain_gpt2.py
│       └── pretrain_gpt2_distributed.sh
└── src/
    └── veGiantModel/
        ├── __init__.py
        ├── distributed/
        │   └── __init__.py
        ├── engine/
        │   ├── engine.py
        │   ├── module.py
        │   ├── p2p.py
        │   ├── schedule.py
        │   └── topology.py
        ├── initialize.py
        ├── launcher/
        │   └── launch.py
        ├── module/
        │   ├── __init__.py
        │   └── dense.py
        └── patcher.py