{
    "metadata": {
        "ParamSize": 247
    },
    "records": [
        {
            "dataPath": "params_shard_0.bin",
            "format": "raw-shard",
            "nbytes": 75595776,
            "records": [
                {
                    "name": "param_0",
                    "shape": [
                        49216,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 75595776,
                    "byteOffset": 0
                }
            ],
            "md5sum": "ecf15d3f0901ab7456e8e0af8ced507c"
        },
        {
            "dataPath": "params_shard_1.bin",
            "format": "raw-shard",
            "nbytes": 25165824,
            "records": [
                {
                    "name": "param_6",
                    "shape": [
                        16384,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 25165824,
                    "byteOffset": 0
                }
            ],
            "md5sum": "9bbebd6e9fb88198483ac084144d55a6"
        },
        {
            "dataPath": "params_shard_2.bin",
            "format": "raw-shard",
            "nbytes": 30683136,
            "records": [
                {
                    "name": "param_1",
                    "shape": [
                        49216,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 9449472,
                    "byteOffset": 0
                },
                {
                    "name": "param_2",
                    "shape": [
                        9216,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 14155776,
                    "byteOffset": 9449472
                },
                {
                    "name": "param_3",
                    "shape": [
                        9216,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1769472,
                    "byteOffset": 23605248
                },
                {
                    "name": "param_4",
                    "shape": [
                        3072,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 4718592,
                    "byteOffset": 25374720
                },
                {
                    "name": "param_5",
                    "shape": [
                        3072,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 589824,
                    "byteOffset": 30093312
                }
            ],
            "md5sum": "2e5970708026d9b687364767425202cb"
        },
        {
            "dataPath": "params_shard_3.bin",
            "format": "raw-shard",
            "nbytes": 33239040,
            "records": [
                {
                    "name": "param_7",
                    "shape": [
                        16384,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 3145728,
                    "byteOffset": 0
                },
                {
                    "name": "param_8",
                    "shape": [
                        3072,
                        1024
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 12582912,
                    "byteOffset": 3145728
                },
                {
                    "name": "param_9",
                    "shape": [
                        3072,
                        256
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1572864,
                    "byteOffset": 15728640
                },
                {
                    "name": "param_10",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17301504
                },
                {
                    "name": "param_11",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17307648
                },
                {
                    "name": "param_12",
                    "shape": [
                        9216,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 14155776,
                    "byteOffset": 17313792
                },
                {
                    "name": "param_13",
                    "shape": [
                        9216,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1769472,
                    "byteOffset": 31469568
                }
            ],
            "md5sum": "9f934199d76c5d26646f3d545ab72fff"
        },
        {
            "dataPath": "params_shard_4.bin",
            "format": "raw-shard",
            "nbytes": 30474240,
            "records": [
                {
                    "name": "param_14",
                    "shape": [
                        3072,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 4718592,
                    "byteOffset": 0
                },
                {
                    "name": "param_15",
                    "shape": [
                        3072,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 589824,
                    "byteOffset": 4718592
                },
                {
                    "name": "param_16",
                    "shape": [
                        16384,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 25165824,
                    "byteOffset": 5308416
                }
            ],
            "md5sum": "a3cb6df79e4429abc2be010fedfc51d1"
        },
        {
            "dataPath": "params_shard_5.bin",
            "format": "raw-shard",
            "nbytes": 33239040,
            "records": [
                {
                    "name": "param_17",
                    "shape": [
                        16384,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 3145728,
                    "byteOffset": 0
                },
                {
                    "name": "param_18",
                    "shape": [
                        3072,
                        1024
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 12582912,
                    "byteOffset": 3145728
                },
                {
                    "name": "param_19",
                    "shape": [
                        3072,
                        256
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1572864,
                    "byteOffset": 15728640
                },
                {
                    "name": "param_20",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17301504
                },
                {
                    "name": "param_21",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17307648
                },
                {
                    "name": "param_22",
                    "shape": [
                        9216,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 14155776,
                    "byteOffset": 17313792
                },
                {
                    "name": "param_23",
                    "shape": [
                        9216,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1769472,
                    "byteOffset": 31469568
                }
            ],
            "md5sum": "abf83c3c7e851bb5767f197da8cb1dac"
        },
        {
            "dataPath": "params_shard_6.bin",
            "format": "raw-shard",
            "nbytes": 30474240,
            "records": [
                {
                    "name": "param_24",
                    "shape": [
                        3072,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 4718592,
                    "byteOffset": 0
                },
                {
                    "name": "param_25",
                    "shape": [
                        3072,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 589824,
                    "byteOffset": 4718592
                },
                {
                    "name": "param_26",
                    "shape": [
                        16384,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 25165824,
                    "byteOffset": 5308416
                }
            ],
            "md5sum": "6ce898064ed0861322bbf62e9d70d729"
        },
        {
            "dataPath": "params_shard_7.bin",
            "format": "raw-shard",
            "nbytes": 33239040,
            "records": [
                {
                    "name": "param_27",
                    "shape": [
                        16384,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 3145728,
                    "byteOffset": 0
                },
                {
                    "name": "param_28",
                    "shape": [
                        3072,
                        1024
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 12582912,
                    "byteOffset": 3145728
                },
                {
                    "name": "param_29",
                    "shape": [
                        3072,
                        256
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1572864,
                    "byteOffset": 15728640
                },
                {
                    "name": "param_30",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17301504
                },
                {
                    "name": "param_31",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17307648
                },
                {
                    "name": "param_32",
                    "shape": [
                        9216,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 14155776,
                    "byteOffset": 17313792
                },
                {
                    "name": "param_33",
                    "shape": [
                        9216,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1769472,
                    "byteOffset": 31469568
                }
            ],
            "md5sum": "172bd66af74d0e34491ae5bb801be91a"
        },
        {
            "dataPath": "params_shard_8.bin",
            "format": "raw-shard",
            "nbytes": 30474240,
            "records": [
                {
                    "name": "param_34",
                    "shape": [
                        3072,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 4718592,
                    "byteOffset": 0
                },
                {
                    "name": "param_35",
                    "shape": [
                        3072,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 589824,
                    "byteOffset": 4718592
                },
                {
                    "name": "param_36",
                    "shape": [
                        16384,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 25165824,
                    "byteOffset": 5308416
                }
            ],
            "md5sum": "80622e63178dc3e00ced75b53b23fd35"
        },
        {
            "dataPath": "params_shard_9.bin",
            "format": "raw-shard",
            "nbytes": 33239040,
            "records": [
                {
                    "name": "param_37",
                    "shape": [
                        16384,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 3145728,
                    "byteOffset": 0
                },
                {
                    "name": "param_38",
                    "shape": [
                        3072,
                        1024
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 12582912,
                    "byteOffset": 3145728
                },
                {
                    "name": "param_39",
                    "shape": [
                        3072,
                        256
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1572864,
                    "byteOffset": 15728640
                },
                {
                    "name": "param_40",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17301504
                },
                {
                    "name": "param_41",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17307648
                },
                {
                    "name": "param_42",
                    "shape": [
                        9216,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 14155776,
                    "byteOffset": 17313792
                },
                {
                    "name": "param_43",
                    "shape": [
                        9216,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1769472,
                    "byteOffset": 31469568
                }
            ],
            "md5sum": "1b105ec9d866d775cb69379c40757f88"
        },
        {
            "dataPath": "params_shard_10.bin",
            "format": "raw-shard",
            "nbytes": 30474240,
            "records": [
                {
                    "name": "param_44",
                    "shape": [
                        3072,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 4718592,
                    "byteOffset": 0
                },
                {
                    "name": "param_45",
                    "shape": [
                        3072,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 589824,
                    "byteOffset": 4718592
                },
                {
                    "name": "param_46",
                    "shape": [
                        16384,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 25165824,
                    "byteOffset": 5308416
                }
            ],
            "md5sum": "8ca5fd22e33b7ecfc4edb22c2429bea0"
        },
        {
            "dataPath": "params_shard_11.bin",
            "format": "raw-shard",
            "nbytes": 33239040,
            "records": [
                {
                    "name": "param_47",
                    "shape": [
                        16384,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 3145728,
                    "byteOffset": 0
                },
                {
                    "name": "param_48",
                    "shape": [
                        3072,
                        1024
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 12582912,
                    "byteOffset": 3145728
                },
                {
                    "name": "param_49",
                    "shape": [
                        3072,
                        256
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1572864,
                    "byteOffset": 15728640
                },
                {
                    "name": "param_50",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17301504
                },
                {
                    "name": "param_51",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17307648
                },
                {
                    "name": "param_52",
                    "shape": [
                        9216,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 14155776,
                    "byteOffset": 17313792
                },
                {
                    "name": "param_53",
                    "shape": [
                        9216,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1769472,
                    "byteOffset": 31469568
                }
            ],
            "md5sum": "33dbf522d5e71a2c9c80bba1cd630861"
        },
        {
            "dataPath": "params_shard_12.bin",
            "format": "raw-shard",
            "nbytes": 30474240,
            "records": [
                {
                    "name": "param_54",
                    "shape": [
                        3072,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 4718592,
                    "byteOffset": 0
                },
                {
                    "name": "param_55",
                    "shape": [
                        3072,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 589824,
                    "byteOffset": 4718592
                },
                {
                    "name": "param_56",
                    "shape": [
                        16384,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 25165824,
                    "byteOffset": 5308416
                }
            ],
            "md5sum": "ffc57c8bae42beb9ca8bd2f58a9e4b90"
        },
        {
            "dataPath": "params_shard_13.bin",
            "format": "raw-shard",
            "nbytes": 33239040,
            "records": [
                {
                    "name": "param_57",
                    "shape": [
                        16384,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 3145728,
                    "byteOffset": 0
                },
                {
                    "name": "param_58",
                    "shape": [
                        3072,
                        1024
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 12582912,
                    "byteOffset": 3145728
                },
                {
                    "name": "param_59",
                    "shape": [
                        3072,
                        256
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1572864,
                    "byteOffset": 15728640
                },
                {
                    "name": "param_60",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17301504
                },
                {
                    "name": "param_61",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17307648
                },
                {
                    "name": "param_62",
                    "shape": [
                        9216,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 14155776,
                    "byteOffset": 17313792
                },
                {
                    "name": "param_63",
                    "shape": [
                        9216,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1769472,
                    "byteOffset": 31469568
                }
            ],
            "md5sum": "7000c9ae4c55bccc6d8d4ff1cbfd6543"
        },
        {
            "dataPath": "params_shard_14.bin",
            "format": "raw-shard",
            "nbytes": 30474240,
            "records": [
                {
                    "name": "param_64",
                    "shape": [
                        3072,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 4718592,
                    "byteOffset": 0
                },
                {
                    "name": "param_65",
                    "shape": [
                        3072,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 589824,
                    "byteOffset": 4718592
                },
                {
                    "name": "param_66",
                    "shape": [
                        16384,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 25165824,
                    "byteOffset": 5308416
                }
            ],
            "md5sum": "948f3bbf1c76842dde7f1b9831212144"
        },
        {
            "dataPath": "params_shard_15.bin",
            "format": "raw-shard",
            "nbytes": 33239040,
            "records": [
                {
                    "name": "param_67",
                    "shape": [
                        16384,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 3145728,
                    "byteOffset": 0
                },
                {
                    "name": "param_68",
                    "shape": [
                        3072,
                        1024
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 12582912,
                    "byteOffset": 3145728
                },
                {
                    "name": "param_69",
                    "shape": [
                        3072,
                        256
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1572864,
                    "byteOffset": 15728640
                },
                {
                    "name": "param_70",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17301504
                },
                {
                    "name": "param_71",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17307648
                },
                {
                    "name": "param_72",
                    "shape": [
                        9216,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 14155776,
                    "byteOffset": 17313792
                },
                {
                    "name": "param_73",
                    "shape": [
                        9216,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1769472,
                    "byteOffset": 31469568
                }
            ],
            "md5sum": "32bec1a6997ffbfd0ab9e93f56b9ad87"
        },
        {
            "dataPath": "params_shard_16.bin",
            "format": "raw-shard",
            "nbytes": 30474240,
            "records": [
                {
                    "name": "param_74",
                    "shape": [
                        3072,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 4718592,
                    "byteOffset": 0
                },
                {
                    "name": "param_75",
                    "shape": [
                        3072,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 589824,
                    "byteOffset": 4718592
                },
                {
                    "name": "param_76",
                    "shape": [
                        16384,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 25165824,
                    "byteOffset": 5308416
                }
            ],
            "md5sum": "8711c6302582fddaa4c9e7ed91a75c7b"
        },
        {
            "dataPath": "params_shard_17.bin",
            "format": "raw-shard",
            "nbytes": 33239040,
            "records": [
                {
                    "name": "param_77",
                    "shape": [
                        16384,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 3145728,
                    "byteOffset": 0
                },
                {
                    "name": "param_78",
                    "shape": [
                        3072,
                        1024
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 12582912,
                    "byteOffset": 3145728
                },
                {
                    "name": "param_79",
                    "shape": [
                        3072,
                        256
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1572864,
                    "byteOffset": 15728640
                },
                {
                    "name": "param_80",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17301504
                },
                {
                    "name": "param_81",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17307648
                },
                {
                    "name": "param_82",
                    "shape": [
                        9216,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 14155776,
                    "byteOffset": 17313792
                },
                {
                    "name": "param_83",
                    "shape": [
                        9216,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1769472,
                    "byteOffset": 31469568
                }
            ],
            "md5sum": "29147a956d8177b8d4b5c57754a7d670"
        },
        {
            "dataPath": "params_shard_18.bin",
            "format": "raw-shard",
            "nbytes": 30474240,
            "records": [
                {
                    "name": "param_84",
                    "shape": [
                        3072,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 4718592,
                    "byteOffset": 0
                },
                {
                    "name": "param_85",
                    "shape": [
                        3072,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 589824,
                    "byteOffset": 4718592
                },
                {
                    "name": "param_86",
                    "shape": [
                        16384,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 25165824,
                    "byteOffset": 5308416
                }
            ],
            "md5sum": "1471ebee434c1147a18f440f09f98e91"
        },
        {
            "dataPath": "params_shard_19.bin",
            "format": "raw-shard",
            "nbytes": 33239040,
            "records": [
                {
                    "name": "param_87",
                    "shape": [
                        16384,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 3145728,
                    "byteOffset": 0
                },
                {
                    "name": "param_88",
                    "shape": [
                        3072,
                        1024
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 12582912,
                    "byteOffset": 3145728
                },
                {
                    "name": "param_89",
                    "shape": [
                        3072,
                        256
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1572864,
                    "byteOffset": 15728640
                },
                {
                    "name": "param_90",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17301504
                },
                {
                    "name": "param_91",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17307648
                },
                {
                    "name": "param_92",
                    "shape": [
                        9216,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 14155776,
                    "byteOffset": 17313792
                },
                {
                    "name": "param_93",
                    "shape": [
                        9216,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1769472,
                    "byteOffset": 31469568
                }
            ],
            "md5sum": "0e32a9c897b51680f461e8b1008f5701"
        },
        {
            "dataPath": "params_shard_20.bin",
            "format": "raw-shard",
            "nbytes": 30474240,
            "records": [
                {
                    "name": "param_94",
                    "shape": [
                        3072,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 4718592,
                    "byteOffset": 0
                },
                {
                    "name": "param_95",
                    "shape": [
                        3072,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 589824,
                    "byteOffset": 4718592
                },
                {
                    "name": "param_96",
                    "shape": [
                        16384,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 25165824,
                    "byteOffset": 5308416
                }
            ],
            "md5sum": "e26e42c69c260b3bb2ab55694b1482fa"
        },
        {
            "dataPath": "params_shard_21.bin",
            "format": "raw-shard",
            "nbytes": 33239040,
            "records": [
                {
                    "name": "param_97",
                    "shape": [
                        16384,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 3145728,
                    "byteOffset": 0
                },
                {
                    "name": "param_98",
                    "shape": [
                        3072,
                        1024
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 12582912,
                    "byteOffset": 3145728
                },
                {
                    "name": "param_99",
                    "shape": [
                        3072,
                        256
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1572864,
                    "byteOffset": 15728640
                },
                {
                    "name": "param_100",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17301504
                },
                {
                    "name": "param_101",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17307648
                },
                {
                    "name": "param_102",
                    "shape": [
                        9216,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 14155776,
                    "byteOffset": 17313792
                },
                {
                    "name": "param_103",
                    "shape": [
                        9216,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1769472,
                    "byteOffset": 31469568
                }
            ],
            "md5sum": "ae647c3f3d6a097e5470cf69248d3a63"
        },
        {
            "dataPath": "params_shard_22.bin",
            "format": "raw-shard",
            "nbytes": 30474240,
            "records": [
                {
                    "name": "param_104",
                    "shape": [
                        3072,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 4718592,
                    "byteOffset": 0
                },
                {
                    "name": "param_105",
                    "shape": [
                        3072,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 589824,
                    "byteOffset": 4718592
                },
                {
                    "name": "param_106",
                    "shape": [
                        16384,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 25165824,
                    "byteOffset": 5308416
                }
            ],
            "md5sum": "871acb8160143ca04a5347cc79ec7885"
        },
        {
            "dataPath": "params_shard_23.bin",
            "format": "raw-shard",
            "nbytes": 33239040,
            "records": [
                {
                    "name": "param_107",
                    "shape": [
                        16384,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 3145728,
                    "byteOffset": 0
                },
                {
                    "name": "param_108",
                    "shape": [
                        3072,
                        1024
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 12582912,
                    "byteOffset": 3145728
                },
                {
                    "name": "param_109",
                    "shape": [
                        3072,
                        256
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1572864,
                    "byteOffset": 15728640
                },
                {
                    "name": "param_110",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17301504
                },
                {
                    "name": "param_111",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17307648
                },
                {
                    "name": "param_112",
                    "shape": [
                        9216,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 14155776,
                    "byteOffset": 17313792
                },
                {
                    "name": "param_113",
                    "shape": [
                        9216,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1769472,
                    "byteOffset": 31469568
                }
            ],
            "md5sum": "a98b06905334de6643492605ed0fa08f"
        },
        {
            "dataPath": "params_shard_24.bin",
            "format": "raw-shard",
            "nbytes": 30474240,
            "records": [
                {
                    "name": "param_114",
                    "shape": [
                        3072,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 4718592,
                    "byteOffset": 0
                },
                {
                    "name": "param_115",
                    "shape": [
                        3072,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 589824,
                    "byteOffset": 4718592
                },
                {
                    "name": "param_116",
                    "shape": [
                        16384,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 25165824,
                    "byteOffset": 5308416
                }
            ],
            "md5sum": "a7627fcb0b8897ad5b778e2bfb633481"
        },
        {
            "dataPath": "params_shard_25.bin",
            "format": "raw-shard",
            "nbytes": 33239040,
            "records": [
                {
                    "name": "param_117",
                    "shape": [
                        16384,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 3145728,
                    "byteOffset": 0
                },
                {
                    "name": "param_118",
                    "shape": [
                        3072,
                        1024
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 12582912,
                    "byteOffset": 3145728
                },
                {
                    "name": "param_119",
                    "shape": [
                        3072,
                        256
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1572864,
                    "byteOffset": 15728640
                },
                {
                    "name": "param_120",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17301504
                },
                {
                    "name": "param_121",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17307648
                },
                {
                    "name": "param_122",
                    "shape": [
                        9216,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 14155776,
                    "byteOffset": 17313792
                },
                {
                    "name": "param_123",
                    "shape": [
                        9216,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1769472,
                    "byteOffset": 31469568
                }
            ],
            "md5sum": "cc15fd71e7ae435df5d24ac8efc7914b"
        },
        {
            "dataPath": "params_shard_26.bin",
            "format": "raw-shard",
            "nbytes": 30474240,
            "records": [
                {
                    "name": "param_124",
                    "shape": [
                        3072,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 4718592,
                    "byteOffset": 0
                },
                {
                    "name": "param_125",
                    "shape": [
                        3072,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 589824,
                    "byteOffset": 4718592
                },
                {
                    "name": "param_126",
                    "shape": [
                        16384,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 25165824,
                    "byteOffset": 5308416
                }
            ],
            "md5sum": "871cb0c0da0bd2b0fa86f5bd027f7cd4"
        },
        {
            "dataPath": "params_shard_27.bin",
            "format": "raw-shard",
            "nbytes": 33239040,
            "records": [
                {
                    "name": "param_127",
                    "shape": [
                        16384,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 3145728,
                    "byteOffset": 0
                },
                {
                    "name": "param_128",
                    "shape": [
                        3072,
                        1024
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 12582912,
                    "byteOffset": 3145728
                },
                {
                    "name": "param_129",
                    "shape": [
                        3072,
                        256
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1572864,
                    "byteOffset": 15728640
                },
                {
                    "name": "param_130",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17301504
                },
                {
                    "name": "param_131",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17307648
                },
                {
                    "name": "param_132",
                    "shape": [
                        9216,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 14155776,
                    "byteOffset": 17313792
                },
                {
                    "name": "param_133",
                    "shape": [
                        9216,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1769472,
                    "byteOffset": 31469568
                }
            ],
            "md5sum": "1372630bf1cc3c793393c4caa9676037"
        },
        {
            "dataPath": "params_shard_28.bin",
            "format": "raw-shard",
            "nbytes": 30474240,
            "records": [
                {
                    "name": "param_134",
                    "shape": [
                        3072,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 4718592,
                    "byteOffset": 0
                },
                {
                    "name": "param_135",
                    "shape": [
                        3072,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 589824,
                    "byteOffset": 4718592
                },
                {
                    "name": "param_136",
                    "shape": [
                        16384,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 25165824,
                    "byteOffset": 5308416
                }
            ],
            "md5sum": "384bce670c71430046a8c55f604dd2be"
        },
        {
            "dataPath": "params_shard_29.bin",
            "format": "raw-shard",
            "nbytes": 33239040,
            "records": [
                {
                    "name": "param_137",
                    "shape": [
                        16384,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 3145728,
                    "byteOffset": 0
                },
                {
                    "name": "param_138",
                    "shape": [
                        3072,
                        1024
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 12582912,
                    "byteOffset": 3145728
                },
                {
                    "name": "param_139",
                    "shape": [
                        3072,
                        256
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1572864,
                    "byteOffset": 15728640
                },
                {
                    "name": "param_140",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17301504
                },
                {
                    "name": "param_141",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17307648
                },
                {
                    "name": "param_142",
                    "shape": [
                        9216,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 14155776,
                    "byteOffset": 17313792
                },
                {
                    "name": "param_143",
                    "shape": [
                        9216,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1769472,
                    "byteOffset": 31469568
                }
            ],
            "md5sum": "c88b13da2066d10551cebd5ab92a2ce0"
        },
        {
            "dataPath": "params_shard_30.bin",
            "format": "raw-shard",
            "nbytes": 30474240,
            "records": [
                {
                    "name": "param_144",
                    "shape": [
                        3072,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 4718592,
                    "byteOffset": 0
                },
                {
                    "name": "param_145",
                    "shape": [
                        3072,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 589824,
                    "byteOffset": 4718592
                },
                {
                    "name": "param_146",
                    "shape": [
                        16384,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 25165824,
                    "byteOffset": 5308416
                }
            ],
            "md5sum": "810e6f3b5ab150f4900dd1022ab0a40f"
        },
        {
            "dataPath": "params_shard_31.bin",
            "format": "raw-shard",
            "nbytes": 33239040,
            "records": [
                {
                    "name": "param_147",
                    "shape": [
                        16384,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 3145728,
                    "byteOffset": 0
                },
                {
                    "name": "param_148",
                    "shape": [
                        3072,
                        1024
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 12582912,
                    "byteOffset": 3145728
                },
                {
                    "name": "param_149",
                    "shape": [
                        3072,
                        256
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1572864,
                    "byteOffset": 15728640
                },
                {
                    "name": "param_150",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17301504
                },
                {
                    "name": "param_151",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17307648
                },
                {
                    "name": "param_152",
                    "shape": [
                        9216,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 14155776,
                    "byteOffset": 17313792
                },
                {
                    "name": "param_153",
                    "shape": [
                        9216,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1769472,
                    "byteOffset": 31469568
                }
            ],
            "md5sum": "7831b6ba62b41e173d6a10fa2505a728"
        },
        {
            "dataPath": "params_shard_32.bin",
            "format": "raw-shard",
            "nbytes": 30474240,
            "records": [
                {
                    "name": "param_154",
                    "shape": [
                        3072,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 4718592,
                    "byteOffset": 0
                },
                {
                    "name": "param_155",
                    "shape": [
                        3072,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 589824,
                    "byteOffset": 4718592
                },
                {
                    "name": "param_156",
                    "shape": [
                        16384,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 25165824,
                    "byteOffset": 5308416
                }
            ],
            "md5sum": "46f5b5049ec0bd2f0244115053cb08f1"
        },
        {
            "dataPath": "params_shard_33.bin",
            "format": "raw-shard",
            "nbytes": 33239040,
            "records": [
                {
                    "name": "param_157",
                    "shape": [
                        16384,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 3145728,
                    "byteOffset": 0
                },
                {
                    "name": "param_158",
                    "shape": [
                        3072,
                        1024
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 12582912,
                    "byteOffset": 3145728
                },
                {
                    "name": "param_159",
                    "shape": [
                        3072,
                        256
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1572864,
                    "byteOffset": 15728640
                },
                {
                    "name": "param_160",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17301504
                },
                {
                    "name": "param_161",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17307648
                },
                {
                    "name": "param_162",
                    "shape": [
                        9216,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 14155776,
                    "byteOffset": 17313792
                },
                {
                    "name": "param_163",
                    "shape": [
                        9216,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1769472,
                    "byteOffset": 31469568
                }
            ],
            "md5sum": "d35e67cff788996fcbb377a37c2988e1"
        },
        {
            "dataPath": "params_shard_34.bin",
            "format": "raw-shard",
            "nbytes": 30474240,
            "records": [
                {
                    "name": "param_164",
                    "shape": [
                        3072,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 4718592,
                    "byteOffset": 0
                },
                {
                    "name": "param_165",
                    "shape": [
                        3072,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 589824,
                    "byteOffset": 4718592
                },
                {
                    "name": "param_166",
                    "shape": [
                        16384,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 25165824,
                    "byteOffset": 5308416
                }
            ],
            "md5sum": "b773d61b73cbac065381e20361f4367d"
        },
        {
            "dataPath": "params_shard_35.bin",
            "format": "raw-shard",
            "nbytes": 33239040,
            "records": [
                {
                    "name": "param_167",
                    "shape": [
                        16384,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 3145728,
                    "byteOffset": 0
                },
                {
                    "name": "param_168",
                    "shape": [
                        3072,
                        1024
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 12582912,
                    "byteOffset": 3145728
                },
                {
                    "name": "param_169",
                    "shape": [
                        3072,
                        256
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1572864,
                    "byteOffset": 15728640
                },
                {
                    "name": "param_170",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17301504
                },
                {
                    "name": "param_171",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17307648
                },
                {
                    "name": "param_172",
                    "shape": [
                        9216,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 14155776,
                    "byteOffset": 17313792
                },
                {
                    "name": "param_173",
                    "shape": [
                        9216,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1769472,
                    "byteOffset": 31469568
                }
            ],
            "md5sum": "26e5ed8698a8e8652345ff38879bd502"
        },
        {
            "dataPath": "params_shard_36.bin",
            "format": "raw-shard",
            "nbytes": 30474240,
            "records": [
                {
                    "name": "param_174",
                    "shape": [
                        3072,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 4718592,
                    "byteOffset": 0
                },
                {
                    "name": "param_175",
                    "shape": [
                        3072,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 589824,
                    "byteOffset": 4718592
                },
                {
                    "name": "param_176",
                    "shape": [
                        16384,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 25165824,
                    "byteOffset": 5308416
                }
            ],
            "md5sum": "7c8d29c2e7398736627702453541c286"
        },
        {
            "dataPath": "params_shard_37.bin",
            "format": "raw-shard",
            "nbytes": 33239040,
            "records": [
                {
                    "name": "param_177",
                    "shape": [
                        16384,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 3145728,
                    "byteOffset": 0
                },
                {
                    "name": "param_178",
                    "shape": [
                        3072,
                        1024
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 12582912,
                    "byteOffset": 3145728
                },
                {
                    "name": "param_179",
                    "shape": [
                        3072,
                        256
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1572864,
                    "byteOffset": 15728640
                },
                {
                    "name": "param_180",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17301504
                },
                {
                    "name": "param_181",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17307648
                },
                {
                    "name": "param_182",
                    "shape": [
                        9216,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 14155776,
                    "byteOffset": 17313792
                },
                {
                    "name": "param_183",
                    "shape": [
                        9216,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1769472,
                    "byteOffset": 31469568
                }
            ],
            "md5sum": "662ba7267d5620fd903802819eeb9788"
        },
        {
            "dataPath": "params_shard_38.bin",
            "format": "raw-shard",
            "nbytes": 30474240,
            "records": [
                {
                    "name": "param_184",
                    "shape": [
                        3072,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 4718592,
                    "byteOffset": 0
                },
                {
                    "name": "param_185",
                    "shape": [
                        3072,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 589824,
                    "byteOffset": 4718592
                },
                {
                    "name": "param_186",
                    "shape": [
                        16384,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 25165824,
                    "byteOffset": 5308416
                }
            ],
            "md5sum": "7fca258deddd082906005d8c6b594562"
        },
        {
            "dataPath": "params_shard_39.bin",
            "format": "raw-shard",
            "nbytes": 33239040,
            "records": [
                {
                    "name": "param_187",
                    "shape": [
                        16384,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 3145728,
                    "byteOffset": 0
                },
                {
                    "name": "param_188",
                    "shape": [
                        3072,
                        1024
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 12582912,
                    "byteOffset": 3145728
                },
                {
                    "name": "param_189",
                    "shape": [
                        3072,
                        256
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1572864,
                    "byteOffset": 15728640
                },
                {
                    "name": "param_190",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17301504
                },
                {
                    "name": "param_191",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17307648
                },
                {
                    "name": "param_192",
                    "shape": [
                        9216,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 14155776,
                    "byteOffset": 17313792
                },
                {
                    "name": "param_193",
                    "shape": [
                        9216,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1769472,
                    "byteOffset": 31469568
                }
            ],
            "md5sum": "5bf417a7fac3087ed714131189075816"
        },
        {
            "dataPath": "params_shard_40.bin",
            "format": "raw-shard",
            "nbytes": 30474240,
            "records": [
                {
                    "name": "param_194",
                    "shape": [
                        3072,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 4718592,
                    "byteOffset": 0
                },
                {
                    "name": "param_195",
                    "shape": [
                        3072,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 589824,
                    "byteOffset": 4718592
                },
                {
                    "name": "param_196",
                    "shape": [
                        16384,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 25165824,
                    "byteOffset": 5308416
                }
            ],
            "md5sum": "c82817e7f5c165463d841e9a9c842997"
        },
        {
            "dataPath": "params_shard_41.bin",
            "format": "raw-shard",
            "nbytes": 33239040,
            "records": [
                {
                    "name": "param_197",
                    "shape": [
                        16384,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 3145728,
                    "byteOffset": 0
                },
                {
                    "name": "param_198",
                    "shape": [
                        3072,
                        1024
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 12582912,
                    "byteOffset": 3145728
                },
                {
                    "name": "param_199",
                    "shape": [
                        3072,
                        256
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1572864,
                    "byteOffset": 15728640
                },
                {
                    "name": "param_200",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17301504
                },
                {
                    "name": "param_201",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17307648
                },
                {
                    "name": "param_202",
                    "shape": [
                        9216,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 14155776,
                    "byteOffset": 17313792
                },
                {
                    "name": "param_203",
                    "shape": [
                        9216,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1769472,
                    "byteOffset": 31469568
                }
            ],
            "md5sum": "b05284a92d345b891b61d066f50d565b"
        },
        {
            "dataPath": "params_shard_42.bin",
            "format": "raw-shard",
            "nbytes": 30474240,
            "records": [
                {
                    "name": "param_204",
                    "shape": [
                        3072,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 4718592,
                    "byteOffset": 0
                },
                {
                    "name": "param_205",
                    "shape": [
                        3072,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 589824,
                    "byteOffset": 4718592
                },
                {
                    "name": "param_206",
                    "shape": [
                        16384,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 25165824,
                    "byteOffset": 5308416
                }
            ],
            "md5sum": "bfd684dbf1519a513ace0f048c2a39be"
        },
        {
            "dataPath": "params_shard_43.bin",
            "format": "raw-shard",
            "nbytes": 33239040,
            "records": [
                {
                    "name": "param_207",
                    "shape": [
                        16384,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 3145728,
                    "byteOffset": 0
                },
                {
                    "name": "param_208",
                    "shape": [
                        3072,
                        1024
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 12582912,
                    "byteOffset": 3145728
                },
                {
                    "name": "param_209",
                    "shape": [
                        3072,
                        256
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1572864,
                    "byteOffset": 15728640
                },
                {
                    "name": "param_210",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17301504
                },
                {
                    "name": "param_211",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17307648
                },
                {
                    "name": "param_212",
                    "shape": [
                        9216,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 14155776,
                    "byteOffset": 17313792
                },
                {
                    "name": "param_213",
                    "shape": [
                        9216,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1769472,
                    "byteOffset": 31469568
                }
            ],
            "md5sum": "815087a3375fae098120207cf73606b6"
        },
        {
            "dataPath": "params_shard_44.bin",
            "format": "raw-shard",
            "nbytes": 30474240,
            "records": [
                {
                    "name": "param_214",
                    "shape": [
                        3072,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 4718592,
                    "byteOffset": 0
                },
                {
                    "name": "param_215",
                    "shape": [
                        3072,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 589824,
                    "byteOffset": 4718592
                },
                {
                    "name": "param_216",
                    "shape": [
                        16384,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 25165824,
                    "byteOffset": 5308416
                }
            ],
            "md5sum": "5065ca3fd598a6582c10353f8a48f235"
        },
        {
            "dataPath": "params_shard_45.bin",
            "format": "raw-shard",
            "nbytes": 33239040,
            "records": [
                {
                    "name": "param_217",
                    "shape": [
                        16384,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 3145728,
                    "byteOffset": 0
                },
                {
                    "name": "param_218",
                    "shape": [
                        3072,
                        1024
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 12582912,
                    "byteOffset": 3145728
                },
                {
                    "name": "param_219",
                    "shape": [
                        3072,
                        256
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1572864,
                    "byteOffset": 15728640
                },
                {
                    "name": "param_220",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17301504
                },
                {
                    "name": "param_221",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17307648
                },
                {
                    "name": "param_222",
                    "shape": [
                        9216,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 14155776,
                    "byteOffset": 17313792
                },
                {
                    "name": "param_223",
                    "shape": [
                        9216,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1769472,
                    "byteOffset": 31469568
                }
            ],
            "md5sum": "bdb40b4e92059de1100895fd5336fb7c"
        },
        {
            "dataPath": "params_shard_46.bin",
            "format": "raw-shard",
            "nbytes": 30474240,
            "records": [
                {
                    "name": "param_224",
                    "shape": [
                        3072,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 4718592,
                    "byteOffset": 0
                },
                {
                    "name": "param_225",
                    "shape": [
                        3072,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 589824,
                    "byteOffset": 4718592
                },
                {
                    "name": "param_226",
                    "shape": [
                        16384,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 25165824,
                    "byteOffset": 5308416
                }
            ],
            "md5sum": "7a8e6878b7e620871f7b65301ec72550"
        },
        {
            "dataPath": "params_shard_47.bin",
            "format": "raw-shard",
            "nbytes": 33239040,
            "records": [
                {
                    "name": "param_227",
                    "shape": [
                        16384,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 3145728,
                    "byteOffset": 0
                },
                {
                    "name": "param_228",
                    "shape": [
                        3072,
                        1024
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 12582912,
                    "byteOffset": 3145728
                },
                {
                    "name": "param_229",
                    "shape": [
                        3072,
                        256
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1572864,
                    "byteOffset": 15728640
                },
                {
                    "name": "param_230",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17301504
                },
                {
                    "name": "param_231",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17307648
                },
                {
                    "name": "param_232",
                    "shape": [
                        9216,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 14155776,
                    "byteOffset": 17313792
                },
                {
                    "name": "param_233",
                    "shape": [
                        9216,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1769472,
                    "byteOffset": 31469568
                }
            ],
            "md5sum": "c4867c41c853d1d3c30bc04aa840956b"
        },
        {
            "dataPath": "params_shard_48.bin",
            "format": "raw-shard",
            "nbytes": 30474240,
            "records": [
                {
                    "name": "param_234",
                    "shape": [
                        3072,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 4718592,
                    "byteOffset": 0
                },
                {
                    "name": "param_235",
                    "shape": [
                        3072,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 589824,
                    "byteOffset": 4718592
                },
                {
                    "name": "param_236",
                    "shape": [
                        16384,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 25165824,
                    "byteOffset": 5308416
                }
            ],
            "md5sum": "a80e5c1d5f2df058f023a47d703174a3"
        },
        {
            "dataPath": "params_shard_49.bin",
            "format": "raw-shard",
            "nbytes": 75595776,
            "records": [
                {
                    "name": "param_243",
                    "shape": [
                        49216,
                        384
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 75595776,
                    "byteOffset": 0
                }
            ],
            "md5sum": "3fd26837d3b6d618b756bb755cda1b4e"
        },
        {
            "dataPath": "params_shard_50.bin",
            "format": "raw-shard",
            "nbytes": 27817984,
            "records": [
                {
                    "name": "param_237",
                    "shape": [
                        16384,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 3145728,
                    "byteOffset": 0
                },
                {
                    "name": "param_238",
                    "shape": [
                        3072,
                        1024
                    ],
                    "dtype": "uint32",
                    "format": "raw",
                    "nbytes": 12582912,
                    "byteOffset": 3145728
                },
                {
                    "name": "param_239",
                    "shape": [
                        3072,
                        256
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 1572864,
                    "byteOffset": 15728640
                },
                {
                    "name": "param_240",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17301504
                },
                {
                    "name": "param_241",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17307648
                },
                {
                    "name": "param_242",
                    "shape": [
                        3072
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 6144,
                    "byteOffset": 17313792
                },
                {
                    "name": "param_244",
                    "shape": [
                        49216,
                        96
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 9449472,
                    "byteOffset": 17319936
                },
                {
                    "name": "param_245",
                    "shape": [
                        2048,
                        128
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 524288,
                    "byteOffset": 26769408
                },
                {
                    "name": "param_246",
                    "shape": [
                        2048,
                        128
                    ],
                    "dtype": "float16",
                    "format": "raw",
                    "nbytes": 524288,
                    "byteOffset": 27293696
                }
            ],
            "md5sum": "5703a84f0113a93f65e213357ebc5125"
        }
    ]
}