split, cat

в вебе json, который хранит данные частей откуда потом splt читает, вроде юзают.

split, cat

не умеют читать с заданного места. cat разве что при склеивании cat in >> out

не умеют читать с заданного места

Тайлом обреж:

tail -c 24M you.file | split -b 8M - test

не умеют читать с заданного места

Если разбивка нужна «по содержимому», см. csplit. Например:

mkdir po; csplit -n 4 -f po/obj. file.pdf /obj/ /endobj/1 '{*}'

Вот и выросло поколение

которое не знает что такое многотомные архивы. Во времена дискеток этим занимались примерно все, кому хоть что-то надо было перенести с одного компа на другой.

Покажит пожалуйста, как сделать многотомный архив тома которого будут иметь разный размер.

Покажит пожалуйста, как сделать многотомный архив тома которого будут иметь разный размер.

ты каким архиватором предпочитаешь пользоваться? образ уже готовый или тебе прямо сейчас его надо снять?

Написал скриптег, размер пересобранного контейнера совпадает но не совпадает контрольная сумма.

#!/bin/bash

rm -f /tmp/*\.part > /dev/null 2>&1

fileSize=`du -b $1  | awk '{print $1}'`
echo "Before"
echo $fileSize
md5sum $1
remain=$fileSize
minSize=500000
maxSize=1000000
sizesP=()
sum=0
while true
do
        sizePart=`shuf -i $minSize-$maxSize -n 1`
        if [ $sizePart -gt $remain ]; then
                sizesP+=("$remain")
                for sizeP in ${sizesP[@]}
                do
                        #echo $sizeP
                        dd if=$1 of=$sizeP.part skip=$sum iflag=skip_bytes > /dev/null 2>&1
                        sum=$(($sum+$sizeP))
                done
                echo $sum
                break
        else
                remain=$(($remain-$sizePart))
                sizesP+=("$sizePart")
        fi
done

# Клеим
if [ -d /tmp/kk/ ]; then
        if [ -f /tmp/kk/test ]; then
                rm -f /tmp/kk/test
        else
                sleep 0
        fi
else
        mkdir /tmp/kk/
fi

for sizeP in ${sizesP[@]}
do
        dd if=$sizeP.part of=/tmp/kk/test conv=notrunc > /dev/null 2>&1
done
echo "After"
du -b /tmp/kk/test  | awk '{print $1}'
md5sum /tmp/kk/test
exit 0

Before
10485760
e6fe5f7625d3423606915be815d80c73  /tmp/test
10485760
After
10485760
>6d0ccdd49e3359ceec5f632141dd79e5  /tmp/kk/test

Где косяк? Спойлер не получился.

Например tar.

сам написал и не знаешь? где то параметров не хватает скорее всего

Разный размер? Вот вообще разный? Можно так:

< файл tail -c +1 | head -c размер1 > фрагмент1
< файл tail -c +$((1+размер1)) | head -c размер2 > фрагмент2
< файл tail -c +$((1+размер1+размер2)) | head -c размер3 > фрагмент3

Можно то же самое сделать на dd.

Сборка банальным cat фрагмент*.

М-ду размерами зависимость видна.

Сам, ясно дело где-то, скорее всего в вызовах dd.

М-ду размерами зависимость видна

Какая?

Просто обычно людям достаточно split.

dd … любит ОЗУ, во всяком случае при чтении из urandom.

Это неправда.

Какая? Невнимательно смотрел.

Т.е. ты не знаешь что тебе нужно?

Это неправда.

а где он тогда работает если его ctrl+C в терминале вырубить или это не про то я?

Я тебя нераспарсил. Разупорись.

распарсил, не про то прст я соласен,но вопрос есть только уловить не могу. наверное насколько эфективно использование рам в дд, эталонное?

Починил.

                        dd if=$1 of=$sizeP.part skip=$sum iflag=skip_bytes > /dev/null 2>&1

меняем на

                        dd if=$1 of=$sizeP.part skip=$sum > /dev/null 2>&1

Т.е. ты не знаешь что тебе нужно?

Я разве об этом писал где-то? А так, денег много и паспортов.

Починил.

отметь решеннной)

отметь решеннной) Как?

в теле поста пункт есть)

темы а не поста!)

Не починил, на маленьких файлах, до 500М контрольные суммы сходятся, на больших нет.

https://github.com/madsen/vbindiff

vbindiff old.file new.file

[ENTER]
[ENTER]
[ENTER]
...

https://superuser.com/questions/290986/how-to-create-tar-archive-split-into-or-spanning-multiple-files

на маленьких файлах, до 500М контрольные суммы сходятся, на больших нет

ничего себе, вот это поворот)

наверное какие то ограничители снять надо в параметрах.

Может. А может проблема в железе. Но на сегодня хватит.

проблема в железе.

согласен поворотов достаточно)