Fetch huge data from MySQL in java

как вариант написать программу на C которая через mysql C API будет небольшими кусками читать данные и передавать их через Java Native Interface (JNI) в жабу. использую такое, но c postgresql.

а как насчет костыля используя конструкцию LIMIT?

:))))))))))))))))))))))

1:
where id between a and b
a = b
b += delta
goto 1

Да, это намного лучше, чем LIMIT. С последним на чтении последних кусоков данных в огромных выборках будут феерические тормоза.

А нету функции забирать не всё сразу а постепенно по мере отдачи данных мусклем? На уровне mysql такое есть и в питоне оно поддерживается(fetchmany). Думаю и в жабе есть подобные функции.

Есть как бы курсоры и даже для этого, но вроде их нет в mysql

Они реализуются либами. В питоне mysqldb поддерживает курсоры. В доках сказано как это реализовано.

Сам этим никогда из жабы не пользовался, но вот тут пишуть:

http://dev.mysql.com/doc/refman/5.0/en/connector-j-reference-implementation-n...

"If you are working with ResultSets that have a large number of rows or large values, and can not allocate heap space in your JVM for the memory required, you can tell the driver to stream the results back one row at a time.", blah blah blah

может это поможет?