yo,
Wenn ich dich richtig versteh müßte es so gehen:
SELECT k.*, b.*
FROM kategorie k LEFT JOIN beitrag b ON b.kategorieid = k.id
GROUP BY b.kategorieid
ORDER BY b.kategorieid, lastmodification DESC
die query ist vom inhaltlichen mal abgesehen schon syntaktisch falsch. es ist das alte leid bei mysql mit GROUP BY. lies noch mal die doku und du wirst sehen, dass dies auch ohne fehlermeldung fehlerhaft ist.
Ilja