die interessanteste forschung zu llms kommt regelmäßig von anthropic und ich denke, das liegt daran, dass sie die einzigen sind, die verstehen, dass llms im grunde semantik-navigations-maschinenen sind und dass die spannenden fragen darin liegen, den semantikraum selbst und die strategien seiner navigation zu untersuchen.
hier rekonstruieren sie die "reasoning pfade" von claude beim beantworten von fragen und beim verfassen von gedichten.
https://transformer-circuits.pub/2025/attribution-graphs/biology.html