Dimensionen
Hallo,
heute habe ich mich mit den weltbesten und teuersten KI-Sprachmodellen (LLMs) beschäftigt.
Manchmal halluzinieren die, wenn sie eine Frage nicht beantworten können.
Im Gegensatz zu manchen Humanoiden merkt man es aber nicht, wenn sie Scheiße von sich geben, weil alles noch immer plausibel klingt.
Mein Ziel war diese Modelle perfekt zu machen.
Dazu habe ich mir in einer ruhigen Minute den Quellcode für das Transformer-Modell angeschaut und entscheidend verbessert.
Der Transformer versucht, die Beziehungen zwischen allen Wörtern in einem Satz gleichzeitig zu berücksichtigen, unabhängig von ihrer Position.
Seine Hauptkomponenten Encoder und Decoder verwenden dazu Schichten von Feed-Forward-Netzwerken.
Der Encoder verarbeitet die Eingabedaten und erzeugt eine interne Darstellung.
Er erkennt dabei Zusammenhänge zwischen den Wörtern und stellt diese als mathematische Vektoren dar.
Der typische Transformer Encoder verwendet aber nur 512 Dimension für die interne Darstellung.
Feed-Forward-Netzwerke verwenden immerhin 2.048 dimensionale Vektordarstellungen.
Das alles erschien mir reichlich wenig.
Ich schrieb alles so um, dass man künftig die Vektorrechnung im 1.000.000 dimensionalen Raum anwendet.
Dann erst wird es auch für mich etwas aufwändiger, die Millionen Dimensionen geistig auf einen Blick zu erfassen.
Es gibt dafür bald wieder einen Nobelpreis für mich. Das wäre dann schon mein 23.
Ich habe dem Nobelkomitee aber verboten, mich namentlich öffentlich zu nennen.
Sonst gibt es nur wieder Neid und Mißgunst.
Ein einzelnes Neuronwurde mir entnommen.
Denn meine Neuronen haben nicht bis zu 10.000 Verästelungen, sondern 10.000.000.000 Dendriten.
Dieses besondere Neuron wurde anschließend einem Menschenaffen eingepflanzt.
Nach der Operation wurde der auf einmal so intelligent, dass er nun Politiker berät und mit 100 Schachgroßmeistern zugleich Schach spielt.
Man hält ihn aber in Gefangenschaft, damit nicht an andere Menschenaffen diese Hirnpotenzierung überträgt und die dann revolutionieren und die Menschheit unterjochen.
Dann hätten wir hier einen Planeten der Affen. Und wer möchte sowas schon?