Paweł Dubiel Tech Blog

Map the garden

Knowledge Graph

The original Quartz-style map of linked notes, rebuilt as a sleek interactive graph from the notebook's wikilinks and internal references.

Linked thinking

Knowledge Graph

315 notes605 links292 connected
Scroll to zoom · drag to move · rotate with controls
AIModele LLM42ah⁝ Czy możemy zbudować teorię fizyki procesu uczenia, która przewiduje makroskopowe zachowania sieci?42af⁝ AI HarnessTransformerLearning rate to za mało. Liczy się ELRSelf-attention42a5b1⁝ TokenChinese AI Labs100⁝ Software EngineeringGłosowanie kłamie. Niezgoda zwykle nieLLMPrefix Sliding. Myślenie może być długie, pamięć nie27⁝ BooksAgent sam przepisał malware do zaufanej bibliotekiBłędy kwantyzacji częściowo znoszą się między warstwami modeluRobot wyszedł poza planszę. Benchmark uznał to za sukces27f⁝ AMD Ryzen 9 9950X3D2Idempotency KeysMulti-Head AttentionSoftware engineering in AI era new (old) paradigmTen sam ranking daje inne decyzje po zmianie kolejnościZachowywanie stanu w testach GPT-6 Astra na ARC-AGI-3Circuit Condensation skupia obliczenie w mniejszym grafie przyczynowymGoogle wydało Gemini 3JavaWeryfikacja kodu generowanego przez agentów wymaga niezależnych kryteriówPosition-wise Feed-Forward NetworkPositional EncodingToken Embedding20⁝ PhilosophyAgentMachineDistributed SystemEveryone will say that 2025 is the year of AI agents. But I think it's far from readyKV-cache scaling problem in LLM inferenceLayer NormalizationNVIDIAOczekiwany wynik testu musi być niezależny od kodu agentaOpenAI wydało GPT-6 AstraResidual connectionRMSNormScaled Dot-Product AttentionTest-time scaling100c1a⁝ Idempotency Keys - DRAFT42ag⁝ Trendslop AIAnthropic wydało Claude Opus 4.7APICausal MaskingConscious AGIConscious AGI And Anthropic PrincipleCross-attentionElixir jako system operacyjny dla agentów. Przemyślenia z budowy AgentMachineOpenAI wydało GPT-5.1OpenAI wydało GPT-5.1-Codex-MaxUnderstanding the Attention Mechanism in Transformer ModelsWeight decay