© 2026 Hashnode
Czym jest tokenizer? Wyobraź sobie, że piszesz list do przyjaciela, ale zamiast słów używasz małych, kolorowych klocków. Każdy klocek reprezentuje literę, słowo, a może nawet całe zdanie. Żeby list miał sens, musisz te klocki ułożyć w odpowiedniej ko...

When I started the NanoPhi project, I had clear goals Using Phi-like data, textbooks Using a Model in the 300-400m parameter range Testing whether Censorship really affected a model For My model, I chose GPT-2 Medium, a 350m Parameter model, whi...
