Philip Bontrager
@pbontrager.bsky.social did:plc:bcxxijivzm4kcdzurtfuhpva
AI researcher & engineer @Meta working on @PyTorch torchtune in NYC; interests in generative models, RL, and evolutionary strategies 💻 https://github.com/pbontrager 📝 https://tinyurl.com/philips-papers
Bluesky’a katılma tarihi:
- Takipçi
- 800
- Takip edilen
- 963
- Post
- 181
- Sıralamaya girdiği gün
- 0
Özet
Philip Bontrager (@pbontrager.bsky.social), 20 Kasım 2024 tarihinde katılan bir Bluesky kullanıcısı. 800 takipçisi var, 963 hesabı takip ediyor ve 181 post paylaştı.
Sıralama geçmişi
Bu hesabın postlarının Debya günlük listesine girdiği en iyi günler.
Bu hesap henüz günlük sıralamaya girmedi.
Son beğendiği postlar
Bluesky ağındaki herkese açık beğeniler.
Qwen 3.5 Small Model Series just dropped on @hf.co 🔥 huggingface.co/collections/... ✨ 0.8B/2B/4B/9B ✨ Apache2.0 ✨ 262K→1M token context
Postu gösterI think the BabyLM Challenge is really interesting, but also feel that there is something fundamentally ill-posed about how it maps onto the challenge facing human children. It's true that babies only get a relatively limited amount of linguistic experience, but...
Postu göster"i should write a full blog post at some point ... but i'm lazy, and the sun is too good outside!" real
Postu gösterWe created SuperBPE🚀, a *superword* tokenizer that includes tokens spanning multiple words. When pretraining at 8B scale, SuperBPE models consistently outperform the BPE baseline on 30 downstream tasks (+8% MMLU), while also being 27% more efficient at inference time.🧵
Postu gösterdrscotthawley.github.io/blog/posts/F... from @drscotthawley.bsky.social
Postu göster
Blokladığı hesaplar
Bluesky’da bloklar herkese açık kayıtlardır.