Philip Bontrager
@pbontrager.bsky.social did:plc:bcxxijivzm4kcdzurtfuhpva
AI researcher & engineer @Meta working on @PyTorch torchtune in NYC; interests in generative models, RL, and evolutionary strategies 💻 https://github.com/pbontrager 📝 https://tinyurl.com/philips-papers
Bei Bluesky seit
- Follower
- 800
- Folgt
- 963
- Posts
- 181
- Tage in Ranglisten
- 0
Zusammenfassung
Philip Bontrager (@pbontrager.bsky.social) ist seit 20 November 2024 auf Bluesky. Das Konto hat 800 Follower, folgt 963 Konten und hat 181 Posts veröffentlicht.
Ranglisten-Platzierungen
Die besten Tage, an denen Posts dieses Kontos in Debyas Tagesliste kamen.
Dieses Konto war noch in keiner Tagesrangliste.
Zuletzt gelikte Posts
Öffentliche Likes aus dem Bluesky-Netzwerk.
Qwen 3.5 Small Model Series just dropped on @hf.co 🔥 huggingface.co/collections/... ✨ 0.8B/2B/4B/9B ✨ Apache2.0 ✨ 262K→1M token context
Post anzeigenI think the BabyLM Challenge is really interesting, but also feel that there is something fundamentally ill-posed about how it maps onto the challenge facing human children. It's true that babies only get a relatively limited amount of linguistic experience, but...
Post anzeigen"i should write a full blog post at some point ... but i'm lazy, and the sun is too good outside!" real
Post anzeigenWe created SuperBPE🚀, a *superword* tokenizer that includes tokens spanning multiple words. When pretraining at 8B scale, SuperBPE models consistently outperform the BPE baseline on 30 downstream tasks (+8% MMLU), while also being 27% more efficient at inference time.🧵
Post anzeigendrscotthawley.github.io/blog/posts/F... from @drscotthawley.bsky.social
Post anzeigen
Blockierte Konten
Blockierungen sind auf Bluesky öffentlich.