Video yükleniyor...

Video Yüklenemedi

Ana Sayfaya Dön

introducing rd-signal-2: a frontier classification model that is 1600x cheaper than GPT 5.6 Sol. free to try in Raindrop, and available via a new API for training/hosting custom classifiers with Zero Data Retention.

162,078 görüntüleme • 1 ay önce •via X (Twitter)

57 Yorum

ben hylak profil fotoğrafı
ben hylak1 ay önce

read more at: rd-signal-2 balances precision/recall at a price that is still 280x lower than GPT-5.6 Luna xhigh. it powers signals and real-time issue detection in raindrop, allowing our customers to detect and accurately track sparse behaviors.

ben hylak profil fotoğrafı
ben hylak1 ay önce

most LLM observability providers require customers to sample a very small % of traffic (and pay for the judges!) but agent failures are often rare. it's common for a behavioral anomaly to be < 1% of traffic. sampling can completely hide the problem.

ben hylak profil fotoğrafı
ben hylak1 ay önce

you can say "the agent saying it transferred to a human, but didn't call the tool" or "the user complaining that web search results were stale" @raindrop_ai signals will write the code, assemble the context, train a custom classification head for your task, and self-improve.

ben hylak profil fotoğrafı
ben hylak1 ay önce

rd-signal-2 also powers @raindrop_ai's real-time issue detection. many emerging failures are detected in under 5 minutes. because they share the same foundation, any raindrop issue can be instantly converted to a signal, compared in experiments, and more.

ben hylak profil fotoğrafı
ben hylak1 ay önce

rd-signal-2 already processes around 20 billion traces a month. members of the @raindrop_ai team: - invented fraud transformer models at robinhood - built the first recommender system at pinterest - have built agents that have millions of customers - and more dm me to join

ben hylak profil fotoğrafı
ben hylak1 ay önce

stop paying for judges. starting using signals. try the agent observability platform trusted by vercel, speak, and the fortune 100. read more at

eric provencher profil fotoğrafı
eric provencher1 ay önce

@raindrop_ai Damn your motion design is on point! Looks awesome

ben hylak profil fotoğrafı
ben hylak1 ay önce

@raindrop_ai thank you!

gian profil fotoğrafı
gian1 ay önce

@raindrop_ai sweeet, great job! adaptive online observability is basically table stakes at this point

ben hylak profil fotoğrafı
ben hylak1 ay önce

@raindrop_ai we agree.

Soleio profil fotoğrafı
Soleio1 ay önce

@raindrop_ai “Stop paying for judges. Start using signals.” :chefs_kiss:

Eduard Faus Gil profil fotoğrafı
Eduard Faus Gil1 ay önce

@raindrop_ai Typical raindrop W so glad I told @orchid_hq to use you guys

Logan Ford profil fotoğrafı
Logan Ford1 ay önce

@raindrop_ai very excited to try this out!

Dev profil fotoğrafı
Dev1 ay önce

@raindrop_ai hey @alialobai1 @hegargarcia 👀

ben hylak profil fotoğrafı
ben hylak1 ay önce

@raindrop_ai @alialobai1 @hegargarcia would love your feedback :)

bani profil fotoğrafı
bani1 ay önce

@raindrop_ai huge

ben hylak profil fotoğrafı
ben hylak1 ay önce

@raindrop_ai thanks bani! :)

Nizzy profil fotoğrafı
Nizzy1 ay önce

@raindrop_ai woahhh

ben hylak profil fotoğrafı
ben hylak1 ay önce

@raindrop_ai give it a try!

Sam Hogan 🇺🇸 profil fotoğrafı
Sam Hogan 🇺🇸1 ay önce

@raindrop_ai very cool

Christian profil fotoğrafı
Christian1 ay önce

@raindrop_ai Very interesting 🤔🤔🤔

Eric profil fotoğrafı
Eric1 ay önce

@raindrop_ai well shit that sure is a lot cheaper

ben hylak profil fotoğrafı
ben hylak1 ay önce

@raindrop_ai indeed

Jackson Grove profil fotoğrafı
Jackson Grove1 ay önce

@raindrop_ai this is huge

ben hylak profil fotoğrafı
ben hylak1 ay önce

@raindrop_ai thank you - please give us any/all feedback :)

Jackson Grove profil fotoğrafı
Jackson Grove1 ay önce

@raindrop_ai will do excited for this :)

Rohanth Marem profil fotoğrafı
Rohanth Marem1 ay önce

@raindrop_ai interested how this is implemented, really cool

Jeff Barg profil fotoğrafı
Jeff Barg1 ay önce

@raindrop_ai Very cool!

ben hylak profil fotoğrafı
ben hylak1 ay önce

@raindrop_ai thanks jeff!

any profil fotoğrafı
any1 ay önce

@raindrop_ai thats crazy but nobody uses frontier models for classifiers anyway?

ben hylak profil fotoğrafı
ben hylak1 ay önce

@raindrop_ai yes, so then you get very bad precision/recall. you can also see a comparison to 5.6 Luna (which is a good classifier)

Alim profil fotoğrafı
Alim1 ay önce

@raindrop_ai dang this is good

ben hylak profil fotoğrafı
ben hylak1 ay önce

@raindrop_ai thanks friend!

ray arayilakath ‎.߆ profil fotoğrafı
ray arayilakath ‎.߆1 ay önce

@rsdgpt @raindrop_ai smart play!

Nick profil fotoğrafı
Nick1 ay önce

@raindrop_ai very impressive!

Jeremy profil fotoğrafı
Jeremy1 ay önce

@raindrop_ai Wait. This. FUCKING BANGS......

ben hylak profil fotoğrafı
ben hylak1 ay önce

@raindrop_ai thank you! which part resonated the most ooc

Aggroed Lighthacker- Peace, Prosperity, & Freedom profil fotoğrafı
Aggroed Lighthacker- Peace, Prosperity, & Freedom1 ay önce

@raindrop_ai @Teknium @NousResearch @yeahfortommy this seems promising

Adhyaay Karnwal profil fotoğrafı
Adhyaay Karnwal1 ay önce

@raindrop_ai sick dude

daksh profil fotoğrafı
daksh1 ay önce

@raindrop_ai whoa this wasn’t on my bingo card but so excited and happy for ben :)

jacob profil fotoğrafı
jacob1 ay önce

@raindrop_ai oo this is cool

ras profil fotoğrafı
ras1 ay önce

@raindrop_ai oh my god i have a very good use case for this if feasible

ben hylak profil fotoğrafı
ben hylak1 ay önce

@raindrop_ai dm me!

René Sultan profil fotoğrafı
René Sultan1 ay önce

@raindrop_ai oss?

ben hylak profil fotoğrafı
ben hylak1 ay önce

@raindrop_ai not this time! we do have plenty of other open source work though.

Prabal profil fotoğrafı
Prabal1 ay önce

@raindrop_ai ngl my main question is how did you create the video. great job - looks amazing.

Ty profil fotoğrafı
Ty1 ay önce

@sjwhitmore @raindrop_ai Fire

Jason Cameron profil fotoğrafı
Jason Cameron1 ay önce

@raindrop_ai Super cool! Thanks for releasing it publicly

Manveen Koticha profil fotoğrafı
Manveen Koticha1 ay önce

@raindrop_ai Cool stuff! @raindrop_ai team!!

toolshed profil fotoğrafı
toolshed1 ay önce

@raindrop_ai 1600x cheaper only matters if the error rate holds. A classifier two points worse costs more in human review time than it ever saves in tokens, at any price per call. What does the confusion matrix look like against Sol on the same eval set?

Reid Christian profil fotoğrafı
Reid Christian1 ay önce

@raindrop_ai Whoa

ben hylak profil fotoğrafı
ben hylak1 ay önce

@raindrop_ai agreed!

pidš profil fotoğrafı
pidš1 ay önce

@raindrop_ai I see that your Triage boy is free to try, saw someone made a token with royalities to your github. So you can claim the trading fees from it, if you want. GL chad

Clipur.com profil fotoğrafı
Clipur.com1 ay önce

@raindrop_ai cheap inference meta

Dan McAteer profil fotoğrafı
Dan McAteer1 ay önce

@raindrop_ai 1600x cheaper? Didn't even know a price could go that low.

ben hylak profil fotoğrafı
ben hylak1 ay önce

@raindrop_ai constraining the problem to binary classification helps re: cost a lot.

Dan McAteer profil fotoğrafı
Dan McAteer1 ay önce

@raindrop_ai Makes sense to me.

Benzer Videolar