Nos han capado la IA corporativa en el curro +facturones

Sgto_Limon
Inmigrante
#1
Por el tipo de empresa y datos que tratamos tenemos una IA corporativa con varios modelos punteros corriendo en AWS y las APIs externas chapadas.

Pues hemos pasado de un correo hace más de un año “echándonos bronca” por no utilizar suficientemente la IA a tener esta semana un medidor que nos indica los créditos que nos quedan para cada usuario..

Va a estar gracioso para particulares y especialmente empresas cuando Anthropic, OpenAI, Google y Cía. quieran cobrar lo que cuesta e incluso sacar beneficio.

En un par de años máximo preveo otro boom de contrataciones, probablemente antes.
TurboCuñao
ForoCoches: Usuario
#2
Demasiados empleados descubrieron que podían hacer el trabajo de ocho horas en dos. Había que restaurar el sufrimiento tradicional.
Sgto_Limon
Inmigrante
#3
Cita de TurboCuñao
Demasiados empleados descubrieron que podían hacer el trabajo de ocho horas en dos. Había que restaurar el sufrimiento tradicional.
Además de eso creo que la gente no es consciente del gasto que hace y se han vuelto vagos. En un proyecto mediano y algo complejo se ponen a preguntar como funcionan cachos grandes, funcionalidades enteras.. y ahí la IA se vuelve loca consultando decenas de archivos y cientos o miles de líneas de código y quema tokens que da gusto…
anacleto_007
ForoCoches: es mi blog
#4
A mi me la suda, tengo una libreta y un boli para apuntar todo
DuendeIrlandes
ForoCoches: Miembro
#5
Mucho empleado ocioso haciendo videos de Ramón el vanidoso y zp saludandose
N€xus
Tyrell Corporation
#6
Me tokans el penens.
xueps
Usuario Verificado (v)
#7
Ni de coña.


IA Local. No veas la de IA local que estoy implantando con exito.


Tokens Ilimitados en una infraestructura.


MP A todas las empresas (y no empresas) que lo necesiten. En tu casa en unos días plug and play.


Hoy sin ir mas lejos, lo que hubiese gastado en API (llevo solo hoy 10M de tokens de entrada, y 333k generados, unos 10$ de gasto ahorrado si tenemos en cuenta que el modelo es similar a Sonnet 4.5)
haker55AS
STILL HERE
#8
Empieza a terminarse la era dorada donde las empresas aceptan estar a pérdidas para captar clientes y estamos entrando en la fase en la que ya empiezan a necesitar ganar dinero de verdad.

Por tener una comparación reciente recordemos cuando podías comprar el Xbox game pass por 1€ y cuando vieron que no había más clientes a los que llegar empezar a subir el precio a saco.
Elrner
ForoCoches: Miembro
#9
Lo siguiente es encontrar el equilibrio entre costes de IA y coste de empleados.

¿Que sale más caro 10 empleados con cuentas de chatgpt básicas o 3 con tokens a full?


Yo obviamente se la respuesta.
EvFlow
ForoCoches: Miembro
#10
Pe, pe... Si nos van a quitar el trabajo a todos...
sirp
ForoCoches: Miembro
#11
y esperate que suban los precios de los tokes, que estan de oferta para captar clientes........
perkys
******* Espan Flod Trol
#12
Azelas
ForoCoches: Usuario
#13
Cita de Sgto_Limon
Por el tipo de empresa y datos que tratamos tenemos una IA corporativa con varios modelos punteros corriendo en AWS y las APIs externas chapadas.

Pues hemos pasado de un correo hace más de un año “echándonos bronca” por no utilizar suficientemente la IA a tener esta semana un medidor que nos indica los créditos que nos quedan para cada usuario..

Va a estar gracioso para particulares y especialmente empresas cuando Anthropic, OpenAI, Google y Cía. quieran cobrar lo que cuesta e incluso sacar beneficio.

En un par de años máximo preveo otro boom de contrataciones, probablemente antes.

Yo sigo dandole gas al bendito copilot, mi mejor amigo.
lycaion
Miembro: ForoCoches
#14
Anda.. que la IA no cuesta lo que vale....
Azelas
ForoCoches: Usuario
#15
Cita de perkys
Opino exactamente lo mismo, ni una coma ha sobrado joder.
Bubble Boy
ForoCoches: Miembro
#16
IA está bien, hombre
Seriefilo
Experto en series
#17
Cita de Sgto_Limon
Por el tipo de empresa y datos que tratamos tenemos una IA corporativa con varios modelos punteros corriendo en AWS y las APIs externas chapadas.

Pues hemos pasado de un correo hace más de un año “echándonos bronca” por no utilizar suficientemente la IA a tener esta semana un medidor que nos indica los créditos que nos quedan para cada usuario..

Va a estar gracioso para particulares y especialmente empresas cuando Anthropic, OpenAI, Google y Cía. quieran cobrar lo que cuesta e incluso sacar beneficio.

En un par de años máximo preveo otro boom de contrataciones, probablemente antes.
En el precio de la api ya sacan beneficio. Lo que esta subvencionado son las subscripciones.


La IA es la hostia, pero hay mucho que optimizar y como no se analice el valor de para lo que se usa es gastar por gastar... Normal que empiecen a poner techos de gasto
ficticio
ola k ase
#18
Cita de Sgto_Limon
Por el tipo de empresa y datos que tratamos tenemos una IA corporativa con varios modelos punteros corriendo en AWS y las APIs externas chapadas.

Pues hemos pasado de un correo hace más de un año “echándonos bronca” por no utilizar suficientemente la IA a tener esta semana un medidor que nos indica los créditos que nos quedan para cada usuario..

Va a estar gracioso para particulares y especialmente empresas cuando Anthropic, OpenAI, Google y Cía. quieran cobrar lo que cuesta e incluso sacar beneficio.

En un par de años máximo preveo otro boom de contrataciones, probablemente antes.
Jajaja ese es el siguiente paso en la mayoria de las empresas
yerasito
ForoCoches: Usuario
#19
Por fin buenas noticias para los juniors
Dog Of Wisdom
ForoCoches: Miembro
#20
Cita de xueps
Ni de coña.


IA Local. No veas la de IA local que estoy implantando con exito.


Tokens Ilimitados en una infraestructura.


MP A todas las empresas (y no empresas) que lo necesiten. En tu casa en unos días plug and play.


Hoy sin ir mas lejos, lo que hubiese gastado en API (llevo solo hoy 10M de tokens de entrada, y 333k generados, unos 10$ de gasto ahorrado si tenemos en cuenta que el modelo es similar a Sonnet 4.5)
A cuanto el trasto? Porque un Mac Max y tal llega algo regu a un sonnet 4.5 … más caro que esto supongo no?
Keysersose
ForoCoches: Miembro
#21
IA veréis
SuperCaronte
ForoCoches: Usuario
#22
Cita de Sgto_Limon
Por el tipo de empresa y datos que tratamos tenemos una IA corporativa con varios modelos punteros corriendo en AWS y las APIs externas chapadas.

Pues hemos pasado de un correo hace más de un año “echándonos bronca” por no utilizar suficientemente la IA a tener esta semana un medidor que nos indica los créditos que nos quedan para cada usuario..

Va a estar gracioso para particulares y especialmente empresas cuando Anthropic, OpenAI, Google y Cía. quieran cobrar lo que cuesta e incluso sacar beneficio.

En un par de años máximo preveo otro boom de contrataciones, probablemente antes.
La verdad que va a estar gracioso para cupgemini que ha querido hacer un ere y ahora le va a tocar pagar los facturones de la IA y las indemnizaciones de la gente que hayan echado.

Estaba claro que en algún momento iba a pegar algún bombazo, que seguirá ahí? Por supuesto, que va a quedar como una herramienta que para pequeñas cosas te va a ayudar en lugar de sustituir a gente? Eso por descontado vamos, me río de las empresas paco pensando que la licencia le seguiría valiendo una miseria frente a pagar a alguien.
Oreos62
ForoCoches: Miembro
#23
Totalmente
Ya en mi curro las facturas de estan yendo de madre
ZeN1988
ForoCoches: Miembro
#24
La IA no es gratis, igual que YouTube al principio y otras plataformas... y ahora las tienes inundadas de anuncios o suscripciones.
xueps
Usuario Verificado (v)
#25
Cita de Dog Of Wisdom
A cuanto el trasto? Porque un Mac Max y tal llega algo regu a un sonnet 4.5 … más caro que esto supongo no?

Los estamos sacando en dos tipos de venta, porque hay mucha falta de stock que es lo mas limitante.


Pero hemos conseguido en Strix Halo ahora con el MTP, sacar un buen rendimiento (entorno a 30 tps) para el 3.6 de 27B, que estaria bastante cerca de un sonnet 4.5.


Asi que hablamos de unos 3k (la maquina, ojo, aparte toda la configuración que hacemos)




El otro tipo que nos estan pidiendo para no tener el hardware, es un renting y lo alojamos nosotros, a unos 300 euros al mes.


Todo preparado, con su interfaz, api, posibilidad de limitar por api key, limites... modelo STT, TTS y generador de imagenes...


¿El problema? Hay una falta de stock brutal. El que nosotros utilizábamos, lleva 4 meses sin stock.




Alternativo a todo esto, estamos haciendo una granja de servidores con RTX 6000 PRO, y ahi estamos montando modelos mas grandes, SOTA, pero aún está en fase de pruebas esto.
perkys
******* Espan Flod Trol
#26
Cita de Azelas
Opino exactamente lo mismo, ni una coma ha sobrado joder.



Fred Weasley
Travesura realizada
#27
las empresas listas están quemando sus últimos tokens baratos en entrenar IAs locales.
Antrax18
ForoCoches: Usuario
#28
Cita de Sgto_Limon
Por el tipo de empresa y datos que tratamos tenemos una IA corporativa con varios modelos punteros corriendo en AWS y las APIs externas chapadas.

Pues hemos pasado de un correo hace más de un año “echándonos bronca” por no utilizar suficientemente la IA a tener esta semana un medidor que nos indica los créditos que nos quedan para cada usuario..

Va a estar gracioso para particulares y especialmente empresas cuando Anthropic, OpenAI, Google y Cía. quieran cobrar lo que cuesta e incluso sacar beneficio.

En un par de años máximo preveo otro boom de contrataciones, probablemente antes.
Lamento desilusionarte, pero eso no va a ocurrir. Los modelos actuales, que ya son lo suficientemente buenos para sustituir a un junior, dentro de 2-3 años correrán perfectamente el cualquier ordenador a nivel de usuario.


El hardware se abarata. La IA mejorará los procesos a nivel interno y acelerará las innovaciones tecnológicas.


Se nota que no hacéis más que repetir como papagayos lo que leéis y escucháis. Que no, que no te van a volver a contratar.
B1_66ER
membrillo
#29
Cita de Sgto_Limon
Por el tipo de empresa y datos que tratamos tenemos una IA corporativa con varios modelos punteros corriendo en AWS y las APIs externas chapadas.

Pues hemos pasado de un correo hace más de un año “echándonos bronca” por no utilizar suficientemente la IA a tener esta semana un medidor que nos indica los créditos que nos quedan para cada usuario..

Va a estar gracioso para particulares y especialmente empresas cuando Anthropic, OpenAI, Google y Cía. quieran cobrar lo que cuesta e incluso sacar beneficio.

En un par de años máximo preveo otro boom de contrataciones, probablemente antes.
Y eso que sólo usamos la IA lila. Si la empresa usará los agentes, sabrían lo que es gastar. Y no digamos, entregar a empresa en manos de otra.

Me parece que los empresarios no han entendido muy bien los riesgos. No han entendido siquiera los costes...
Antrax18
ForoCoches: Usuario
#30
Cita de xueps
Ni de coña.


IA Local. No veas la de IA local que estoy implantando con exito.


Tokens Ilimitados en una infraestructura.


MP A todas las empresas (y no empresas) que lo necesiten. En tu casa en unos días plug and play.


Hoy sin ir mas lejos, lo que hubiese gastado en API (llevo solo hoy 10M de tokens de entrada, y 333k generados, unos 10$ de gasto ahorrado si tenemos en cuenta que el modelo es similar a Sonnet 4.5)
A esto voy.

Cuando se abaraten los costes, los picateclas y demás personal dedicado a ordenadores se pueden dar por jodidos.
← A General