Todas las guías y ejemplos

profesionales

Palabras clave o IA: cómo comprobar un filtro de Telegram

· Pingfinch

La palabra «limpieza» te trae ofertas de empleo y anuncios de empresas, pero nunca «¿alguien que me deje el piso como nuevo antes de entregar las llaves?». Solo tus propios mensajes dirán si te conviene más filtrar por palabras clave o con IA: etiqueta antes una muestra y cuenta qué parte de los avisos te sirve y cuántas solicitudes adecuadas encontró el filtro.

¿Por qué los avisos no dicen si el filtro funciona?

Lo que sobra se ve enseguida: el anuncio de otra empresa, la oferta de empleo de un hotel. La solicitud perdida no deja rastro, y parece que el filtro solo falla hacia un lado. Probar las palabras sobre el historial del grupo tiene el mismo punto ciego.

Por eso se cuentan dos proporciones. La precisión es la parte de los avisos que te sirve. La recuperación (recall) es la parte de las solicitudes adecuadas que el filtro encontró, y para calcularla tienes que saber cuántas había.

No hemos hecho una comparación general entre palabras clave e IA: el resultado depende de tus grupos y de cómo formules lo que buscas.

¿Cómo se prepara la muestra?

  1. 1

    Mismos grupos, mismo periodo

    Copia entre 50 y 100 mensajes seguidos de tus grupos. Si las solicitudes son raras, copia más: con cinco adecuadas, un solo mensaje mueve la recuperación 20 puntos.

  2. 2

    Etiqueta antes de mirar

    Marca cada mensaje como «encaja», «no encaja» o «dudoso» antes de abrir los avisos, o acabarás dándole la razón al filtro.

  3. 3

    Guarda una parte de control

    Aparta un tercio de la muestra mientras ajustas las palabras o la instrucción y haz la cuenta final con ese tercio, para no hacer las reglas a medida de mensajes que ya conoces.

  4. 4

    Pasa los filtros

    Una regla de palabras la compruebas tú buscando en los mensajes copiados. Pingfinch y cualquier herramienta que solo lea mensajes nuevos necesitan una semana por delante: al final, etiqueta esos días y solo entonces abre los avisos.

Otro artículo explica cómo distinguir, al etiquetar, una solicitud de un anuncio o de una oferta de empleo.

¿Cómo se hace la cuenta?

Cuatro mensajes inventados y la regla «el texto contiene “limpieza”»:

Encaja: Solicitud sin la palabra

«¿Alguien que me deje el piso como nuevo antes de entregar las llaves el viernes?» La regla calla y el encargo era tuyo.

Encaja: Solicitud con la palabra

«Busco a alguien para una limpieza a fondo de un piso de tres habitaciones.» Aquí la regla acierta.

No encaja: Oferta de empleo

«Se busca personal de limpieza para hotel, jornada completa y contrato fijo.» La palabra está, pero es un empleo.

No encaja: Anuncio de una empresa

«Limpieza de pisos y oficinas, presupuesto sin compromiso, llámanos.» La palabra está, pero escribe quien vende.

La regla dio tres avisos y uno sirve: precisión de 1 de 3. De las dos solicitudes adecuadas encontró una: recuperación de 1 de 2.

¿Qué no cuenta como error del filtro?

Anótalo aparte
  • Los mensajes «dudosos»: calcula las dos proporciones con el resto
  • Una solicitud publicada en varios grupos: es una sola, y Pingfinch también te avisa de ella una vez
  • Los grupos a los que la herramienta nunca tuvo acceso: es un hueco de cobertura
  • El denominador cero: si un filtro no avisó de nada, anota «sin datos» en vez de 0 % o 100 %

Olvídate de la exactitud, el porcentaje de mensajes bien clasificados en total. En el ejemplo, un filtro que no avisa en toda la semana acierta con 52 de 60 mensajes, casi el 87 %, y no encuentra ni una solicitud.

¿Qué pesa más: menos ruido o menos pérdidas?

Con el filtro A lees más; con el B pierdes la mitad de las solicitudes. Si vives de pocos encargos grandes, como una limpieza de obra, importa más la recuperación. Si te llegan muchos trabajos pequeños y vas justo de tiempo, importa más la precisión. Decide qué te sale más caro: diez avisos de más o un cliente perdido.

Tras cada cambio, cuenta de nuevo con otra semana y apunta junto al porcentaje las cifras y las fechas: «6 de 8, del 14 al 20 de octubre» dice más que «75 %». La IA de Pingfinch descarta el mensaje cuando duda: hay menos ruido, pero puedes perder solicitudes, y tu muestra dirá cuántas.

¿Cómo compruebas Pingfinch de la misma forma?

Pingfinch, un servicio que te avisa en Telegram de solicitudes en los grupos públicos que eliges, no selecciona por palabras clave: la IA decide con tu instrucción si te envía cada mensaje. Antes se descartan los mensajes sin ninguna palabra, las copias de mensajes ya descartados y los que llevan palabras que excluiste con las reglas «🔇 No enviar» de la suscripción. La IA ve un solo mensaje, sin la conversación, así que un «¿Y mañana por la tarde te vendría mejor?» no te llegará: cuéntalo como pérdida esperada.

Cada aviso trae el nombre de la suscripción, el motivo, la fuente y el enlace al mensaje, así que compararlo con tu etiqueta es cuestión de un toque. La IA se equivoca en las dos direcciones: cuenta sus errores igual que los de las palabras.

¿Por dónde empiezo?

Etiqueta mensajes de tus grupos, calcula las dos proporciones para una regla de palabras y conecta Pingfinch a esos mismos grupos durante una semana. Puedes empezar gratis en el bot; las condiciones después del periodo gratuito están en la página de precios.

Preguntas frecuentes

¿Puedo saber qué solicitudes se pierden sin leer todos los mensajes?

Del todo, no. Puedes leer los mensajes sin aviso de un día por semana y calcular la recuperación solo con ese día.

Sigue leyendo

Empieza por un solo grupo.

Añade un grupo o canal público por su @username y describe las solicitudes que quieres recibir.

Los primeros 7 días son gratis y sin límite de avisos.