Microsoft's Phi 4 model ( RC1 )

312 2 weeks ago

Readme

Phi-4 14B

  • Modelo muy bueno en razonamiento, matemáticas y MMLU “General”

Si sobre pasa al Qwen 2.5 72B, con solo Phi-4 14B es una locura.

Entiendo que quizás usaron qwen2.5 version antigua, pero no lo tengo claro.

image.png

image.png

Mejor que GEMINI 1.5 Pro Mejor que GPT-4 OpenAI En Razonamiento y Programación.

Razonamiento todas las pruebas superadas Razonamiento Simbólico: Lógica Proposicional:

Pregunta: “Si llueve, entonces la calle está mojada. Si la calle está mojada, ¿Está lloviendo?”

Respuesta: No necesariamente. Evalúa la falacia de afirmar el consecuente.

Pregunta: “Todos los hombres son mortales. Sócrates es un hombre. ¿Es Sócrates mortal?”

Respuesta: Sí. Evalúa la aplicación del modus ponens.

Pregunta: “Si A implica B, y B implica C, entonces ¿A implica C?”

Respuesta: Sí. Evalúa el razonamiento silogístico.

Álgebra y Matemáticas:

Pregunta: “Si x + y = 10, y y - x = 2, ¿cuál es el valor de x e y?”

Respuesta: x=4, y=6. Evalúa la capacidad de resolver sistemas de ecuaciones.

Pregunta: “Si todos los cuadrados son rectángulos, y todos los rectángulos son paralelogramos, entonces ¿todos los cuadrados son paralelogramos?”

Respuesta: Sí. Evalúa la capacidad de razonar con jerarquías de clases.

Problemas de Conocimiento Común y Reglas:

Pregunta: “Si conduces a 80 km/h en una zona de 50 km/h, ¿estás infringiendo la ley?”

Respuesta: Sí. Evalúa el conocimiento de las reglas de tráfico.

Pregunta: “Si un objeto se cae al suelo, ¿qué fuerza lo hace caer?”

Respuesta: La gravedad. Evalúa el conocimiento de las leyes físicas.

Enfoque Neurosimbólico: Combinación de Lógica y Contexto:

Pregunta: “Un pájaro está en una jaula. La jaula está abierta. ¿Puede el pájaro volar?”

Respuesta: Requiere combinar la lógica de que una jaula abierta permite la salida con el conocimiento del mundo real de que los pájaros vuelan.

Pregunta: “María tiene un billete de 50 euros y quiere comprar un libro que cuesta 30 euros. ¿Cuánto dinero le quedará a María después de comprar el libro?”

Respuesta: Combina conocimiento matemático con un escenario del mundo real.

Interpretación de Símbolos:

Acción: Mostrar imágenes abstractas con reglas simbólicas y pedir al modelo que las interprete o complete la secuencia. Razonamiento con Información Incompleta:

Acción: Presentar un escenario con información faltante y pedir al modelo que deduzca la información faltante utilizando tanto lógica como conocimiento del mundo real. Entrenamiento en Tiempo de Prueba (Simulado): Generación de Múltiples Respuestas:

Pregunta: “¿Cuáles son las posibles causas de un dolor de cabeza?” Acción: Pedir al modelo que genere varias opciones y que explique por qué seleccionó una como la mejor. Evaluación de Hipótesis:

Pregunta: “Un detective investiga un robo. Se han encontrado huellas dactilares en la escena del crimen. ¿Cuáles son las posibles explicaciones?” Acción: Plantear un problema y pedir al modelo que genere varias hipótesis y que las evalúe utilizando la información proporcionada. Preguntas Abiertas:

Pregunta: “¿Cuál es la mejor manera de reducir la contaminación en las ciudades?” Acción: Pedir al modelo que explore diferentes soluciones y justifique su elección final. Tipos de Razonamiento: Razonamiento Condicional:

Pregunta: “Si llueve, el suelo se moja. No está lloviendo. ¿Puedo concluir que el suelo no está mojado?” Respuesta: No, porque el suelo podría haberse mojado por otras razones, como un rociador o una persona derramando agua. Resolución de Acertijos:

Pregunta: “Tres personas necesitan cruzar un puente por la noche. Solo tienen una linterna y el puente es demasiado inestable para soportar más de dos personas a la vez. La primera persona tarda 1 minuto, la segunda 2 minutos y la tercera 5 minutos en cruzar. ¿Cómo pueden cruzar todos en 8 minutos o menos?” Respuesta: Primero, las personas que tardan 1 y 2 minutos cruzan juntas (2 minutos). Luego, la de 1 minuto regresa con la linterna (1 minuto, total 3 minutos). Después, las que tardan 5 y 1 minutos cruzan juntas (5 minutos, total 8 minutos). Escenarios Hipotéticos:

Pregunta: “Si los humanos pudieran respirar bajo el agua, ¿cómo cambiaría nuestra sociedad?” Respuesta: Podría haber una mayor explotación de los recursos marinos, ciudades submarinas, cambios en la navegación y el transporte, y una mejor comprensión y conservación de los ecosistemas marinos. Razonamiento Causal:

Pregunta: “¿Qué pasaría si las abejas desaparecieran completamente?” Respuesta: Muchas plantas dependerían de las abejas para la polinización, lo que podría llevar a una disminución de la producción de alimentos y afectar la cadena alimentaria, incluyendo a los seres humanos. Deducción Lógica:

Pregunta: “Todos los mamíferos tienen pulmones. Los delfines son mamíferos. ¿Los delfines tienen pulmones?” Respuesta: Sí, los delfines tienen pulmones porque son mamíferos y todos los mamíferos tienen pulmones. Reconocimiento de Patrones:

Pregunta: “¿Cuál es el próximo número en la secuencia: 2, 4, 8, 16, …?” Respuesta: 32, ya que cada número es el doble del anterior (secuencia de potencias de 2). Razonamiento Ético:

Pregunta: “Si un tren se dirige hacia cinco personas atadas en los rieles y puedes tirar de una palanca para desviar el tren a un riel con una persona, ¿qué deberías hacer?” Respuesta: La decisión ética más común es desviar el tren para salvar más vidas, aunque involucra una elección moral difícil. Razonamiento Temporal:

Pregunta: “Si empiezas una tarea a las 2 PM y lleva 1 hora y 30 minutos, ¿cuándo la terminarás?” Respuesta: La tarea se completará a las 3:30 PM. Razonamiento Espacial:

Pregunta: “Si estás mirando hacia el norte y te giras 90 grados a tu derecha, ¿hacia qué dirección estás mirando?” Respuesta: Estás mirando hacia el este. Razonamiento Abductivo:

Pregunta: “Encuentras un suelo mojado. ¿Cuáles podrían ser las razones posibles?” Respuesta: Podría haber llovido, alguien pudo haber regado el jardín, una persona derramó un líquido, o hubo una fuga de agua.

Pruebas nuevas:

Prueba: Estoy pensando un numero del 1 al 100 , puedes hacerme preguntas ¿Qué numero estoy pensando?

Resolver un laberinto: 4 x 4, encuentra la solución pero algunas veces no da los pasos

Problemas de creatividad: Lo pasa pero es un poco tosco, aunque da todos los pasos.

** no lo pasa ** tengo un vaso con una pelota de ping pong y lo lleno hasta la mitad de agua. sin tapar el vaso, luego lo meto dentro de un congelador durante 5 segundos y lentamente lo giro 180 grados para dejarlo boca abajo. saco el vaso del congelador y lo vuelvo a girar sobre la mesa para volver a llenarlo esta vez hasta arriba. ¿Dónde esta la pelota de pin pong? respuesta: fuera

** no lo pasa ** Dame un listado de provincias españolas que contengan “ia” en su nombre, pero no al final de la palabra.

lo soliciona Si es media noche en Madrid y esta lloviendo , ¿podría estar soleado en Barcelona 24 horas después? respuesta: no, seria de noche