Baer llegó a Estados Unidos en 1938, huyendo del Holocausto que estaba a punto de empezar en Alemania, donde su familia era mal vista por sus orígenes judíos. En su país de acogida trabajó en varias empresas como instalador de radio antes de ser reclutado por el ejército estadounidense para la segunda guerra mundial en 1943 y ser destinado a Inteligencia Militar en Francia. A su regreso, tres años después, trabajó en diversas empresas de radio y televisión hasta ingresar en Loral en 1951, donde se le encargó el diseño y creación de equipos de TV junto a Leo Beiser. Una de las ideas que Baer propuso es la creación de sencillos juegos interactivos instalados en el televisor, idea que la compañía rechazó de pleno.
Tras 4 años trabajando en Transitron, llegó a Sanders Associates en el año 1956. En dos años es nombrado Jefe de la división de equipamientos. En un momento en que en Estados Unidos había 40 millones de televisores, Baer no deja de darle vueltas a la idea de que todos ellos pueden usarse para algo más que el visionado de la programación convencional. Para el mes de octubre ya tiene listo su primer juego, “Chase Game”, en el que un punto de la pantalla representando al gato debía perseguir al punto que representaba al ratón hasta alcanzarlo. Era el 20 de octubre de 1966 y había nacido el videojuego tal y como lo conocemos a día de hoy.
En 1967 junto a Bill Harrison consigue reconvertir un rifle de juguete en el primer periférico de la historia, creando un muy elemental juego de disparos. El nuevo descubrimiento encantó al director de I+D Herb Campman, quien les otorgó 8.000$ más de capital para perfeccionar su dispositivo. A finales de 1967 entra en juego un tercer punto además de los dos controlados por los jugadores.
En 1968 se intenta una primera comercialización a través de la industria del Cable, que debía proporcionar los fondos estáticos sobre los que interactuaría el jugador a través de la "Brown Box" (nombre provisional del prototipo). Tras unos intentos fallidos, se cambia de objetivo y se pasa a negociar con los fabricantes de televisores: RCA son los primeros en mostrarse interesados, pero las negociaciones fallan de nuevo en el último suspiro y finalmente es Magnavox quien invierte en el proyecto.
En otoño de 1971 ya se dispone del primer prototipo, con algunas modificaciones respecto a la "Brown Box" original: los juegos en memoria se sustituyen por tarjetas programadas, y los fondos de color son reemplazados por cartulinas plásticas que se sobreponen a la pantalla. En 1972 sale a la calle la primera consola: La Magnavox Odyssey ITL200 a un precio de 100$. Es el punto de partida de la primera época del videojuego doméstico. Años más tarde Baer seguiría innovando al diseñar el Simón, uno de los juguetes más populares de todos los tiempos.Finalmente en 2006 recibe de manos de George Bush la medalla nacional de tecnología en EE.UU.
