Los Angeles Memorial Coliseum, olympiapyhättö 1932 ja 1984