L'histoire du quartier du Panier commence il y a près de 2600 ans, alors que la ville de Marseille voit le jour sous le nom de Massalia. Les grecs choisissent en effet ce lieu pour poser bagage grâce à sa position géographique en hauteur et pour sa proximité avec la mer. L’agora, d’où les citoyens pouvaient surveiller les activités du port, se trouvait sur l’actuelle Place de Lenche alors que la Butte des Moulins accueillait l’acropole dédiée à Athéna.
Le quartier continue de se développer à mesure que Marseille s’étend. Au XIIème siècle, la confrérie du Saint-Esprit bâtit un hôpital qui deviendra l’Hôtel Dieu et qui a aujourd’hui été transformé en hôtel de luxe, l’InterContinental Marseille 5*. Au XVIIIème siècle, on y construit un grand hospice : la Vieille Charité.