Bonjour,
Il faut bien distinguer entre le pouvoir de direction (la gérance) et la propriété de la société (les parts).
Qu'un associé ne soit pas présent dans la société n'est pas génant. C'est même courant : quand on a des actions de sociétés, en bourse par exemple, on est propriétaire d'une quote part de la société sans y être présent.
En revanche, qu'un co-gérant ne soit pas présent pose problème. Car il conserve des pouvoir dans la société tant qu'il a ce titre de gérant. Et des obligations. Il est donc important, pour lui comme pour toi, qu'il ne soit plus gérant pour éviter toute mauvaise surprise : il doit démissionner, et l'assemblée des associés doit voter la modification des statuts, et l'enregistrer au RCS. (pas besoin de passer devant un notaire comme expliquer plus haut...

).
La difficulté est que tant qu'il sera associé, il peut très bien revoter, à un moment ou à un autre, sa nomination en tant que co-gérant, voire te révoquer, puisqu'il est majoritaire.
IL faut donc effectivement organiser une vente de ses parts, soit en totalité, soit partiellement, pour te permettre de prendre la majorité et ne plus rien risquer. Le prix est à définir entre vous. ça dépendra des résultats de la société, de ses actifs, de son endettement, etc. ça peut très bien être un prix au nominal (ex : capital de 1000 €, 51% représentent 510 €), ou même un prix symbolique : 1 €.
Et comme dit plus haut, l'associé ne peut se barrer avec les actifs, car ils appartiennent à la société. Contrairement à ce qu'on voit parfois, c'est bien la société qui est propriétaire à 100 % des actifs. Et lui n'est propriétaire que de 51% de la société, pas de 51% des actifs !
Le mieux est effectivement de voir un avocat, ou un expert comptable rapidement, pour apaiser la situation et organiser rapidement la suite.