漠然としすぎててなんとも言えん。まずはデベロッパーツールでフォントサイズとその定義がどうなってるか調べろ

どういうサーバーにアップしているの？
広告付きの無料サーバーみたいな所？

chromeのユーザーエージェントスタイルシートでCSSが勝手に上書きされる事があるみたいです

なんかの拍子にブラウザ側でフォントサイズを大きくしてたりすると、崩れはあるかもね。Safariで見たら大丈夫なのは、そういうことかも。
あと、アクセスできたりできてなかったりは、ちゃんとURLあってるかな？
なんか、複数の原因が重なってる可能性はありそう。
キャッシュ削除したと言っても、何のキャッシュをクリアしたか、その手順とかもはっきり書いた方がいいね。