C#で、Genericsのために動的にCastしたい

汎用的な、「オブジェクトに値をセットするツール」を作成したいです。
しかし、Genericsがうまく扱えずに困っています。
例えば、APIは以下の感じです。

C#
1public class 汎用的Util {
2  public static void Set(object obj, string fieldName, object value) {
3    //汎用的にobjに対し、fieldName（ただし、「.」で区切って更にdeepな階層のオブジェクトやList、はたまたDictionaryのキー等にも対応）にvalueをセットする。
4  }
5}

そこに、たとえば以下のEntityをつっこみます。

C#
1public class Entity {
2  public List<int> Ints {get;set;}
3  public List<string> Strings {get;set;}
4}

その際、

C#
1Entity entity = new Entity();
2汎用的Util.Set(entity, Ints.5, 2);

とか、

C#
1汎用的Util.Set(entity, Strings.3, "hoge");

とかしたいわけです。
本題ですが、下記のAdd部分で、valueを動的にCastし、Addメソッドで実行時例外が起きないようにしたいです。何か方法をご存知のかた、ご教示願えませんでしょうか。

C#
1  public static void Set(object obj, string fieldName, object value) {
2  ...（略。objのnullチェック、objが配列か？Dictionaryか？など）
3    if(objがリストで、fieldnameが「.」で句切られて、「.」の後が数字なら)
4    {
5      var o = (dynamic)obj;//GenericsのせいでListにCast出来ないので、仕方なくdynamic
6      ...(略。パディングが必要なら行なうなど)
7      Type type = obj.GetType().GetProperty("Item").PropertyType; //タイプは取れる。
8      o.Add(value); //←ここで、valueを上で取ったタイプでキャストしないと、実行時エラー。でも、動的なキャストは方法がわからない。
9    }
10  }