Achei o defeito.
<?xml version="1.0" encoding="UTF-8"?>
<cross-domain-policy xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:noNamespaceSchemaLocation="http://www.adobe.com/xml/schemas/PolicyFile.xsd">
<allow-access-from domain="twitter.com" />
<!-- Começa o problema -->
<allow-access-from domain="api.twitter.com" />
<allow-access-from domain="search.twitter.com" />
<allow-access-from domain="static.twitter.com" />
<site-control permitted-cross-domain-policies="master-only"/>
<allow-http-request-headers-from domain="*.twitter.com" headers="*" secure="true"/>
</cross-domain-policy>
Apartir da tag <!-- Começa o problema --> tem uma afirmação para a aplicação que só perpitido acessar esse dominio se for apartir do dominio (api.twitter.com, etc)
Então a aplicação não consegue entrar em contato com o dominio e não obtem as informações que necessitamos.
Eu resolvi meu problema fazendo o Silverlight fazer o trabalho duro de gerar a assinatura OAuth e o meu serivodr se conecta atravéz de Socket ao servidor do twitter e envia as informações e as obtem.
Se existir uma outra forma, faz um post abaixo porque eu não consegui de outra maneira se não essa.
Agredecido pela ajuda sempre! Qualquer opnião é valida desde que tenha fundamento! http://darksp.myvnc.com