An actor-critic algorithm with function approximation for discounted cost constrained Markov decision processes

We develop in this article the first actor-critic reinforcement learning algorithm with function approximation for a problem of control under multiple inequality constraints. We consider the infinite horizon discounted cost framework in which both the objective and the constraint functions are suitable expected policy-dependent discounted sums of certain sample path functions. We apply the Lagrange multiplier method to handle the inequality constraints. Our algorithm makes use of multi-timescale stochastic approximation and incorporates a temporal difference (TD) critic and an actor that makes a gradient search in the space of policy parameters using efficient simultaneous perturbation stochastic approximation (SPSA) gradient estimates. We prove the asymptotic almost sure convergence of our algorithm to a locally optimal policy. (C) 2010 Elsevier B.V. All rights reserved.

A dynamic bandwidth allocation scheme for interactive multimedia applications over cellular networks

Cellular networks played key role in enabling high level of bandwidth for users by employing traditional methods such as guaranteed QoS based on application category at radio access stratum level for various classes of QoSs. Also, the newer multimode phones (e.g., phones that support LTE (Long Term Evolution standard), UMTS, GSM, WIFI all at once) are capable to use multiple access methods simulta- neously and can perform seamless handover among various supported technologies to remain connected. With various types of applications (including interactive ones) running on these devices, which in turn have different QoS requirements, this work discusses as how QoS (measured in terms of user level response time, delay, jitter and transmission rate) can be achieved for interactive applications using dynamic bandwidth allocation schemes over cellular networks. In this work, we propose a dynamic bandwidth allocation scheme for interactive multimedia applications with/without background load in the cellular networks. The system has been simulated for many application types running in parallel and it has been observed that if interactive applications are to be provided with decent response time, a periodic overhauling of policy at admission control has to be done by taking into account history, criticality of applications. The results demonstrate that interactive appli- cations can be provided with good service if policy database at admission control is reviewed dynamically.

Governing the local networks in Indian agrarian societies-an MAS perspective

In a networked society, governing advocacy groups and networks through decentralized systems of policy implementation has been the interest of governance network literature. This paper addresses the topic of governing networks in the context of Indian agrarian societies by taking the case example of a welfare scheme for the Indian rural poor. We explore context-specific regulatory dynamics through the situated agent based architectural framework. The effects of various regulatory strategies that can be adopted by governing node are tested under various action arenas through experimental design. Results show the impact of regulatory strategies on the resource dependencies and asymmetries in the network relationships. This indicates that the optimal feasible regulatory strategy in networked society is institutionally rational and is context dependent. Further, we show that situated MAS architecture is a natural fit for institutional understanding of the dynamics (Ostrom et al. in Rules, games, and common-pool resources, 1994).

Gasto público social : conceptos y alcances

Resumen: La definición del gasto público social, a pesar de ser un concepto difundido, no encuentra consenso en la literatura. En este sentido, los países utilizan definiciones operativas y ello imposibilita las comparaciones. Las modalidades de intervención del Estado en la política social, son: a) centralización y descentralización y b) tipos de políticas: universalización y focalización. El problema de la descentralización se ubica en un contexto más amplio que debería solucionarse con cambios sustanciales en la coparticipación federal, avanzando tanto en la descentralización de ingresos como en las responsabilidades de recaudación local. La focalización facilita la universalidad que es la esencia misma de la política social. En la práctica es imposible llegar a la universalidad con instrumentos tradicionales y la focalización es la herramienta útil para llegar a las personas más pobres, que en el largo plazo, deben ser sujetos de carácter universal.

Tres imágenes del mercado

Resumen: El artículo invita a la reflexión respecto de la dicotomía entre economía y sociedad. Para esto, presenta una descripción de diferentes imágenes del mercado. La primera, representada por un mercado como espacio total, descripto a partir de la ciudad de Chicago y mediante los postulados de Becker. Luego, la segunda imagen remite a las tensiones entre mercado y sociedad, a través de las ideas de desarrolladas por Coraggio. Finalmente, el autor concluye presentando la imagen del mercado como un espacio humano y civil, presentando las consideraciones desarrolladas por Zamagni. Así, el autor deja planteado el interrogante acerca de cuál de las tres imágenes del mercado predominará en la agenda de las decisiones políticas, de la realidad económica y social y, en el imaginario simbólico de nuestra cultura.

Ausência de política pública de cotas raciais para ingresso em instituições públicas de ensino superior no Brasil

Descreve o atual panorama normativo para as cotas raciais no Brasil com base em estudo realizado com utilização de a análise documental e bibliográfica. Os resultados indicaram que a ausência de uma norma federal implicou baixa adesão ao sistema de cotas, o que é ratificado pelo insignificante número de Instituições Públicas de Ensino Superior (Ipes) que adotaram norma de cota racial - apenas 17,79%. Verificou-se, ainda, que essa ausência cria lacunas na adoção de diretrizes nacionais para a interpretação e a compreensão das ações afirmativas. Tais lacunas refletem diretamente no ciclo da política pública, comprometendo a avaliação e o acompanhamento da efetividade e do sucesso da política, o que é extremamente perigoso para a segurança jurídica na área de direitos humanos e para a garantia da equidade de fato nos espaços político, econômico e social.

Política de cotas raciais para ingresso em instituições públicas de ensino superior no Brasil : ausência de política pública

Descreve o atual panorama normativo para as cotas raciais no Brasil. Os resultados indicaram que a ausência de uma norma federal implicou na baixa adesão ao sistema de cotas, o que é ratificado pelo insignificante número de Instituições Públicas de Ensino Superior - IPES que adotaram norma de cota racial - apenas 17,79%. Verificou-se, ainda, que essa ausência cria lacunas na adoção de diretrizes nacionais para a interpretação e a compreensão das ações afirmativas. Tais lacunas refletem diretamente no ciclo da política pública, comprometendo a avaliação e o acompanhamento da efetividade e do sucesso da política, o que é extremamente perigoso para a segurança jurídica na área de direitos humanos e para a garantia da equidade de fato nos espaços político, econômico e sociais.

Marine ornamentals trade in the Philippines and options for its poor stakeholders

The objective of this project in the Philippines is to promote the development of policy changes and other actions related to the trade in ornamental fish with Europe which support poor people’s livelihoods. [PDF contains 118 pages.]

Limited access alternatives for the Pacific groundfish fishery

Despite its wide acceptance in other fisheries, limited access remains a controversial topic among Pacific coast groundfish fishermen and fishery managers. It is controversial because it immediately opens a wide array of public policy issues. How should the public conserve fish stocks, and who should benefit from harvesting those fish? What are the costs and benefits to the public, the taxpayer, the fishing industry, and the coastal communities supporting the groundfish industry? Should the government push the industry to be economically efficient in harvesting; or should it discourage technical efficiency to conserve fish stocks? Should management preserve the economic status quo by protecting existing harvest shares? These are the broad issues occupying the discussions of policy makers and academic writers concerned with resource management. The goal of this introductory section is to define limited access, to dispel some basic misunderstandings about limited access, to clarify the optional forms oflimited access, and to review the various resource management objectives addressed. This should set the stage for the following more lengthy discussions. By reducing the scope of needless misunderstandings, it should also help to make future discussions of limited access more productive. (PDF file contains 52 pages.)

Eliciting and using stakeholder input to guide Puget Sound nearshore restoration decisionmaking

The goal of the Puget Sound Nearshore Ecosystem Restoration Project (PSNERP) is to improve system-wide functionality of nearshorei ecosystem processes. To achieve that goal, PSNERP plans to strategically restore nearshore sites throughout Puget Sound. PSNERP scientists are assessing changes to the nearshore, and will recommend an environmentally strategic restoration portfolio. Yet, PSNERP also needs stakeholder input to design a socially strategic portfolio. This research investigates the values and preferences of stakeholders in the Whidbey Sub-Basin of Puget Sound to help PSNERP be both socially and environmentally strategic. This investigation may be repeated in the six other Puget Sound Sub-Basins. The results will guide restoration portfolio design and future stakeholder involvement activities. This study examines four areas of stakeholder values and preferences: 1) beliefs about the causes, solutions, and severity of nearshore problems; 2) priorities for nearshore features, shoreforms, developments, and restoration objectives; 3) thoughts about ecosystem servicesiii and trade-offs among them; and 4) visions of a future, restored Puget Sound nearshore and the role of science in attaining this vision. The study is framed by two hypotheses from the Advocacy Coalition Framework (ACF), which suggests that groups of policy advocates form around shared “policy core beliefs” which can transcend traditional categories of stakeholders.(PDF contains 3 pages)

Poverty alleviation and rural development in Nigeria: a gender perspective

The paper examines the concept of the feminization of poverty and reviews the limited evidence on the extent of poverty among women. It then examines the arguments that poor women can be highly effective change agents for the eradication of poverty. However, all the women may be considered as instruments for eliminating poverty, lack of understanding an appreciation of the impact of their sex roles and of gender roles and stereotypes continue to prevent the realization of this potential. Therefore, the paper moves on to summarize the differences between sex and gender and examines how both women's sexes roles and the imp gender roles and stereotypes lead to the feminization of poverty and exclude women from the participation in development and programmes to eliminate poverty. The paper reviews the major approaches: women in development or WID, gender and development or GAD and extension of GAD known as mainstreaming. Finally, it considers the issue of poverty, women and gender in Nigeria. It also advances a number of recommendations on women and gender poverty and rural development for the consideration of policy-makers in Nigeria

A cidade dos Meninos: educação e política na Baixada Flulminense/RJ

O presente trabalho tem como objetivo analisar alguns dos ideários sócio moralizantes que foram repercutidos na construção do pensamento social brasileiro, através das políticas pró-educação implementadas na década de 1940. O processo histórico que culminou com a edificação da Cidade dos Meninos, em Duque de Caxias no Rio Janeiro, surge, portanto, como um locus privilegiado para a investigação deste modelo educacional. Nesse contexto, as reflexões da intelectualidade à época, eram revestidas de uma expectativa moralizadora: "salvação pelo trabalho". Desta forma, surgiram espaços escolares que funcionavam em regime de internato e semi-internato, como a Cidade dos Meninos. Tratava-se de uma instituição destinada para essas populações "desvalidas", que seriam alvo de uma política educacional direcionada para a oferta do ensino "das letras" e do ensino profissionalizante de caráter elementar. Contudo, em 1950, ao ter uma fábrica de pesticidas instalada em seu interior, e com o posterior abandono desta, em virtude da mesma ter se tornado inviável economicamente em 1960, esse espaço foi alvo de uma contaminação ambiental e humana. Somente cerca de 30 anos depois, a referida contaminação foi trazida a público a partir de denúncias jornalísticas. A principal conseqüência foi o fechamento das escolas e a interrupção dos projetos de assistência social prejudicando muitos dos assistidos e antigos funcionários que assentaram residência na localidade, fazendo com que o problema social e de saúde pública se desdobrasse também numa questão fundiária. Todo esse movimento parece ter levado os atores sociais envolvidos no processo à uma elaboração pragmática sobre o papel da educação, do Estado, da pesquisa científica e do tipo de política que se destina a populações em situação de "periculosidade". A análise das memórias e das "trajetórias exemplares" de alguns moradores contribuíram para a compreensão da relação entre as políticas sociais e a perspectiva dos assistidos. Esse fato denota a possibilidade, na atualidade, de que os pressupostos que idealizaram tais políticas "sócio moralizantes" ainda apresentem vestígios no discurso e na ação tanto das autoridades, quanto dos próprios pesquisadores, desqualificando seus interlocutores e obscurecendo a solução do problema no referido local

O processo de constituição e funcionamento de um Conselho Municipal dos Direitos do Idoso: o caso do município de Maringá-PR

O envelhecimento populacional é um processo que produz impacto nas relações sociais e nas políticas públicas. Os Conselhos de Direitos do Idoso surgem no cenário nacional como uma inovação institucional, para exercer controle democrático entre o Estado e a sociedade no tocante à pessoa idosa. Este trabalho propôs-se a olhar para o processo de constituição e funcionamento do Conselho Municipal dos Direitos do Idoso (CMDI) de Maringá, localizado no Estado do Paraná. Para tanto, realizamos entrevistas com conselheiros, que foram complementadas pela análise de documentos do CDMI de Maringá. O CDMI estudado não surgiu de um amplo movimento social em torno das questões do idoso. Ele decorreu de uma ação de técnicos da Secretaria de Assistência Social, que buscaram ativamente a interface com entidades do movimento social. Por sua vez, o Conselho parece se constituir como um campo de práticas, no qual tanto representantes do movimento social como representantes do governo vão constituindo significados para o que é ser conselheiro. Assim, convivem distintas acepções. De um lado, técnicos das diversas secretarias oscilam entre a ideia de que devem defender as posições de suas secretarias e da gestão municipal, e a de que, ao se tornarem conselheiros, devem se pautar pela defesa dos direitos do idoso. De outro, participantes que vão, em sua trajetória como conselheiros, descobrindo os potenciais da participação nas discussões de projetos e propostas relativos ao idoso. A pesquisa permitiu apreender, ainda, algumas tensões que atravessam o Conselho, como entre o ainda hoje indispensável apoio técnico-administrativo e político da Secretaria de Assistência Social e o sonho de uma maior autonomia frente ao Executivo, ou como a tensão entre um modo de ver a política do idoso como uma questão da assistência social ou como uma questão do direito. Por fim, a pesquisa nos permite reconhecer um grande potencial nessa dinâmica do Conselho, ressaltando-se entretanto, que tal trajetória deve muito ao decisivo apoio da gestão municipal.

Políticas de currículo: lutas pela significação no campo da disciplina História

Este trabalho tem como temática as políticas curriculares circunscritas à análise de processos articulatórios no campo disciplinar da História. Defendo que a Teoria do Discurso de Ernesto Laclau é mais potente para a compreensão de como sujeitos atuam na produção de políticas e de como seus significados são discursivamente produzidos e hegemonizados. Articulo os aportes teórico-metodológicos da Teoria do Discurso aos do Ciclo Contínuo de Produção de Políticas de Stephen Ball, retomando sua defesa de currículo como texto, mas questionando o risco de reintrodução de uma centralidade no processo de significação das políticas. De igual modo, articulo à Teoria do Discurso os aportes da História das Disciplinas Escolares de Ivor Goodson, recuperando sua defesa de que significados disciplinares são negociados nos processos de hegemonização, mas questionando o risco de essencialização dos sujeitos bem como sua subjetivação anterior à articulação política. Com essa construção teórica híbrida, defendo a concepção de currículo como política cultural discursiva e a delimitação de um campo discursivo disciplinar da História como campo ressignificador das políticas curriculares. Reforço os argumentos sobre as potencialidades da Teoria do Discurso a partir de analogias com a linguagem, conferindo centralidade aos conceitos imbricados de metonimização e metaforização e de lógica do significante. A partir de uma das ferramentas da Linguística de Corpus, o programa Wordsmith Tools 5, submeto à análise, por um de seus instrumentos o Concord , o material empírico selecionado. Assim, identifico nas edições da Revista Brasileira de História e da Revista História Hoje publicações da Associação Nacional de História (ANPUH); em Pareceres, Diretrizes, Orientações e Parâmetros Curriculares, dentre outros textos chancelados pelo Estado brasileiro no período compreendido entre os anos de 1960 e 2010; e, em seis entrevistas, a forma como nesses textos se significa conhecimento histórico, destacando a superposição de sentidos. Por fim, defendo, como nos processos de significação, sentidos se deslocam e se condensam simultaneamente, tornando hegemônica a concepção embutida na metáfora de História como construção. Identifico processos de subjetivação nos quais atores sociais, defendendo a centralidade do conhecimento histórico, constituem uma identidade da História, antagonizando-se a outros que constituem uma identidade pedagógica na luta pela hegemonização de sentidos nas políticas curriculares.

Políticas de currículo em Educação de Jovens e Adultos (EJA)

Esta investigação analisa projetos em disputas na produção de políticas de currículo em EJA (Educação de Jovens e Adultos). Para tal, são investigadas produções de dois espaços em que circulam diferentes textos que enunciam demandas de diversos grupos, a saber, os ENEJAs (Encontro Nacional de Educação de Jovens e Adultos) e o GT 18 da ANPEd (Associação Nacional de Pós-graduação e Pesquisa em Educação). Nesses, são identificadas e problematizadas demandas em disputa na produção de políticas de currículo em EJA, que articuladas no processo de significação, tencionam constituir um discurso hegemônico no currículo voltado à EJA. É destacada, no processo de produção das políticas, a atuação das comunidades epistêmicas em diferentes contextos na tentativa de influenciar e hegemonizar determinados sentidos em torno da produção das políticas de currículo em EJA. Nesse sentido, as políticas de currículo são entendidas como discurso, o que implica abordar e problematizar discursos que circulam em diferentes contextos como atravessados por relações de saber-poder. Para tal, dialogamos com a teoria do discurso proposta por Ernesto Laclau, a abordagem metodológica do ciclo contínuo de políticas de Stephen Ball e a vertente analítica das comunidades epistêmicas. É argumentado que as políticas de currículo são produzidas em diferentes contextos, com o envolvimento de diferentes atores sociais. É defendido, ainda, com base na análise de diferentes documentos e das demandas, que possíveis discursos são constituídos em função da articulação de certas demandas tornadas equivalentes e que buscam hegemonizar determinados sentidos da/na política curricular da EJA. Apontamos ainda, a possibilidade de futuras investigações no campo das políticas de currículo em EJA.