This paper proposes reinforcement learning with hyperbolic discounting. In general, return and its expectation, i.e., value function, are defined as cumulative rewards with exponential discounting due to mathematical simplicity. Animals, however, show behaviors that cannot be explained by the exponential discounting, but can be explained by the hyperbolic discounting. There is therefore no doubt that some profits can be obtained by changing the exponential to hyperbolic discounting. Combining a new temporal difference error with the hyperbolic discounting in recursive manner and reward-punishment framework, which is also biologically plausible, a new scheme to learn the optimal policy is derived. In simulations, it is found that the proposal outperforms the standard reinforcement learning, although the performance depends on the design of reward and punishment. In addition, the averages of discount factors w.r.t reward and punishment are different from each other, like a sign effect in animal behaviors.

抄録全体を表示

ウェブによる全国規模の選好調査データを用いて、負債保有が（現在バイアス）やせっかちさ（imaptience）の程度と正の相関をもち、符号効果（割引に関する利得損失の非対称性）と負の相関をもつことを示す。との相関は、とくに単純な（ナイーブな）回答者に有意に検出され、深慮者（ソフィスティケイテッドな人）サンプルでは高々非有意な相関しか見られない。クレジットカード負債の保有や消費者金融の利用経験、債務不履行経験などの過剰債務傾向にも、や忍耐力のなさと同様の相関が見られる。

抄録全体を表示

本論文は，上限金利規制の是非を理論的に検討し，消費者金融の借り手，債務整理者，消費者金融未利用者を対象としたアンケート調杳の結果を用いて，実証的に検討する．本稿の特徴は，従来の産業組織的視点に加えて，借り手の

・衝動性という行動経済学的視点と情報の非対称性の視点から分析していることである．を持つ人は計画の時間非整合性に直面するので，その借り入れを制約する政策が是認される．アンケート調査の結果から，高や自信過剰は消費者金融からの借り入れを促進し，債務整理に陥る原因であることを明らかにした．しかし，アンケート調査の結果は，消費者金融市場の情報の非対称性が強いことを示唆している．もしその結果，消費者の信用力が識別されないプーリング均衡が成立しているとし，信用割当が重要な影響を持たなければ，上限金利規制は基本的に望ましい効果を持たない．しかし，信用割当が重要な影響を持つ場合や，シグナリング均衡が成立している場合には，上限金利規制が高の人を排除するという意味で望ましい効果を持つ可能性がある．しかし，この場合にも，金利規制は，規制が望ましくない人をも規制してしまうという副作用があることに注意が必要である．たとえば，上限金利規制によって，消費者金融市場を崩壊させる政策が望ましいかどうかは，高の人の比率に依存するが，高双曲の人は国民の約2割から3割，消費者金融の既利用者では約3割から4割であると推測される．さらに本論文は，消費者金融会社が，約定金利に加えて取立ての水準を操作する「取立て均衡」を考察した．もし，借り手が，消費者金融会社が行うであろう取立て水準の期待値を過小に評価していれば，取立ては借り手の厚生を悪化させる可能性がある．この取立て均衡では，約定金利で表示した借り入れ需要関数は「後方屈折（backward bending）」になる可能性があり，借り手は高金利で過剰な借り入れをしたと後悔することになる．過小評価を導く原因としては，借り手の自信過剰が考えられる．実証分析は，借り入れ需要関数は金利が低い領域では右下がりであるが，高い領域では垂直であること，取立てにあった人は自信過剰の程度が有意に高いことを示した．最後に，貸し手が寡占であれば，上限金利規制が是認される可能性があるが，実証分析の結果，寡占市場であることを支持する結果は得られなかった．

抄録全体を表示

本記事に「抄録」はありません。

抄録全体を表示

神経科学と経済学との境界分野は，Neuroeconomics（神経経済学）と名づけられ，近年活発な研究がなされている．本発表では，時間割引および不確実性下の意思決定に関して，経済学における規範的意思決定からの乖離に関する神経経済学的研究（神経ホルモンや中毒財との関連），および行動経済学·進化生物学との関連を紹介する．

抄録全体を表示

For preventing and controlling Covid-19 infections, it is important to incorporate models in behavioral economics into optimal control policies. Also, the pandemic significantly impacts our psychological states such as anxiety and fear. It is therefore important to incorporate findings in neuroeconomics -- a discipline studying the neural information processing underlying economic decisions -- into policy making. In this talk, models in behavioral economics such as hyperbolic discounting are introduced in relation to decisions over the future post-Covid-19 age.

抄録全体を表示

Based on Ikeda et al. (2009), I discuss whether interpersonal differences in body mass are related to those in time discounting and its anomalies reported in behavioral economics. The effects of time discounting on body mass index (BMI) and the probabilities of being obese, severely obese, and underweight are detected by incorporating three properties regarding time discounting: (1) impatience, measured by the level of the respondents' discount rates; (2) hyperbolic discounting, where discount rates for the discounting of immediate future choices are higher than those for distant future choices; and (3) sign effects, wherein future negative payoffs are discounted at a lower rate than are future positive payoffs. The results imply that body mass is determined as an outcome of intertemporal decision makings, so that it can be affected by controlling in the intertemporal structure of medical care costs and the price of a calorie.

抄録全体を表示

本稿はOjima (2012)に従い，双曲的な時間割引因子を持つ複数の異質な家計—ナイーフとソフィスティケイト-が存在する世代重複モデルを提示する．このモデルではナイーフの資産収益率に対する楽観による破産が存在する．ナイーフは将来の貯蓄率を過大に評価し，したがって将来の資産価格を過大に予想する．それに対し，ソフィスティケイトは将来資産価格を完全に予測し，ナイーフの過大予測も織り込んで行動する．ソフィスティケイトはナイーフへ資産の収益率よりも高い金利で貸し，ナイーフは借り入れによって資産を購入する．この取引はソフィスティケイトへ超過利潤を，ナイーフへそれに見合った損失をもたらす．その結果，ナイーフは破産する場合が存在し，更に以下の場合により高くなる．(i)現在バイアスの程度が高くなる場合，(ii)ソフィスティケイトの人口がナイーフの人口よりも相対的に多くなる場合，(iii)長期の割引率が低くなる場合である．

抄録全体を表示

Recently, neuroeconomics---a unified discipline of economics and neuroscience---has been developed. Research topics of neuroeconomics include neural processing underlying decision under risk, intertemporal choice, and social preferences. Studies in neuroeconomics have revealed that human judgment and decision making usually violates classical rationality (e.g., Kolmogorovian probability theory, exponential time-discounting, von Neumann-Morgenstern’s expected utility theory). We observed that rationality and intelligence defined in terms of neuroeconomics is related to human intelligence and rationality in terms of cognitive science. These findings are relevant to problems in financial markets, artificial intelligence, and robotics.

抄録全体を表示

Anhedonia is a core symptom of major depressive disorder. Anhedonia is associated with decreased motivation to reward and with an increase in several behavioral problems such as suicide. Lempert and Pizzagalli (2010) showed that anhedonia is negatively correlated with the discounting rate in a delay discounting task. The findings of Lempert and Pizzagalli (2010) are important in revealing the relationship between anhedonia and reward sensitivity. However, the reproducibility of psychological research has recently been criticized. We conducted a replication study, based on Lempert and Pizzagalli (2010). One hundred sixty-five participants from a Japanese crowdsourcing service completed a questionnaire about anhedonia and a delay discounting task. We found that anhedonia was not significantly correlated with the delay discounting rate. We could not replicate the results of Lempert and Pizzagalli (2010). The failure to replicate the results of the aforementioned study is because of the heterogeneity of each study with regard to the delay discounting task. A meta-analysis is needed to evaluate replication and heterogeneity. Lastly, we discuss the significance of “pre-review” and “pre-registration” in the reproducibility crisis.

抄録全体を表示

本稿は，異時点間の報酬に対する時間割引率とその関連変数の心理的背景要因の検証を目的とする．時間割引率と心理学上の各種構成概念との関係性を検証した研究は数多くあるが，結果に一貫性がなく，サンプルサイズも限られた研究が多かった．そこで本稿では，大規模なシングルソースデータベースを用いて，サンプルサイズが十分大きく，比較的偏りのないデータで解析を行うとともに，独自実施のアンケート結果を含めた簡易的レビュー・メタ分析を実施して，より頑健な結果を導き出すための実証研究を行った．心理学上の構成概念について測定する質問紙としてはBIG5・BIS/BAS（行動抑制系/行動賦活系）・DOSPERT（領域固有性リスク受容指標）・SCS（セルフコントロール尺度）・BIS-11（バラット衝動性尺度）・EPI&SSS（アイゼンク性格検査&刺激希求性尺度）・EC（エフォートフルコントロール尺度）を利用した．結論として，時間割引率は，衝動性（特に，非計画性に関する衝動性）やリスクのある選択肢を選ぶ頻度との関係性が認められた一方，セルフコントロールやBIG5の各パーソナリティとは関係性は認められなかった．また，

・マグニチュード効果・符号効果は，BASとの関係性が比較的強いということが明らかになった．

抄録全体を表示

本稿は将来の消費を想像しそれを楽しみとして現在の効用に組み込むような消費者を想定し，このような将来を楽しみにする行動が消費者の時間割引因子に与える影響を分析した．将来を楽しみにする行動は消費者の時間割引因子を高める．しかし，割引因子の上昇度合いは一般的には時間間隔に依存し，に代表される現在バイアスや，その逆の将来バイアスを生み出す．このような消費者は将来の消費を重視するため，よりフラットな消費計画を選好することになる．特に，将来バイアスの消費者は右上がりの消費計画を選択する可能性があるということが分かった．本稿では最適消費計画から導出される時間割引因子と実際に消費者がもつ時間割引因子が異なった性質を示すことも明らかにした．

抄録全体を表示

人々の消費行動における異時点間の選択は普遍的な課題である．双曲線型割引関数を持つ個人が事前の意図より過剰消費し，コミットメントより自己資産の流動性を制約する自己統制の問題は家計資産の選択に決定的に重要である．本稿は大阪大学が実施した「暮らしの好みと満足度に関するアンケート」のパネルデータを用いて2009年から2012年までの4年間に日本，米国，中国，印度の4カ国を対象に，家計の割引構造，消費と所得・資産の限界消費性向を統計学的に実証分析したものである．双曲線型割引関数を持つ家計は，その比率が日本で21%,米国で14%と顕著に違い，過剰消費のアノマリーが中国で確認されず日米印で確認された．消費と所得との連動性が米国（非線形）と印度（線形）で確認されたが，日本では連動性が弱く，負債との連動が確認された．米印における固定資産の限界消費性向が有意に正で，金融市場におけるイノベーションが過剰な流動性を供給しコミットメント効果を希薄化する中で家計の自己統制の変化，及び限界消費性向のシステマティックな上昇の可能性が示唆された．

抄録全体を表示

様々な消費者事故の発生は2009年の消費者庁設立を求める大きな要因となったが，消費者事故は現在も減少していない．誤使用か否かを消費者と事業者が争っていても事故は減っていかない．むしろ予見される誤使用が存在するのであれば，その発生を事前に予防する措置を採ることが事故を減らす上で重要になる．そこで本稿は消費者安全に対する認知や危険行動についてアンケート調査で尋ね，行動経済学からの知見を得るために危険回避度などと回帰分析を行った．その結果，危険行動を「問題なし」と考えている者は危険行動を行っており，安全学習が一定程度の事故予防につながることが確認された．しかし，それだけに止まらず，せっかちな者がカップ型ゼリーを子どもに与えたり，脚立の天板に立ったりすることが分かった．今後は学習・啓発だけでなく，せっかちな者が事故を起こさないような製品設計などのシステムを構築することが求められる．

抄録全体を表示