;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;
; CSCI 4150 Intro to Artificial Intelligence, Fall 2005
; Assignment 7
; 
(load "a7code") ; don't change this line!

;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;
;
; Problem 1
; 

(define (calc-initial-state player-hand dealer-hand)    
  'your-procedure-here)

(define (calc-new-state previous-rl-state action terminal? reward
			player-hand dealer-hand)
  'your-procedure-here)

(define (terminal-state? rl-state)
  'your-procedure-here)

(define (init-tables)
  'your-procedure-here)




;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;
;
; Problem 2
; 

(define (basic-rl-strategy fs-num actions)
  'your-procedure-here)

;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;
;
; Problem 3
; 

(define (create-exploring-rl-strategy R+ Ne)
  (lambda (fs actions)
    'your-procedure-here))

;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;;
;
; Problem 4
; 

(define (create-td-learning alpha)
  (lambda (fs a ts)
    'your-procedure-here))