Sáng kiến kinh nghiệm Vận dụng phương pháp dạy học hợp tác theo nhóm ở trên lớp trong dạy học Tiếng Anh THCS

e) Đánh giá hoạt động nhóm
Đánh giá ý thức làm việc của các nhóm
Đánh giá kết quả làm việc
3. Một số lưu ý khi tổ chức hoạt động nhóm.
Không phải cứ chia lớp thành các nhóm nhỏ là dạy học theo phương pháp hợp tác nhóm.
Dạy học bằng phương pháp hợp tác nhóm không phải giáo viên yêu cầu học sinh làm việc còn họ được rảnh rang. Hiệu quả của hoạt động nhóm phụ thuộc rất nhiều vào khâu chuẩn bị của giáo viên. Giáo viên không chỉ phải chuẩn bị về cơ sở vật chất mà cần phải có một kiến thức rộng và liên quan đến vấn đề tổ chức thảo luận, có vậy mới hướng dẫn học sinh hoạt động tốt.
Cần tạo cho người học có tâm thế khi thảo luận nhóm. Để làm tốt điều này giáo viên cần phải cân nhắc kĩ lưỡng trước khi chọn chủ đề, luôn tự đặt câu hỏi:
Nếu lựa chọn phương pháp hợp tác nhóm, để giải quyết vấn đề này thì có lợi gì so với phương pháp khác? Chỉ tiến hành hoạt động nhóm khi vấn đề giáo viên đặt ra cần có sự hợp tác của học sinh mới giải quyết được.
Không nên thất vọng nếu một vài lần đầu giáo viên áp dụng phương pháp này mà cảm thấy chưa thoả đáng, hãy tự rút ra kinh nghiệm và làm lại nhiều lần vì hoạt động nhóm chỉ có thể đạt hiệu quả cao khi các học sinh đã hình thành được các kỹ năng hợp tác nhóm.
Nếu lớp học quá đông và chật, giáo viên nên sử dụng các nhóm nhỏ giữa các em cùng bàn hoặc các em ở hai bàn kế tiếp nhau nhưng chú ý nên cố định các thành viên trong cùng nhóm.
Trong điều kiện nhà trường Việt Nam hiện nay, lớp học có số lượng học sinh đông, bàn ghế tương đối cố định... Có thể vận dụng phương pháp dạy học hợp tác theo nhóm nhỏ như sau:
- Nhóm 2-3 học sinh ngồi cùng bàn thảo luận, để giải quyết câu hỏi, bài tập do giáo viên nêu ra.
- Nhóm 4-6 học sinh giải quyết câu hỏi, bài tập do giáo viên nêu ra bằng việc quay hai bàn lại với nhau.
Giáo viên có thể chia lớp thành nhiều nhóm nhỏ theo hai cách:
Cách 1: Tất cả các nhóm trong lớp cùng làm một nội dung. Sau khi các nhóm báo cáo kết quả, cả lớp thảo luận. Cách này có ưu điểm huy động hoạt động của các nhóm nhưng chỉ phù hợp với những bài có nội dung kiến thức ngắn gọn, vì tốn thời gian.
Cách 2: Giáo viên chia lớp thành nhiều nhóm nhỏ, mỗi nhóm (hoặc một số nhóm) nghiên cứu giải quyết một vấn đề. Các nhóm khác và giáo viên bổ sung để đưa ra kết luận cuối cùng. Cách này phù hợp với những bài nội dung dài, nọi dung của các vấn đề trong bài thường tương tác độc lập.
4. Các điều kiện để hoạt động nhóm có hiệu quả.
4.1. Điều kiện đối với giáo viên.
 a) Thay đổi căn bản trong nhận thức của giáo viên:
Một động lực cực kì quan trọng đối với việc đổi mới phương pháp dạy học tiếng Anh là hiện nay đại đa số giáo viên đã nhận thức được tầm quan trọng và ý nghĩa sống còn của việc đổi mới phương pháp dạy học tiếng Anh. Hầu như không còn giáo viên nào còn hoài nghi về sự cần thiết của việc áp dụng các phương pháp dạy học tích cực (trong đó có phương pháp dạy học hợp tác nhóm) trong dạy học tiếng Anh. Họ hiểu rằng sau khi đổi mới mục tiêu nội dung chương trình và SGK thì đổi mới phương pháp dạy học là nhân tố quan trọng nhất, quyết định đến việc thành bại của quá trình đổi mới, bởi vì có mục tiêu, có chương trình và SGK mới, nhưng việc dạy và học vẫn tiến hành theo kiểu cũ thì không thể nói đến nâng cao chất lượng, hiệu quả dạy học tiếng Anh và tất nhiên cũng không thể nói đến nâng cao vai trò và vị thế của môn tiếng Anh ở trường trung học phổ thông. 
Trong số những nhân tố đã góp phần quan trọng tạo nên những thay đổi trong nhận thức của giáo viên trước hết phải kể đến hiệu quả của chương trình bồi dưỡng, huấn luyện giáo viên phục vụ cho cải cách giáo dục tiếng Anh do Sở giáo dục và phòng giáo đào tạo Lệ Thủy đã tiến hành trong nhiều năm qua. Những chương trình này chẳng những đã góp phần đáng kể nâng cao nhận thức và trình độ lí luận dạy học cho giáo viên mà còn có tác dụng tăng cường năng lực thực thi các phương pháp dạy học hiện đại (trong đó có phương pháp dạy học hợp tác nhóm) của giáo viên trong dạy học tiếng Anh ở các trường THCS.
 b) Giáo viên phải khẳng định vai trò, chức năng mới của người thầy trong quá trình dạy học.
Cụ thể là:
Người thầy phải là người tổ chức, chỉ đạo, điều khiển các hoạt động học tập tự giác, chủ động và sáng tạo của học sinh. Người thầy sẽ không còn là người phát thông tin duy nhất, không phải là người hoạt động chủ yếu ở trên lớp như trước đây mà sẽ là người tổ chức và điều khiển quá trình học tập của học sinh.
Với tư cách là người tổ chức, chỉ đạo điều khiển quá trình học tập của học sinh, người thầy cần phải đảm nhiệm và thực hiện tốt các chức năng sau đây:
+ Thiết kế tức là lập kế hoạch cho quá trình dạy học về cả mục đích, nội dung, phương pháp, phương tiện và hình thức dạy học. Người giáo viên cần xuất phát từ mục đích và nội dung của bài học mà thiết kế ra những tình huống thích hợp để học sinh chiếm lĩnh nó thông qua hoạt động học tập tích cực, tự giác sáng tạo theo hướng độc lập hoặc hợp tác, giao lưu.
+ Uỷ thác tức là thông qua đặt vấn đề nhận thức, tạo động cơ hứng thú người thầy biến ý đồ dạy của mình thành nhiệm vụ học tập tự nguyện, tự giác của trò và chuyển giao cho trò những tình huống để trò hoạt động và thích nghi.
+ Điều khiển quá trình hoạt động học tập của học sinh trên cơ sở thực hiện mội hệ thống mệnh lệnh, chỉ dẫn, trợ giúp, đánh giá (Bao gồm cả sự động viên).
+ Thể chế hoá tức là xác nhận, định vị kiến thức mới trong hệ thống tri thức đã có, đồng nhất hoá kiến thức riêng lẻ của học sinh thành tri thức khoa học xã hội, hướng dẫn vận dụng và ghi nhớ.
Mô hình về dạy học theo quan điểm đổi mới được thể hiện như sau:
Chất lượng hiệu quả dạy học
THẦY
TRÒ
- Thiết kế
- ủy thác 
- điều khiển
- thể chế hóa	
- Động cơ hứng thú lạc quan.
-Tích cực, tự giác, sáng tạo,hoạt động
- Tự đánh giá, tự điều chỉnh.
Tổ chức, chỉ đạo quá trình nhận thức 
Chủ thể nhận thức
C) Vai trò giáo viên khi tổ chức hoạt động nhóm 
*Thu thập thông tin về người học 
Giáo viên tìm hiểu khả năng và nhu cầu của người học: Dự đoán người học đã có những kiến thức và kỹ năng gì liên quan tới bài học. Họ có mong muốn gì khi học nội dung này.
* Lựa chọn mục tiêu kiến thức, kỹ năng cần đạt được khi hoạt động nhóm 
Giáo viên phải nắm được những hiểu biết, những vấn đề cốt lõi của bài học thông qua nghiên cứu của mình, giáo viên cần chọn nội dung thích hợp cho học sinh học nhóm. Từ đó giáo viên sẽ giúp học sinh có tâm thế sẵn sàng bước vào học nhóm.
Giáo viên phải nắm rõ kiến thức, kỹ năng và đặc biệt phải có năng lực sư phạm, có khả năng chuẩn bị chu đáo cho kế hoạch cụ thể.
* Quyết định
- Số lượng học sinh mỗi nhóm, thành lập nhóm ngẫu nhiên hay chủ định.
- Chuẩn bị tài liệu, đồ dùng.
- Sắp xếp phòng học, bố trí chỗ học cho từng nhóm .
- Chỉ định vai trò từng nhóm, từng thành viên trong nhóm .
* Giám sát can thiệp
- Hỗ trợ để hoàn thành công việc.
- Giám sát hành vi của học sinh. 
Nguời giáo viên, khéo léo trong vai trò trọng tài của mình giúp học sinh suy nghĩ chủ động hơn chứ không phải để họ chấp nhận ý kiến của mình một cách thụ động khi học sinh coi mọi lời nói của giáo viên đều đúng.
Hoạt động dạy học hợp tác nhóm chỉ đạt hiệu quả cao nếu như giáo viên: 
+ Giúp học sinh hiểu được tầm quan trọng của hoạt động nhóm trong học tập.
+ Giúp học sinh mong muốn được nói về suy nghĩ của mình, lắng nghe và hưởng ứng ý kiến của bạn cùng nhóm.
+ Nắm chắc quy trình và kế hoạch hoạt động.
+ Biết dựa vào ý kiến của người khác để tăng cường động cơ học tập.
+ Có khả năng đánh giá, điều chỉnh.
+ Có khả năng nhạy cảm với ý kiến của các thành viên khác và nhóm khác.
- Can thiệp: Đôi khi giáo viên phải tạm dừng hoạt động của nhóm để hướng dẫn lại hoặc hỏi học sinh nên làm như thế nào?
Muốn nhóm hoạt động có hiệu quả thì giáo viên cần: 
+ Đảm bảo cho mọi người đều đóng góp vào nhiệm vụ được giao.
+ Không nên vội đi đến kết luận, cần cân nhắc cả những ý kiến nhỏ.
+ Nên thận trọng trước sự nhất trí của mọi thành viên.
+ Đặt mục tiêu trước mắt, tạm thời và lâu dài, nếu cần nên thay đổi.
+ Phân công rõ ràng nhiệm vụ sao cho mọi thành viên trong nhóm đều hiểu nhiệm vụ của mình là gì và biết thời hạn hoàn thành.
+ Trước khi kết thúc hoạt động cần đánh giá ý thức làm việc của các nhóm và định hình công việc tiếp theo.
* Đánh giá hoạt động nhóm
Đánh giá ý thức làm việc của các nhóm.
Đánh giá kết quả làm việc.
5.Yêu cầu đối với học sinh :
- Người học phải trở thành chủ thể hành động, tích cực, tự giác, chủ động và sáng tạo trong hoạt động để kiến tạo kiến thức. Người học cần phải thực sự hoạt động để đạt được không chỉ những tri thức và kỹ năng của bộ môn mà quan trọng hơn là tiếp thu được cách học, cách tự học.
- Tạo ra và duy trì ở học sinh những động lực học tập mạnh mẽ. Đó là động cơ, hứng thú, niềm lạc quan của học sinh trong quá trình học tập. Những nhân tố này chính là động lực thúc đẩy mạnh mẽ học sinh tích cực, tự giác, chủ động và sáng tạo trong hoạt động hợp tác nhóm.
- Phát triển ở học sinh khả năng tự đánh giá kết quả hoạt động của mình để trên cơ sở đó bản thân học sinh có thể điều chỉnh các hoạt động của mình theo các mục tiêu đã định.
6. Yêu cầu đối với cơ sở vật chất
Để việc dạy và học tiếng Anh nói chung cũng như áp dụng thành công có hiệu quả phương pháp dạy học hợp tác theo nhóm nhỏ, thì việc tăng cường về cơ sở vật chất kỹ thuật cho dạy và học tiếng Anh là một vấn đề cấp thiết. So với thập kỷ trước đây điều kiện vật chất cho việc dạy học tiếng Anh ở các trường THCS đã được cải thiện một cách đáng kể. Trong các giờ học học tiếng Anh hầu hết học sinh trong một lớp đều có SGK. Có một số trường ở Lệ Thủy nhiều giáo viên đã sử dụng các băng hình trong các giờ học ở trên lớp và thiết kế bài học, trình diễn bài giảng trên lớp với sự trợ giúp của POWER-POINT.
Ngoài yêu cầu chính cho một giờ dạy học tiếng Anh nói chung kể trên còn có các yêu cầu quan trọng khác cho hoạt động dạy học hợp tác nhóm trên lớp như sau:
- Về kích thước phòng học: Không quá chật, cũng không quá rộng, phòng học phải có diện tích hợp lý sao cho giáo viên có thể quan sát được sự làm việc tất cả các nhóm. Nếu phòng học quá chật sẽ rất khó khăn cho việc chia nhóm, các nhóm có thể mất trật tự, hiệu quả làm việc không cao.
- Bàn ghế trong lớp cơ động, có thể kê được các bàn liền kề với nhau hoặc hai bàn quay mặt vào nhau.
- Phiếu học tập (do giáo viên chuẩn bị)
- Có máy chiếu đa năng PROJECTER thì càng thuận lợi cho hoạt động.
7. Một vài ví dụ bài giảng tiếng Anh có vận dụng phương pháp dạy học hợp tác theo nhóm mà bản thân đã vận dụng trong tiếng Anh THCS.
Ví dụ 1: Các bước thực hiện - điều khiển một hoạt động theo nhóm 4 HS:
English 7: UNIT 5 – Work and play
A: Read then answer the question
 Work in groups of 4 discuss to predict T/F statements True/ False statements.
Ba’s favorite subject is Electronics.
He is not good at fixing things.
In his free time, he learns to play the guitar.
He is not goods at drawing.
He can help his parent at home.
Step 1:
- T introduces the requirements and asks students what they have to do.
 Teacher: Now, you are going to guess which are true, which are false about Ba. Look at the satements? Who do the statements say?
Read about? S1 the 1st sentence?
S1:..
Teacher: good, S2 the next, please?
S2:..
S3..............
S4..............
Step 2:
- T asks some students again what have to do.
- Teacher: Do you have to guess or to find out in the text?
S3: guess.
Step 3:
- Divide the class into groups.
- Teacher: Now you are going to work in groups of 5 in 2 minutes( name groups of their by pointing) on the left row: 1st line is A 1, 2nd one is A2, 3rd is A3, 
4th is A4, and on the right, similar group B1, B2 ,B3, B4.
 Teacher gives the header of each group a poster including the statements then asks the leader to give the role of each member in the group.
Ready? Now discuss in your group and leader or secretary tick down.
Step 4: Sts work in groups, T. goes round to check .
Step 5: When most groups finish, stop discussing . Teacher asks students to hang their poster on the board to compare....
Step 6: T. gives feed back.
Ví dụ 2: Các bước thực hiện - điều khiển một hoạt động theo nhóm nhỏ hơn(theo cặp):
Example: The steps of controlling a pair work.
Exercise: Likes and dislikes.
Pair work: Ask what your friend likes and doesn’t like.
Ask about: food, sport, music, school subjects.
Step 1.
- Teacher introduces the exercise and show what questions and answers that students can give.
Teacher: Now, you are going to talk about things you like and things you don’t like. Look at exercise.
What question can you ask? What about food?
Ss: What food do you like?
T: Good, what answer could you give?
Ss: I like chocolate.
 I like eating fruit.
 I like rice ( and so on )
- Teacher writes the basic question the board
“ What (food) do you like?
Step 2.
- Asks students to make a model conversation.
Step 3:
- Divide the class into pairs.
Teacher: Now, you are going to work in pair in 3 minutes.
+ Ask and answer the question, number1 asks number 2 answers then change number 2 asks, number 1 answers. If there is a group of three, one asks all questions then change round turn.
Step 4:
- Students work in pairs. Teacher goes round the class, checking what everyone is taking but do not try to correct mistakes. It will be better for the teacher to silently take note mistakes.
Step 5:
- When most pairs finished, stop the activities call one by one pair.
Step 6:
- Teacher remarks the activity.
8. Kết quả đạt được sau khi thực hiện đề tài:
Thông qua việc thực hành theo cặp, nhóm học sinh ở các lớp tôi thử nghiệm đã mạnh dạn hơn, hoạt bát hơn trong các tiết học ở trên lớp. Mỗi lần tôi đưa một lượng thông tin và yêu cầu hoạt động theo cặp, nhóm là các em nắm bắt và thực hiện khá thành công. Trong khi thực hành, các em tự uốn nắn cho nhau cách phát âm, cách dùng cấu trúc câu, ngữ điệu ...Khi tổ chức cho học sinh thực hành theo cặp, nhóm, giáo viên có điều kiện để nắm bắt lượng kiến thức mà học sinh tiếp thu được từ đó có biện pháp để phát huy mặt mạnh cũng như để khắc phục những mặt tiêu cực trong quá trình luyện tập của học sinh, đáp ứng được mối quan hệ biện chứng trong quá trình dạy học.Việc vận dụng sáng kiến kinh nghiệm này bản thân tôi đã đạt được một số kết quả hết sức khả quan. Trước hết những kinh nghiệm này rất phù hợp với chương trình, SGK mới. Học sinh có hứng thú học tập hơn, tích cực chủ động sáng tạo để mở rộng vốn hiểu biết, đồng thời cũng rất linh hoạt trong việc thực hiện nhiệm vụ lĩnh hội kiến thức và phát triển kỹ năng. Không khí học tập sôi nổi nhẹ nhàng. Học sinh có cơ hội để khẳng định mình, không còn lúng túng, lo ngại khi bước vào giờ học. Số học sinh giao tiếp đối thoại được tăng lên, đặc biệt số học sinh yếu kém cũng có phần nào hiểu và sử dụng được một số câu lệnh của giáo viên ,bập bẹ trao đổi với bạn một số câu thông dụng hàng ngày nhưng đó cũng là dấu hiệu đáng mừng đối với các em. 
Đây cũng chính là những nguyên nhân đi đến những kết quả tương đối khả quan của đợt khảo sát học kì II vừa qua, cụ thể là:
Lớp
TSHS
Giỏi
Khá
T.Bình ä
Yếu
Kém
SL
%
SL
%
SL
%
SL
%
SL
%
93
33
7
21,2
8
24,2
28
84,8
5
15,2
0
0
94
35
4
11,4
9
25,5
33
94,3
2
5,7
0
0
C. NHỮNG BÀI HỌC KINH NGHIỆM
	Qua quá trình thực hiện đề tài bản thân tôi đúc rút được những bài học kinh nghiệm sau: 
*Đối với giáo viên:
- Giáo viên cần phải có sự đầu tư, phân tích tìm tòi mỗi bài dạy để tìm ra cái hay, cái mới trong phương pháp giảng dạy, giúp học sinh nắm được nhiệm vụ của hoạt động ngay từ ban đầu.
- Giáo viên phải nắm chắc và kiên trì các thủ thuật, phương pháp tổ chức nhóm, cặp.
 - Giáo viên phải luôn tạo môi trường ngoại ngữ trong giờ học và phải sử dụng tiếng Anh như là ngôn ngữ chính đễ giao tiếp. Tùy theo khối lớp và đối tượng học sinh, giáo viên có thể sử dụng những câu tiếng Anh ngắn gọn, đơn giản, dể hiểu, dể nhớ, dể thuộc. 
- Giáo viên phải luôn biết khích lệ học sinh sử dụng kiến thức đã học để sử dụng trong giao tiếp. 
- Giáo viên không nên quá chú ý đến lỗi của học sinh trong khi nói. Hãy để các em nghe và nói tự nhiên. Đừng bao giờ buộc học sinh phải dừng nói trong khi học sinh đó đang cố gắng diễn tả ý nghĩa của mình bằng tiếng Anh, làm như vậy sẽ khiến các em cảm thấy sợ mắc lỗi khi nghe và nói. 
- Giáo viên nên lồng ghép các hoạt động nghe và nói tiếng Anh với hình thức " vừa chơi - vừa học".
- Giáo viên cần phải chọn, sử dụng và phối hợp linh hoạt các phương pháp, kỹ thuật trong tiến trình của giờ dạy. ngoài các bài tập sách giáo khoa, giáo viên cần đưa ra các bài tập phù hợp, có tính năng giao tiếp thực tế cao. 
- Nên tăng cường sử dụng đồ dùng dạy học- Ngữ cảnh cần phải được giới thiệu rõ ràng.
*Đối với học sinh:
- Để giờ học đạt kết quả cao, các em nên xem bài học sắp tới. Tăng cường đông viên, giúp đỡ nhau trong học tập. Thường xuyên nghe băng đài để học cách phát âm, nói đúng ngữ điệu Tiếng Anh. 
- Tự giác thực hành các tình huống của giáo viên yêu cầu. Phát huy đồng bộ bốn kĩ năng nghe- nói- đọc- viết. Tích cực thực hành nói Tiếng Anh từ những câu đơn giản đến phức tạp. không nên nôn nóng hay nản chí vì sợ sai.
- Đưa hết khả năng để tiếp cận kiến thức, tạo thành cho mình một thói quen thực hành nhóm, cặp để các tiết sau khi giáo viên chỉ ra hiệu bằng tay và nói câu lệnh (work in pair/ work in group ) thì các em tự quay người, lắp ghép linh hoạt và thực hiện một cách có kỷ xảo và ai vào việc nấy.
- Xây dựng phong cách ngoại ngữ cho mình. Tạo ra không khí ngoại ngữ trong lớp học để thấy được môn học ngoại ngữ có đặc thù riêng. 
- Thực hành theo từng mẫu câu để rồi sau đó vận dụng làm bài tập ở sách bài tập , nâng cao, viết câu, viết đoạn.
*Đối với lãnh đạo cấp trên:
- Cần chỉ đạo các chuyên viên và giáo viên cốt cán bộ môn lập kế hoạch bồi dưỡng giáo viên, tạo điều kiện cho giáo viên có cơ hội giao lưu học hỏi và rút kinh nghiệm qua các hội thảo chuyên đề.
- Là môi trường ngoại ngữ cho nên các kỹ năng phải được luyện tập theo đăc trưng của phương pháp dạy học, vì vậy cần phải có phòng bộ môn để tránh gây tiếng ồn cho những lớp học bên cạnh cũng như không bị tác động của tiếng ồn từ ngoài vào. ( có thể cho kết hợp với các phòng bộ môn khác).
- Giới thiệu các tài liệu có liên quan để giáo viên tham khảo, học hỏi, vận dụng.
D - KẾT LUẬN	
 	Việc tổ chức học sinh làm bài tập theo cặp hoặc nhóm tạo được nhiều cơ hội luyện tập và sử dụng ngoại ngữ một cách sáng tạo trong những tình huống gần với đời sống thật của học sinh. Hơn thế nữa, sự thay đổi trong các hoạt động học tập và kiểu giao tiếp giúp duy trì được sự tập trung chú ý của các em. Qua các hoạt động này học sinh cũng ý thức hơn được rằng việc hoàn thiện bản thân họ có quyền tự chủ và chịu trách nhiệm đối với sự tiến bộ của chính mình.
 	Việc tổ chức luyện tập ngoại ngữ theo cặp/ nhóm còn giúp cho học sinh mạnh dạn hơn trong việc sử dụng ngoại ngữ. Học sinh yếu kém thường lo sợ sẽ mắc lỗi trước thầy cô của học, nhưng nếu chỉ có các bạn cùng lớp thì sự e dè đó sẽ ít hơn nhiều, học sinh sẽ vượt qua được những nhược điểm về tính cách của bản thân để học tốt hơn. Ngoài ra học cũng có cơ hội để giúp đỡ , học hỏi nhau nhiều hơn.
 	 	Trong giới hạn đề tài này tôi mới chỉ đưa ra một số kinh nghiệm bước đầu trong Vận dụng phương pháp dạy học hợp tác theo nhóm ở trên lớp trong dạy học tiếng Anh THCS chắc chắn không tránh khỏi những lúng túng, hạn chế. Rất mong sự đóng góp ý xây dựng của các bạn đồng nghiệp. 
 Tôi xin chân thành cảm ơn!	
Lệ Thuỷ, ngày 10 tháng 5 năm 2011
 	Người viết
 	Mai Thị Hương Giang
Ý KIẾN CỦA HỘI ĐỒNG KHOA HỌC NHÀ TRƯỜNG:
....................................................................................................................................................................................................................................................................
....................................................................................................................................................................................................................................................................