accesslib: get_user_access_bycontext() fetches overrides in subcontexts, intro aggr_roles_fromsess()

The main thing here is that overrides in subcontexts are
now read correctly (and still cheaply) into the access array.

Also

 - introducing aggr_roles_fromsess() with gives you a list of
   the relevant roles that affect the user in this context

 - we clear out $USER->access on login/logout

 - get_user_access_bycontext() gets a few optimisations too...

accesslib: default, guest and notloggedin roles work properly now

Changes around load_user_capability() and has_capability() to make
the default role fallbacks and guest/nonloggedin roles work.

This commit also introduces the concept of having a magic
context next to the root context in $USER->access[ra], as

 $USER->access[ra][/1] = 1 (admin roleid)
 $USER->access[ra][/1:def] = 7 (loggedinuser roleid)

and has_cap_fromsess() now checks for that magic context
as well.

accesslib: has_capability() now works for the logged in user

With this commit, the new has_capability works for the logged
in user correctly.

 - load_all_capabilities() no longer calls load_user_capability()!
   6K dbqueries less on login... ;-)

 - When delving into a context we haven't loaded yet, we call
   get_user_access_bycontext()

 - Introduce: get_user_access_bycontext()

 - Several fixes in get_user_access_sitewide()
   (renamed from get_user_sitewide_access())

 - Fixes in has_cap_fromsess()

 - Introduce access_insess() to check if we have to call
   get_user_access_bycontext() for the context

accesslib: initial has_capability() rewrite

 - has_capability() renamed has_capability_old() and we fallback
   when we cannot answer the question

 - has_capability() works great for the course-and-above contexts
   for the logged in user - does not touch the DB

 - works based on $USER->access which has a pretty compact view
   of the user's access rights...

TODO:

 - deal with contexts below the course - here we need to
   trigger the role-assignment and role-defs load when needed

 - deal with "other" contexts that hang from the system context

 - deal with global roleswitch, local roleswitch

lib/setup: declare SYSCONTEXTID to have the system context handy

accesslib: Introducing get_user_sitewide_access($userid)

This function carefully fetches all the data needed to
handle site/category/course access for a given user
as cheaply as possible.

It currently takes 3 db queries.

datalib: Introducing sql_intarray_to_in()

Trivial function to turn an array of ints into a string
usable in an IN sql clause.

user_set_preference(): minor optimisation

Don't update if the values already match...

accesslib: Introducing build_context_path()

which populates the context.path and context.depth fields

datalib:add_to_log() - avoid schema lookups, pace updates to user and user_lastaccess

* All updates to user.lastaccess and user_lastaccess.timeaccess are paced to
60s of the last update on the same record -- this should reduce the heat
on those tables.

* Updates/inserts to user_lastaccess are down with raw SQL to avoid costly
schema lookups on every request.

pagelib: Course page - preload child contexts and smarter user_allowed_editing()

With this patch we preload the child contexts for the course
and hold on to them. This means that in one DB query we have all the contexts
we are going to need.

The checks for user_allowed_editing() move from weblib:update_icon() to
user_allowed_editing(), where we cache the result, and in the process save
50% of the cap checks by testing separately blocks from modules (doh!).

Still, the cap checks here are very inefficient...

With the last 3 patches, a course page with default blocks and 9 modinstances
goes from 157 to 86 db queries when logged in as a non-editing user (guest,
student). As admin it drops from 88 to 81.

Conflicts:

lib/pagelib.php

weblib:update_course_icon() - remove access control from here

Access control for the course icon display should happen
at the page level, as we'll need to ask "can edit?" quite
a few times in the page.

The fact that this is weblib should be a good hint that
functions that print html should not be doing access control...

accesslib:get_child_contexts() reworked to use context.path

Using context.path, now get_child_contexts...

 - always takes 1 query
 - populated the context_cache
 - returns full records
 - when called with an category, it won't
   recurse into the children of courses

Also

 - All callers in accesslib changed to the new
   calling convention

A normal course page with a std blocks and a few
activities sees around 100 queries less with this patch.

Note: this commit is slightly different on HEAD/19 and on
MOODLE_18_STABLE, as groups-related tables have changed.

accesslib: Introducing cleanup_contexts() and use it in cron

The newly minted cleanup_contexts() walks the context table
matching contexts with the tables they are referencing and
clearing any leftover contexts.

minor fix for count of users

MDL-11324, only display users with moodle:course/view capability when assinging in module context or lower

Now assignment_submissions->data1 & data2 are nullable. MDL-11268

Minor improvements to messages window for wood.

MDL-1883 info for 3rd party developers in DEBUG_DEVELOPER mode

MDL-1883 improved perf when editing scales - new function xxx_scale_used_anywhere()

Fix some HTML in messages (wrong <a> and roundcorners support)

enhancements for messages: remove header and footer with CSS. increase user top frame height via JavaScript to view the whole user image.

MDL-11312 Added new grade_letters table, and new grade_items.display field.

Typo!

Merged from STABLE_18

MDL-11317 - Slashes displayed in incorrect responses for short answer questions. Fix by adding stripslashes in the appropriate place. Merged from MOODLE_18_STABLE.

moved question_make_default_categories function to questionlib.php since it is needed by other modules outside the question bank editing interface.

MDL-11318 formslib now respects a template for an element if it is set. But since formslib uses the templates to insert help buttons for setAdvanced functionality etc. if you use templates you will lose this functionality.

The "alias" role names were not being used in the role assign screens.  Now they are.  MDL-11323

added a string for backup/restore

MDL-11234, if role definitions matches, restore role mapping should be allowed with or without role assign capabilities

Automatic installer.php lang files by installer_builder (20070918)

added needsupdate flag into backup/restore, added a new switch for restore on/off for grade histories, fixed some NULL related warnings

iAdded a string for preview rows in exports

Cleaned up the display of the export pages

Some layout for the grades export download link / buttons

Adding Id to file

Added data_decode_content_links_caller() and data_decode_content_links()
to provide interlinking capabilities to restore. MDL-9576

MDL-11299 - Make objectClass string comparison case insensitive.

LDAP serves accept attribute names in a case insensitive way, so don't
force the users to use any particular spelling.

Adding data_encode_content_links() to backup, so data module
links are encoded to be transported in backup files. Part of MDL-11268.

mismatched code version in file.

MDL-11282 Just displaying a simple notice, and continuing with the regrading.

MDL-11275

MDL-11275 added (submissions). Also fixed :
Issue:
    Teachers can edit grader report preferences (including switches for quickgrading and
    quickfeedback), but do not have access to the "Turn editing on/off" button, so they
    can't do quickgrading.
Solutions:
    1.Decouple the quickgrading and quickfeedback modes from the editing mode,
        and turn them on/off through the preferences page. New capability: moodle/grade:edit
        * preferences: don't show quickgrading if no capability grade:edit
        * If quickgrading is switched off as a preference and user doesn't have manage cap, show edit icons around grades when in editing mode

MDL-11267 - Anywone who can view quiz reports can delete student attempts. Merged from MOODLE_18_STABLE.

Fixing a string I thought I fixed before ...

MDL-11310 - Multichoice edititing form should have space for 5 answers by default. Merged from MOODLE_18_STABLE.

MDL-11104
Markdown updated to latest version.

MDL-11104:
Added some extra information for markdown-extra features.

Merged from STABLE_18

Forgot to take out duplicate question count check.

Merged from STABLE_18

MDL-11279:
Code was not properly checking for empty category.
Check moved to right place and proper print_error() function called as appropriate

Merged from STABLE_18

MDL-11084, "s in grade comments causes problems

FIxed wierd blue line in forum posts

Automatic installer.php lang files by installer_builder (20070917)

MDL-11276, average calculations are inaccurate in percentage form due to double rounding

Fixed popup window call (eg from email)

removing extra number_format(), format_float() already calls number_format()

MDL-10820 Fixed double quotes in SQL statements

MDL-11230 fixing wrong include for tags library - always use require_once() instead of include() when dealing with library files!

MDL-11046 multiple tag/edit.php issues - see bug report

MDL-11301 tag autocomplete on edit page works again

Delete one unused table when grading online assignment submissions.

Stylise online assignment word count.

MDL-11300
1/ potential sql injection through tag types - missing param type + can add new types + usually no addslashes before update of tags
2/ paging does not work at all
3/ missing param type definitions
4/ not xhtml strict compliant
5/ CSRF - missing sesskey checks
6/ UI code in tag/lib.php - should be in manage.php or other file
7/ missing localization of types - default/standard

Fixing assignment submission visualization for wood.

MDL-11297 adding new PARAM_TAG - numeric tags not allowed

Hide the metacourse dropdown menu if the course
isn't a metacourse and general XHTML compliance. MDL-9922

Merged from MOODLE_18_STABLE

fixed undefined notice

MDL-11298 use textlib_get_instance() instead of new textlib()

MDL-11048 + MDL-11297 improved tag normalisation, more security

Prevent some warning when restoring site courses... MDL-10054 MDL-10118

Merged from MOODLE_18_STABLE

Show the roll dates option only if the backup course has a start date
(some formats like main page, social..., haven't it and rolling dates
from 0 produces crazy dates. MDL-10125

Merged from MOODLE_18_STABLE

MDL-11297 adding new PARAM_TAG and PARAM_TAGLIST that are needed for blog and interest tags

MDL-11048 adding new method to textlib strtotitle() - please note that is may not be usable in all locales, it might also produce different results when mbstring available

improved accessibility of user edit page - adding help icons, removing incorrect static help from interest, improving interests strings

fixed incorrect coding style {}

fixed warning - must initialise objects properly

MDL-9574 + MDL-9607 fixed undefined $user->id in personal context

Fixed wrong link to log report. Shouldn't these links be in php
code instead of lang files? MDL-11281

Merged from MOODLE_18_STABLE

Automatic installer.php lang files by installer_builder (20070916)

Remove additional check when dealing with hidden courses in LDAP enrolment.

The check is superfluous and uses an inexistant variable ($type) that
was removed when we switched to role based enrolment.

Fixes MDL-11098 MDL-10282 and MDL-8346.

MDL-11296 fixed incorrect detection of duplicate scales in course

applying the same patch to advcheckbox - Fixes MDL-8627, "HTML QuickForm displays (some?) disabled elements in a non-accessible way", overrides parent::getFrozenHtml.

MDL-11295 editorshortcutshelpbutton breaking xhtml strict

MDL-9542 new function needed for showing of final grades in Quiz + minor changes in grading public API used by modules

fixed wrong $options - this->keepdrop_options used instead

MDL-10277 Force password change cannot be unchecked once selected

MDL-11292 fixed Cannot create child auth plugins - patch by Mark Nielsen; used inlude_once() when searching for functions/methods in files

MDL-11282 Using notice_yesno(), but not sure how to provide a backlink with the cancel action...

MDL-11278 Implementation is complete, but grade_categories records in DB are not affected by global settings. This way, when global settings are switched back to "Do not Force", the original category settings will be in place.

MDL-11278 Admin settings page completed, implementation of settings in the gradebook coming up next.

MDL-11271 - The closing bracket "}" can't be used in cloze question type. Now, you can excape a closing } with a backslash. Do feedback, as well as answer. Merged from MOODLE_18_STABLE.

MDL-11271 - The closing bracket "}" can't be used in cloze question type. Now, you can excape a closing } with a backslash. Merged from MOODLE_18_STABLE.

MDL-11284 - Can't save edited questions

MDL-11278 Admin settings page completed, implementation of settings in the gradebook coming up next.

MDL-11274, hide grades in the grader report if the current grades has no viewhidden capability

Issue:
    The number of submissions in the Group average and Course average calculations
    should be shown in brackets. (submissions) should be added after the Group average
    and Course average labels.
Solution:
    new grader report preference (Display number of grades in average cells).

Fix the location of the link to the site-wide grading preferences

Changing string for Overall average (was logged under MDL-11233 even though that's not strictly the correct bug)

Now using one cross-db solution to be able to
simulate the status boolean ins assignment
submissions. MDL-8164 & MDL-10846

MDL-11081 and MDL-11211 - Implement quiz_question_list_instances. The lach of this function was causing a horrible dataloss bug: MDL-11211. Fix thanks to Janne Mikkonen, refined by me. Merged from MOODLE_16_STABLE.